Schneller Weg, um die Zeilenanzahl einer Tabelle in PostgreSQL zu ermitteln

Das Zählen von Zeilen in big -Tabellen ist in PostgreSQL als langsam bekannt. Um eine genaue Anzahl zu erhalten, muss aufgrund der Beschaffenheit von MVCC eine vollständige Anzahl von Zeilen durchgeführt werden. Es gibt eine Möglichkeit, beschleunigt dies dramatisch, wenn der Zähler nichtgenau sein muss, wie es in Ihrem Fall zu sein scheint.

Anstelle von exact count (slow bei großen Tabellen):

SELECT count(*) AS exact_count FROM myschema.mytable;

Sie erhalten eine genaue Schätzung wie folgt (extrem schnell):

SELECT reltuples::bigint AS estimate FROM pg_class where relname='mytable';

Wie nahe die Schätzung liegt, hängt davon ab, ob Sie ANALYZE genug ausführen. Es ist normalerweise sehr nahe.
Siehe das PostgreSQL Wiki FAQ .
Oder die dedizierte Wiki-Seite für die Leistung von count (*) .

Besser noch

Der Artikel im PostgreSQL-Wiki ist war etwas schlampig. Dabei wurde die Möglichkeit ignoriert, dass sich in einer Datenbank mehrere Tabellen mit demselben Namen befinden können - in verschiedenen Schemata. Um das zu berücksichtigen:

SELECT c.reltuples::bigint AS estimate
FROM   pg_class c
JOIN   pg_namespace n ON n.oid = c.relnamespace
WHERE  c.relname = 'mytable'
AND    n.nspname = 'myschema'

Oder noch besser

SELECT reltuples::bigint AS estimate
FROM   pg_class
WHERE  oid = 'myschema.mytable'::regclass;

Schneller, einfacher, sicherer, eleganter. Siehe das Handbuch zu Objektidentifikationstypen .

Verwenden Sie to_regclass('myschema.mytable') in Postgres 9.4+, um Ausnahmen für ungültige Tabellennamen zu vermeiden:

• So prüfen Sie, ob eine Tabelle in einem bestimmten Schema vorhanden ist

TABLESAMPLE SYSTEM (n) in Postgres 9.5+

SELECT 100 * count(*) AS estimate FROM mytable TABLESAMPLE SYSTEM (1);

Wie @a_horse kommentiert kann die neu hinzugefügte Klausel für den Befehl SELECT nützlich sein, wenn Statistiken in pg_class aus irgendeinem Grund nicht aktuell genug sind. Zum Beispiel:

• Keine autovacuum läuft.
• Direkt nach einer großen INSERT oder DELETE.
• TEMPORARY -Tabellen (die nicht von autovacuum abgedeckt werden).

Dies betrifft nur eine zufällige Auswahl von Blöcken aus n% (1 im Beispiel) und die Anzahl der darin enthaltenen Zeilen. Ein größeres Muster erhöht die Kosten und reduziert den Fehler. Die Genauigkeit hängt von mehreren Faktoren ab:

• Verteilung der Zeilengröße Wenn ein bestimmter Block breiter als üblich ist, ist die Anzahl niedriger als üblich usw.
• Tote Tupel oder eine FILLFACTOR belegen Platz pro Block. Bei ungleichmäßiger Verteilung in der Tabelle ist die Schätzung möglicherweise falsch.
• Allgemeine Rundungsfehler.

In den meisten Fällen ist die Schätzung von pg_class schneller und genauer.

Antwort auf die eigentliche Frage

Zuerst muss ich die Anzahl der Zeilen in dieser Tabelle kennen, wenn die Summe count ist größer als eine vordefinierte Konstante

Und ob es ...

... ist in dem Moment möglich, in dem die Zählung meinen konstanten Wert passiert, wird es Stoppen Sie die Zählung (und warten Sie nicht, um die Zählung zu beenden, um die Zeilenzahl .__ zu informieren, die größer ist).

Ja. Sie können eine Unterabfrage mit LIMIT verwenden:

SELECT count(*) FROM (SELECT 1 FROM token LIMIT 500000) t;

Postgres hört auf, über die angegebene Grenze hinaus zu zählen, Sie erhalten einen genauen und aktuellen - Zähler für bis zu n Zeilen (im Beispiel 500000) und ansonsten n. Nicht annähernd so schnell wie die Schätzung in pg_class.