J'ai déjà quelques millions de lignes dans ma base de données. Je ne connaissais pas le type de données PostgreSQL UUID lorsque j'ai conçu mon schéma.
L'une des tables contient 16 millions de lignes (environ 3,5 millions à 4 millions d'enregistrements par fragment), augmentant à environ 500 000 enregistrements par jour. J'ai encore le luxe de démonter le système de production pendant quelques heures si nécessaire. Je n'aurai pas ce luxe dans une ou deux semaines.
Ma question est la suivante: cela vaudra-t-il la peine de le faire? Je me pose des questions sur les performances de JOIN, l'utilisation de l'espace disque (le vidage gzip complet est de 1,25 Gio), des choses de cette nature.
Le schéma de table est:
# \d twitter_interactions
Table "public.twitter_interactions"
Column | Type | Modifiers
-------------------------+-----------------------------+-----------
interaction_id | character(36) | not null
status_text | character varying(1024) | not null
screen_name | character varying(40) | not null
twitter_user_id | bigint |
replying_to_screen_name | character varying(40) |
source | character varying(240) | not null
tweet_id | bigint | not null
created_at | timestamp without time zone | not null
Indexes:
"twitter_interactions_pkey" PRIMARY KEY, btree (interaction_id)
"twitter_interactions_tweet_id_key" UNIQUE, btree (tweet_id)
"index_twitter_interactions_on_created_at" btree (created_at)
"index_twitter_interactions_on_screen_name" btree (screen_name)
Triggers:
insert_twitter_interactions_trigger BEFORE INSERT ON twitter_interactions FOR EACH ROW EXECUTE PROCEDURE twitter_interactions_insert_trigger()
Number of child tables: 9 (Use \d+ to list them.)
la source
Je ne suis pas un postgres par un effort d'imagination, mais d'après ce que je sais de SQL Server, plus vous pouvez insérer de lignes sur une page de données, meilleures sont les performances que vous allez avoir (la lecture de données à partir du disque est généralement opération la plus chère). Ainsi, le passage d'un champ large de 36 ish 1 octet à un GUID 16 octets semble être une économie de coûts directe. Moins vous pouvez effectuer de lectures, plus vite vous pouvez renvoyer des résultats. Tout cela suppose bien sûr qu'un GUID / UUID satisfait les besoins commerciaux de la table. Si un UUID le satisfait, serait-ce un bigint ? Cela réduirait davantage votre stockage coûte encore 8 octets par ligne.
Modifier 1
Pour les données de caractères dans Postgres, il y a un coût de stockage supplémentaire pour elles. Les chaînes courtes, moins de 127 octets ont une surcharge de 1 octet tandis que tout ce qui a plus de 4 octets est la façon dont le deuxième répondant a proposé un coût de 40 octets pour un champ de 36 octets. Mais il y a aussi une option pour la compression de chaîne, donc peut-être que cela ne coûtera pas le plein 40. Je ne peux pas dire quel serait le coût final mais les fondamentaux restent: tout ce qui dépasse 16 octets augmentera le coût de stockage, prendra plus de temps à lire et consommer plus de mémoire.
la source
Outre le problème d'espace, gardez à l'esprit que vous devrez modifier chaque table pour utiliser le type de données correct, sinon vos performances de jointure seront très mauvaises.
la source
En plus de l'économie de taille des données et des index (comme d'autres l'ont dit), ce qui se traduit par des économies d'E / S, la chose que vous devez considérer est de savoir comment allez-vous générer de nouvelles valeurs
interaction_id
et quel sera l'impact sur la index et conditions de requête (jointures).Pour l'index - il sera plus petit, cependant, si un grand nombre de vos requêtes utilisent des analyses d'index, le passage aux UUID peut rendre les analyses d'index impossibles (selon la façon dont vous générerez les UUID) et
bigint
peut être un bien meilleur choix.Enfin, comme l'impact réel sur les performances dépend également de vos modèles d'utilisation et de la distribution des données, vous devez exécuter des tests et disposer d'un environnement de développement et de test dans lequel vous pouvez tester vos modifications.
Cela vous donnera une réponse beaucoup plus exacte sur l'impact sur les performances.
la source