Forums PostgreSQL.fr

je fais 50 fois les 3 instructions en remplaçant tble_old_x1 par tble_old_xi (i=1 à 50) et tble_x1 par tble_xi (i=1 à 50) final ne changeant pas

Bonjour,

Après quelques jours les pieds dans l'eau je reviens avec ma question du départ, qui est comment mettre à jour toutes les valeurs de 5 colonnes d'une table contenant un peu plus de 600 000 lignes ?
Comme écrit précédemment j'ai créé le script sql contenant les 600 000 update mais vous avez l'air de dire que cela n'est pas la meilleur chose à faire !! (et je ne m'en offusque pas :-))

Pour en revenir aussi à l'interrogation de Guillaume sur les erreurs que j'avais déjà remarqué, je l'avais écrit dans le message intitulé "Mise à jour d'une "grosse" table" qui date du 8/07/2009.
Voici ce que j'écrivais :

Merci

RB

Pas si je découpe ma requête en plusieurs sous requêtes :

soit tb1, et tb2 les tables originales

select T1.a, sum(T1.b*T2.c)
from (select a, b from tb1 where a=e) T1, (select c, d from tb2 where d=e) T2
where T1.a=T2.d

et si je fais ça autant de fois que de valeurs e différentes. Cela devrait me donner 80 fichiers csv. Je pourrais les concaténer avec d'autres outils que postgresql mais si celui permet de rajouter des lignes à un fichier csv existant cela m'éviterait de passer par 15 outils différents.

merci

RB

Merci pour ce début de réponse.

En fait je travaille beaucoup (et exclusivement) avec pgadmin et quand et lance ma requête (sans le COPY), le serveur me répond au bout d'un moment :

ERREUR:  n'a pas pu écrire le bloc 7134534 du fichier temporaire : No space left on device
HINT:  Peut-être manquez-vous de place disque ?

ma requête est une multiplication entre 2 deux tables l'une faisant 176 millions de lignes et l'autre 4000 lignes : le résultats de la requête devrait faire 6 millions de lignes (agrégation des valeurs multipliées)

Je pense que le stockage en mémoire (ou sur le disque???) de la requête est trop grosse !!

si vous avez des idées ou si il faut que je dise des choses plus précises, dites le moi sans problème !!

RB

rebonjour,

l'erreur viendrait de pgadmin qui ne supporte pas de réaliser quelques 36600 requêtes !!!

j'ai juste effectué ces requêtes en 3 fois.

merci encore de vos aides

RB

Woua woua woua !!!

Entre temps j'avais commencé à réfléchir à quelque chose du genre (il faut en plus que je créé les contraintes et les index dans les tables de destination sachant qu'elles n'existent pas dans les tables sources) à faire pour toutes les tables

---------
-- xxx --
---------
DELETE FROM xxx;

INSERT INTO xxx(aaa, bbb, ccc, ddd, eee, fff, ggg, hhh, iii, jjj, kkk)
    SELECT t1.aaa, t1.bbb, t1.ccc, t1.ddd, t1.eee, t1.fff, t1.ggg, t1.hhh, t1.iii, t1.jjj, t1.kkk
           FROM dblink('dbname=dbsource user=postgres password=pwd'::text, 
           'SELECT aaa, bbb, ccc, ddd, eee, fff, ggg, hhh, iii, jjj, kkk
	  FROM xxx'::text) t1(aaa serial, bbb bytea, ccc double precision, ddd character(30), eee character(50), fff double precision, ggg double precision, hhh integer, iii double precision, jjj double precision, kkk double precision);

ALTER TABLE xxx ALTER COLUMN aaa SET NOT NULL;
ALTER TABLE xxx ALTER COLUMN bbb SET NOT NULL;
ALTER TABLE xxx ALTER COLUMN ccc SET NOT NULL;
ALTER TABLE xxx ALTER COLUMN ddd SET NOT NULL;
ALTER TABLE xxx ALTER COLUMN eee SET NOT NULL;
ALTER TABLE xxx ALTER COLUMN fff SET NOT NULL;
ALTER TABLE xxx ALTER COLUMN ggg SET NOT NULL;
ALTER TABLE xxx ALTER COLUMN hhh SET NOT NULL;
ALTER TABLE xxx ALTER COLUMN iii SET NOT NULL;
ALTER TABLE xxx ALTER COLUMN jjj SET NOT NULL;
ALTER TABLE xxx ALTER COLUMN kkk SET NOT NULL;

ALTER TABLE xxx ADD CONSTRAINT xxx_pkey PRIMARY KEY(aaa);
ALTER TABLE xxx ADD CONSTRAINT xxx_fff_fkey FOREIGN KEY (fff) REFERENCES yyy (fff) MATCH SIMPLE ON UPDATE NO ACTION ON DELETE NO ACTION;
ALTER TABLE xxx ADD CONSTRAINT xxx_ccc_fkey FOREIGN KEY (ccc) REFERENCES zzz (ccc) MATCH SIMPLE ON UPDATE NO ACTION ON DELETE NO ACTION;

CREATE UNIQUE INDEX idx_xxx ON xxx USING btree (aaa);

En attente de vos commentaires

Merci

RB

OK merci et dommage :-)

RB

Merci,

je l'ai exécuter (dans chaque base) avec pgadminIII ne comprenant pas grand chose à la console pgsql !!

et Ô miracle ça fonctionne !!

Encore merci

Bonne Journée

RB