sql >> Databáze >  >> RDS >> Mysql

Použití libpqxx pro hromadné ukládání dat NEBO jak použít příkaz COPY v libpqxx

pushLog funkce odevzdá každý insert samostatně a odevzdání je pomalé.

Jak je vysvětleno v dokumentaci Vyplňování databáze :

Také:

Ve vašem případě by to však byl spíše problém než výhoda, protože každý INSERT může selhat při porušení primárního klíče, čímž se zruší předchozí INSERT od posledního odevzdání. Upozorňujeme, že by to byl také problém s COPY , měli byste to použít.

Vzhledem k tomu, že je skutečně nutné seskupovat dotazy v transakcích kvůli výkonu, musíte porušení primárního klíče řešit způsobem, který transakci nezruší.

Obvykle se používají dvě metody:

  1. Vyhněte se chybě:INSERT INTO... WHERE NOT EXISTS (SELECT 1 FROM table WHERE primary_key=...)

  2. Zachyťte chybu vložením do funkce plpgsql, která má blok EXCEPTION ignorující itr. Konkrétní INSERT(y) způsobující duplikát budou zrušeny, ale transakce nebude přerušena.

Pokud máte souběžné vložky, je třeba tyto metody upřesnit pomocí strategie zamykání.




  1. Jak vybrat poslední záznam z tabulky MySQL pomocí syntaxe SQL

  2. Arabský znak ???????? na php a mysql

  3. Postgres je nejlepší databáze – Důvod č. 2:Licence

  4. automatické zvýšení pomocí řetězce čísel a písmen