sql >> Databáze >  >> RDS >> PostgreSQL

Optimální parametr chunksize v pandas.DataFrame.to_sql

V mém případě byly 3 miliony řádků s 5 sloupci vloženy za 8 minut, když jsem použil pandy to_sql parametry funkce jako chunksize=5000 a method='multi'. To bylo obrovské zlepšení, protože vkládání 3M řádků pomocí pythonu do databáze pro mě začalo být velmi obtížné.



  1. Dotaz na nejnovější zprávu v každé konverzaci se všemi ostatními uživateli

  2. Formát času Rails Activerecord/Postgres

  3. SQL Injection Prevention

  4. Použití výrazů k filtrování dat databáze