PostgreSQL
 sql >> Baza danych >  >> RDS >> PostgreSQL

Optymalny parametr chunksize w pandas.DataFrame.to_sql

W moim przypadku 3M wierszy z 5 kolumnami zostało wstawionych w 8 minut, gdy użyłem pand to_sql parametry funkcji jako chunksize=5000 i method='multi'. To była ogromna poprawa, ponieważ wstawianie wierszy 3M za pomocą Pythona do bazy danych stawało się dla mnie bardzo trudne.



  1. Database
  2.   
  3. Mysql
  4.   
  5. Oracle
  6.   
  7. Sqlserver
  8.   
  9. PostgreSQL
  10.   
  11. Access
  12.   
  13. SQLite
  14.   
  15. MariaDB
  1. SQLAlchemy z domyślną klasą danych nie wypełnia bazy danych postgres

  2. Jak utworzyć użytkownika z uprawnieniami superużytkownika w PostgreSQL?

  3. Jak wygenerować unikalny ciąg na rekord w tabeli w Postgresie?

  4. Warunek na liczbę powiązanych rekordów w SQL

  5. Mapuj pole punktu geometrii PostGIS za pomocą Hibernate na Spring Boot