Производительность Pandas to_sql очень медленнаяPython

Программы на Python
Ответить Пред. темаСлед. тема
Anonymous
 Производительность Pandas to_sql очень медленная

Сообщение Anonymous »


Я пытаюсь вставить фрейм данных pandas с 200 столбцами на сервер mssql через свой локальный компьютер. Я создаю и использую SQL-соединение, как показано ниже:

engine = sqlalchemy.create_engine("mssql+pyodbc:///?odbc_connect=%s" % params, fast_executemany=True) alchemy_engine = engine.connect() output_df.to_sql(output_tablename,schema='dbo', con = alchemy_engine, if_exists = 'replace', index=False) Но загрузка этих записей занимает слишком много времени. Пробовали добавить размер фрагмента в функцию_sql, но это не ускоряет процесс. В настоящее время загрузка 65 тысяч записей занимает 1,5 часа. Как я могу ускорить этот процесс?
Реклама
Ответить Пред. темаСлед. тема

Быстрый ответ

Изменение регистра текста: 
Смайлики
:) :( :oops: :roll: :wink: :muza: :clever: :sorry: :angel: :read: *x)
Ещё смайлики…
   
К этому ответу прикреплено по крайней мере одно вложение.

Если вы не хотите добавлять вложения, оставьте поля пустыми.

Максимально разрешённый размер вложения: 15 МБ.

  • Похожие темы
    Ответы
    Просмотры
    Последнее сообщение

Вернуться в «Python»