问题描述
尝试导入熊猫数据框时出现上述错误:
import pandas as pd
from sqlalchemy import create_engine
engine = create_engine('mysql://username:password@localhost/dbname')
c = getsomedata()
fields = ['user_id', 'timestamp', 'text']
c1 = c[fields].reset_index()
c1.to_sql(name='comments', con=engine, if_exists='replace', index=False)
这个MySql问题有很多问题-但是如何处理熊猫导入?
1楼
对我来说,解决方案非常简单:使用chunksize
选项:
c1.to_sql(name='comments', con=engine, chunksize=1000, if_exists='replace', index=False)
^^^^^^^^^^^^^^^
数据包过大可能与有关。