将csv读入数据库SQLite3 ODO Python

问题描述:

我想在使用ODO,SQLite3和Python的新数据库中将csv读入新表中。将csv读入数据库SQLite3 ODO Python

我下面这些指南:

https://media.readthedocs.org/pdf/odo/latest/odo.pdf http://odo.pydata.org/en/latest/perf.html?highlight=sqlite#csv-sqlite3-57m-31s

我尝试以下操作:

import sqlite3 
import csv 
from odo import odo 

file_path = 'my_path/' 
# In this case 'my_path/' is a substitute for my real path 

db_name = 'data.sqlite' 

conn = sqlite3.connect(file_path + db_name) 

这就造成内file_path一个新的SQLite文件data.sqlite。我可以在文件夹中看到它。

当我再尝试读我的CSV到这个数据库中,我得到以下错误:

csv_path = 'my_path/data.csv' 
odo(csv_path, file_path + db_name) 
conn.close() 

NotImplementedError: Unable to parse uri to data resource: # lists my path 

你能帮忙吗?

+0

“这将创建一个新的SQLite文件data.sqlite FILE_PATH内”:是吗? file_path + db_name的值只是字符串“my_pathdata.sqlite”,因为你没有把分隔符 – WNG

+0

@WNG道歉,更正了。 – Chuck

没有感谢ODO文档,这成功地在一个新的数据库中创建一个新表,并在csv文件到该数据库中读取:

https://docs.python.org/2/library/sqlite3.html:[1]用

import sqlite3 
import csv 
from odo import odo 

# [1] 

# Specify file path 
file_path = 'my_path/' 
# In this case 'my_path/' is a substitute for my real path 

# Specify csv file path and name 
csv_path = file_path + 'data.csv' 

# Specify database name 
db_name = 'data.sqlite' 

# Connect to new database 
conn = sqlite3.connect(file_path + db_name) 

# [2] 

# Use Odo to detect the shape and datatype of your csv: 
data_shape = discover(resource(csv_path)) 

# Ready in csv to new table called 'data' within database 'data.sqlite' 
odo(pd.read_csv(csv_path), 'sqlite:///' + file_path + 'data.sqlite::data', dshape=data_shape) 

# Close database 
conn.close() 

来源

https://*.com/a/41584832/2254228python odo sql AssertionError: datashape must be Record type, got 0 * {...}

源头在[2]中使用http://sebastianraschka.com/Articles/2014_sqlite_in_python_tutorial.html#creating-a-new-sqlite-database https://*.com/a/33316230/2254228 what is difference between .sqlite and .db file?

的ODO文件是在这里(好运气......)https://media.readthedocs.org/pdf/odo/latest/odo.pdf

我发现在文档网站和GitHub上的文件是不同的。请使用github版本作为参考。

NotImplementedError: Unable to parse uri to data resource

误差在此section被提及。

您可以通过使用

pip install odo[sqlite]pip install odo[sqlalchemy]

然后如果你使用Windows,你可能会遇到其他错误解决和小户0.5.0:

AttributeError: 'DiGraph object has no attribute 'edge'

安装networkx 1.11代替networkx的2.0可以解决这个错误。 (reference

pip uninstall networkx 
pip install networkx==1.11 

我希望这将有助于