使用 Python sqlite3 API 的表、数据库模式、转储等列表
Posted
技术标签:
【中文标题】使用 Python sqlite3 API 的表、数据库模式、转储等列表【英文标题】:List of tables, db schema, dump etc using the Python sqlite3 API 【发布时间】:2010-09-23 06:03:56 【问题描述】:由于某种原因,我找不到与 sqlite 的交互式 shell 命令等效的方法:
.tables
.dump
使用 Python sqlite3 API。
有类似的吗?
【问题讨论】:
我建议将问题重命名为非 python 特定的内容,因为答案实际上对于使用 SQL 的接口是通用的。 是的,虽然我在询问时期待使用 python API。我会尝试找到正确的名称。 如果想从 sqlite3 命令提示符显示表格,请参考***.com/questions/82875/…。如果使用 Python 包 sqlite3,请在此处查看 Davoud Taghawi-Nejad 的回答。我建议 OP 将 Python 添加回问题标题并选择 Davoud 的答案。我通过谷歌搜索“show tables Python sqlite3”找到了这个页面,因为谷歌知道旧的问题标题。 SO 内的搜索将无法在此处登陆。没有 Python 的角度,链接的重复问题 82875 获得了更多的群众智慧。 【参考方案1】:在 Python 中:
con = sqlite3.connect('database.db')
cursor = con.cursor()
cursor.execute("SELECT name FROM sqlite_master WHERE type='table';")
print(cursor.fetchall())
注意我的另一个answer。使用 pandas 有一种更快的方法。
【讨论】:
对于来复制/粘贴的用户:一定要cursor.close()
和db.close()
这似乎是正确的答案,但 OP 批准了另一个...
@a_a_a 嗯 4 年的差异?【参考方案2】:
您可以通过查询 SQLITE_MASTER 表来获取表和模式列表:
sqlite> .tab
job snmptarget t1 t2 t3
sqlite> select name from sqlite_master where type = 'table';
job
t1
t2
snmptarget
t3
sqlite> .schema job
CREATE TABLE job (
id INTEGER PRIMARY KEY,
data VARCHAR
);
sqlite> select sql from sqlite_master where type = 'table' and name = 'job';
CREATE TABLE job (
id INTEGER PRIMARY KEY,
data VARCHAR
)
【讨论】:
sqlite> .schema job
python 中的语法无效...我错过了什么?
@jbuddy_13 见other answer
@jbuddy_13 sqlite>
是 sqlite 命令行客户端提示符。该示例的目的是演示如何查询数据库以列出表和架构。
对不起,但我真的不知道为什么这是公认的答案,这个问题是针对 python 而不是 SQL 语言的
@KostasMarkakis 真的很难想象我列出的信息会如何导致使用 API 的解决方案吗?【参考方案3】:
在 python 中执行此操作的最快方法是使用 Pandas(0.16 及更高版本)。
转储一张表:
db = sqlite3.connect('database.db')
table = pd.read_sql_query("SELECT * from table_name", db)
table.to_csv(table_name + '.csv', index_label='index')
转储所有表:
import sqlite3
import pandas as pd
def to_csv():
db = sqlite3.connect('database.db')
cursor = db.cursor()
cursor.execute("SELECT name FROM sqlite_master WHERE type='table';")
tables = cursor.fetchall()
for table_name in tables:
table_name = table_name[0]
table = pd.read_sql_query("SELECT * from %s" % table_name, db)
table.to_csv(table_name + '.csv', index_label='index')
cursor.close()
db.close()
【讨论】:
对于来复制/粘贴的用户:一定要cursor.close()
和db.close()
。
或更好地使用with sqlite3.connect('database.db') as db:
【参考方案4】:
我不熟悉 Python API,但您可以随时使用
SELECT * FROM sqlite_master;
【讨论】:
【参考方案5】:这是一个简短的 python 程序,用于打印这些表的表名和列名(python 2。python 3 如下)。
import sqlite3
db_filename = 'database.sqlite'
newline_indent = '\n '
db=sqlite3.connect(db_filename)
db.text_factory = str
cur = db.cursor()
result = cur.execute("SELECT name FROM sqlite_master WHERE type='table';").fetchall()
table_names = sorted(zip(*result)[0])
print "\ntables are:"+newline_indent+newline_indent.join(table_names)
for table_name in table_names:
result = cur.execute("PRAGMA table_info('%s')" % table_name).fetchall()
column_names = zip(*result)[1]
print ("\ncolumn names for %s:" % table_name)+newline_indent+(newline_indent.join(column_names))
db.close()
print "\nexiting."
(编辑:我一直在定期对此进行投票,所以这里是寻找这个答案的人的 python3 版本)
import sqlite3
db_filename = 'database.sqlite'
newline_indent = '\n '
db=sqlite3.connect(db_filename)
db.text_factory = str
cur = db.cursor()
result = cur.execute("SELECT name FROM sqlite_master WHERE type='table';").fetchall()
table_names = sorted(list(zip(*result))[0])
print ("\ntables are:"+newline_indent+newline_indent.join(table_names))
for table_name in table_names:
result = cur.execute("PRAGMA table_info('%s')" % table_name).fetchall()
column_names = list(zip(*result))[1]
print (("\ncolumn names for %s:" % table_name)
+newline_indent
+(newline_indent.join(column_names)))
db.close()
print ("\nexiting.")
【讨论】:
【参考方案6】:如果有人想用 Pandas 做同样的事情
import pandas as pd
import sqlite3
conn = sqlite3.connect("db.sqlite3")
table = pd.read_sql_query("SELECT name FROM sqlite_master WHERE type='table'", conn)
print(table)
【讨论】:
Jupyter Notebook 和 Pandas 不需要回答这个问题 没有必要抨击这样一个有用的答案。虽然像往常一样,建议使用上下文管理器。 我觉得这是最干净、最有用的答案。【参考方案7】:显然Python 2.6中包含的sqlite3版本有这个能力:http://docs.python.org/dev/library/sqlite3.html
# Convert file existing_db.db to SQL dump file dump.sql
import sqlite3, os
con = sqlite3.connect('existing_db.db')
with open('dump.sql', 'w') as f:
for line in con.iterdump():
f.write('%s\n' % line)
【讨论】:
注意这一点,如果表格中填充了 INSERT INTO 语句,它将打印所有数据! 谢天谢地,INSERT INTO
语句是单行的,所以很容易用 if line.startswith("INSERT INTO") ...
转义【参考方案8】:
如果您只想打印出数据库中的所有表和列,有些人可能会发现我的函数很有用。
在循环中,我使用 LIMIT 0 查询每个 TABLE,因此它只返回没有所有数据的标题信息。您从中创建一个空 df,并使用可迭代的 df.columns 打印出每个列名。
conn = sqlite3.connect('example.db')
c = conn.cursor()
def table_info(c, conn):
'''
prints out all of the columns of every table in db
c : cursor object
conn : database connection object
'''
tables = c.execute("SELECT name FROM sqlite_master WHERE type='table';").fetchall()
for table_name in tables:
table_name = table_name[0] # tables is a list of single item tuples
table = pd.read_sql_query("SELECT * from LIMIT 0".format(table_name), conn)
print(table_name)
for col in table.columns:
print('\t' + col)
print()
table_info(c, conn)
Results will be:
table1
column1
column2
table2
column1
column2
column3
etc.
【讨论】:
【参考方案9】:经过大量的摆弄,我在sqlite docs 找到了一个更好的答案,用于列出表的元数据,甚至是附加的数据库。
meta = cursor.execute("PRAGMA table_info('Job')")
for r in meta:
print r
关键信息是table_info的前缀,而不是my_table的附加句柄名称。
【讨论】:
我在你写的 sn-p 中有很多错误,没有看到例如参考文档或其他示例中的“db_alias”。在其他示例的上下文中,我认为您想要这条线,例如Job
表:meta = cursor.execute("PRAGMA table_info('Job')")
你的第一行似乎与其余部分无关。【参考方案10】:
查看here 进行转储。看来sqlite3库中有dump函数。
【讨论】:
我正在尝试: import sqlite3 con = sqlite3.connect("test.db") con.dump() 它失败了......我一直在检查【参考方案11】:#!/usr/bin/env python
# -*- coding: utf-8 -*-
if __name__ == "__main__":
import sqlite3
dbname = './db/database.db'
try:
print "INITILIZATION..."
con = sqlite3.connect(dbname)
cursor = con.cursor()
cursor.execute("SELECT name FROM sqlite_master WHERE type='table';")
tables = cursor.fetchall()
for tbl in tables:
print "\n######## "+tbl[0]+" ########"
cursor.execute("SELECT * FROM "+tbl[0]+";")
rows = cursor.fetchall()
for row in rows:
print row
print(cursor.fetchall())
except KeyboardInterrupt:
print "\nClean Exit By user"
finally:
print "\nFinally"
【讨论】:
【参考方案12】:我已经用 php 实现了一个 sqlite 表模式解析器,你可以在这里查看:https://github.com/c9s/LazyRecord/blob/master/src/LazyRecord/TableParser/SqliteTableDefinitionParser.php
您可以使用此定义解析器来解析定义,如下面的代码:
$parser = new SqliteTableDefinitionParser;
$parser->parseColumnDefinitions('x INTEGER PRIMARY KEY, y DOUBLE, z DATETIME default \'2011-11-10\', name VARCHAR(100)');
【讨论】:
以上是关于使用 Python sqlite3 API 的表、数据库模式、转储等列表的主要内容,如果未能解决你的问题,请参考以下文章