使用 Python sqlite3 API 的表、数据库模式、转储等列表

Posted

技术标签:

【中文标题】使用 Python sqlite3 API 的表、数据库模式、转储等列表【英文标题】:List of tables, db schema, dump etc using the Python sqlite3 API 【发布时间】:2010-09-23 06:03:56 【问题描述】:

由于某种原因,我找不到与 sqlite 的交互式 shell 命令等效的方法:

.tables
.dump

使用 Python sqlite3 API。

有类似的吗?

【问题讨论】:

我建议将问题重命名为非 python 特定的内容,因为答案实际上对于使用 SQL 的接口是通用的。 是的,虽然我在询问时期待使用 python API。我会尝试找到正确的名称。 如果想从 sqlite3 命令提示符显示表格,请参考***.com/questions/82875/…。如果使用 Python 包 sqlite3,请在此处查看 Davoud Taghawi-Nejad 的回答。我建议 OP 将 Python 添加回问题标题并选择 Davoud 的答案。我通过谷歌搜索“show tables Python sqlite3”找到了这个页面,因为谷歌知道旧的问题标题。 SO 内的搜索将无法在此处登陆。没有 Python 的角度,链接的重复问题 82875 获得了更多的群众智慧。 【参考方案1】:

在 Python 中:

con = sqlite3.connect('database.db')
cursor = con.cursor()
cursor.execute("SELECT name FROM sqlite_master WHERE type='table';")
print(cursor.fetchall())

注意我的另一个answer。使用 pandas 有一种更快的方法。

【讨论】:

对于来复制/粘贴的用户:一定要cursor.close()db.close() 这似乎是正确的答案,但 OP 批准了另一个... @a_a_a 嗯 4 年的差异?【参考方案2】:

您可以通过查询 SQLITE_MASTER 表来获取表和模式列表:

sqlite> .tab
job         snmptarget  t1          t2          t3        
sqlite> select name from sqlite_master where type = 'table';
job
t1
t2
snmptarget
t3

sqlite> .schema job
CREATE TABLE job (
    id INTEGER PRIMARY KEY,
    data VARCHAR
);
sqlite> select sql from sqlite_master where type = 'table' and name = 'job';
CREATE TABLE job (
    id INTEGER PRIMARY KEY,
    data VARCHAR
)

【讨论】:

sqlite> .schema job python 中的语法无效...我错过了什么? @jbuddy_13 见other answer @jbuddy_13 sqlite> 是 sqlite 命令行客户端提示符。该示例的目的是演示如何查询数据库以列出表和架构。 对不起,但我真的不知道为什么这是公认的答案,这个问题是针对 python 而不是 SQL 语言的 @KostasMarkakis 真的很难想象我列出的信息会如何导致使用 API 的解决方案吗?【参考方案3】:

在 python 中执行此操作的最快方法是使用 Pandas(0.16 及更高版本)。

转储一张表:

db = sqlite3.connect('database.db')
table = pd.read_sql_query("SELECT * from table_name", db)
table.to_csv(table_name + '.csv', index_label='index')

转储所有表:

import sqlite3
import pandas as pd


def to_csv():
    db = sqlite3.connect('database.db')
    cursor = db.cursor()
    cursor.execute("SELECT name FROM sqlite_master WHERE type='table';")
    tables = cursor.fetchall()
    for table_name in tables:
        table_name = table_name[0]
        table = pd.read_sql_query("SELECT * from %s" % table_name, db)
        table.to_csv(table_name + '.csv', index_label='index')
    cursor.close()
    db.close()

【讨论】:

对于来复制/粘贴的用户:一定要cursor.close()db.close() 或更好地使用with sqlite3.connect('database.db') as db:【参考方案4】:

我不熟悉 Python API,但您可以随时使用

SELECT * FROM sqlite_master;

【讨论】:

【参考方案5】:

这是一个简短的 python 程序,用于打印这些表的表名和列名(python 2。python 3 如下)。

import sqlite3

db_filename = 'database.sqlite'
newline_indent = '\n   '

db=sqlite3.connect(db_filename)
db.text_factory = str
cur = db.cursor()

result = cur.execute("SELECT name FROM sqlite_master WHERE type='table';").fetchall()
table_names = sorted(zip(*result)[0])
print "\ntables are:"+newline_indent+newline_indent.join(table_names)

for table_name in table_names:
    result = cur.execute("PRAGMA table_info('%s')" % table_name).fetchall()
    column_names = zip(*result)[1]
    print ("\ncolumn names for %s:" % table_name)+newline_indent+(newline_indent.join(column_names))

db.close()
print "\nexiting."

(编辑:我一直在定期对此进行投票,所以这里是寻找这个答案的人的 python3 版本)

import sqlite3

db_filename = 'database.sqlite'
newline_indent = '\n   '

db=sqlite3.connect(db_filename)
db.text_factory = str
cur = db.cursor()

result = cur.execute("SELECT name FROM sqlite_master WHERE type='table';").fetchall()
table_names = sorted(list(zip(*result))[0])
print ("\ntables are:"+newline_indent+newline_indent.join(table_names))

for table_name in table_names:
    result = cur.execute("PRAGMA table_info('%s')" % table_name).fetchall()
    column_names = list(zip(*result))[1]
    print (("\ncolumn names for %s:" % table_name)
           +newline_indent
           +(newline_indent.join(column_names)))

db.close()
print ("\nexiting.")

【讨论】:

【参考方案6】:

如果有人想用 Pandas 做同样的事情

import pandas as pd
import sqlite3
conn = sqlite3.connect("db.sqlite3")
table = pd.read_sql_query("SELECT name FROM sqlite_master WHERE type='table'", conn)
print(table)

【讨论】:

Jupyter Notebook 和 Pandas 不需要回答这个问题 没有必要抨击这样一个有用的答案。虽然像往常一样,建议使用上下文管理器。 我觉得这是最干净、最有用的答案。【参考方案7】:

显然Python 2.6中包含的sqlite3版本有这个能力:http://docs.python.org/dev/library/sqlite3.html

# Convert file existing_db.db to SQL dump file dump.sql
import sqlite3, os

con = sqlite3.connect('existing_db.db')
with open('dump.sql', 'w') as f:
    for line in con.iterdump():
        f.write('%s\n' % line)

【讨论】:

注意这一点,如果表格中填充了 INSERT INTO 语句,它将打印所有数据! 谢天谢地,INSERT INTO 语句是单行的,所以很容易用 if line.startswith("INSERT INTO") ... 转义【参考方案8】:

如果您只想打印出数据库中的所有表和列,有些人可能会发现我的函数很有用。

在循环中,我使用 LIMIT 0 查询每个 TABLE,因此它只返回没有所有数据的标题信息。您从中创建一个空 df,并使用可迭代的 df.columns 打印出每个列名。

conn = sqlite3.connect('example.db')
c = conn.cursor()

def table_info(c, conn):
    '''
    prints out all of the columns of every table in db
    c : cursor object
    conn : database connection object
    '''
    tables = c.execute("SELECT name FROM sqlite_master WHERE type='table';").fetchall()
    for table_name in tables:
        table_name = table_name[0] # tables is a list of single item tuples
        table = pd.read_sql_query("SELECT * from  LIMIT 0".format(table_name), conn)
        print(table_name)
        for col in table.columns:
            print('\t' + col)
        print()

table_info(c, conn)
Results will be:

table1
    column1
    column2

table2
    column1
    column2
    column3 

etc.

【讨论】:

【参考方案9】:

经过大量的摆弄,我在sqlite docs 找到了一个更好的答案,用于列出表的元数据,甚至是附加的数据库。

meta = cursor.execute("PRAGMA table_info('Job')")
for r in meta:
    print r

关键信息是table_info的前缀,而不是my_table的附加句柄名称。

【讨论】:

我在你写的 sn-p 中有很多错误,没有看到例如参考文档或其他示例中的“db_alias”。在其他示例的上下文中,我认为您想要这条线,例如Job 表:meta = cursor.execute("PRAGMA table_info('Job')") 你的第一行似乎与其余部分无关。【参考方案10】:

查看here 进行转储。看来sqlite3库中有dump函数。

【讨论】:

我正在尝试: import sqlite3 con = sqlite3.connect("test.db") con.dump() 它失败了......我一直在检查【参考方案11】:
#!/usr/bin/env python
# -*- coding: utf-8 -*-

if __name__ == "__main__":

   import sqlite3

   dbname = './db/database.db'
   try:
      print "INITILIZATION..."
      con = sqlite3.connect(dbname)
      cursor = con.cursor()
      cursor.execute("SELECT name FROM sqlite_master WHERE type='table';")
      tables = cursor.fetchall()
      for tbl in tables:
         print "\n########  "+tbl[0]+"  ########"
         cursor.execute("SELECT * FROM "+tbl[0]+";")
         rows = cursor.fetchall()
         for row in rows:
            print row
      print(cursor.fetchall())
   except KeyboardInterrupt:
      print "\nClean Exit By user"
   finally:
      print "\nFinally"

【讨论】:

【参考方案12】:

我已经用 php 实现了一个 sqlite 表模式解析器,你可以在这里查看:https://github.com/c9s/LazyRecord/blob/master/src/LazyRecord/TableParser/SqliteTableDefinitionParser.php

您可以使用此定义解析器来解析定义,如下面的代码:

$parser = new SqliteTableDefinitionParser;
$parser->parseColumnDefinitions('x INTEGER PRIMARY KEY, y DOUBLE, z DATETIME default \'2011-11-10\', name VARCHAR(100)');

【讨论】:

以上是关于使用 Python sqlite3 API 的表、数据库模式、转储等列表的主要内容,如果未能解决你的问题,请参考以下文章

如何在python程序中查看sqlite3某数据库中的表名

使用 python 在 sqlite3 数据库中存储大量 API 数据的最有效方法

SQLITE3 - 使用循环将数据放入列中

python内置的sqlite3模块,使用其内置数据库

python sqlite3 数据库操作

django:sqlite3.OperationalError:没有这样的表