python python操作MySQL

Posted 战争热诚

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python python操作MySQL相关的知识,希望对你有一定的参考价值。

  MySQL是Web世界中使用最广泛的数据库服务器,SQLite的特定是轻量级,可嵌入,但不能承受高并发访问,适合桌面和移动应用。而MySQL是为服务器端设计的数据库,能承受高并发访问,同时占用的内存也远远大于SQLite。此外,MySQL内部有多种数据库引擎,最常用的引擎是支持数据库事务的InnoDB。

一,安装MySQL

这里小编就不详细介绍了,要是有不会安装的可以参考下面博客

 http://www.cnblogs.com/wj-1314/p/7573242.html

二,安装MySQL-python

要想使python可以操作mysql 就需要MySQL-python驱动,它是python 操作mysql必不可少的模块。

下载地址:https://pypi.python.org/pypi/MySQL-python/

下载MySQL-python-1.2.5.zip 文件之后直接解压。进入MySQL-python-1.2.5目录:

>>python setup.py install

然后安装pymysql

pip install pymysql

  

三,测试pymysql模块

  测试非常简单,检查pymysql模块是否可以正常导入。(在操作数据库的时候,python2一般使用mysqldb,但是在python3中已经不再支持mysqldb了,我们可以用pymysql和mysql.connector。本文所有操作都是在python3的pymysql下完成的。)

没有报错提示MySQLdb模块找不到,说明安装OK 

四,mysql 的基本操作

mysql> show databases;  // 查看当前所有的数据库
+--------------------+
| Database           |
+--------------------+
| information_schema |
| csvt               |
| csvt04             |
| mysql              |
| performance_schema |
| test               |
+--------------------+
rows in set (0.18 sec)

mysql> use test;   //作用与test数据库
Database changed
mysql> show tables;   //查看test库下面的表
Empty set (0.00 sec)

//创建user表,name 和password 两个字段
mysql> CREATE  TABLE  user (name VARCHAR(20),password VARCHAR(20));  Query OK, 0 rows affected (0.27 sec)

//向user表内插入若干条数据
mysql> insert into user values(\'Tom\',\'1321\');
Query OK, 1 row affected (0.05 sec)

mysql> insert into user values(\'Alen\',\'7875\');
Query OK, 1 row affected (0.08 sec)

mysql> insert into user values(\'Jack\',\'7455\');
Query OK, 1 row affected (0.04 sec)

//查看user表的数据
mysql> select * from user;
+------+----------+
| name | password |
+------+----------+
| Tom  | 1321     |
| Alen | 7875     |
| Jack | 7455     |
+------+----------+
rows in set (0.01 sec)

//删除name 等于Jack的数据
mysql> delete from user where name = \'Jack\';
Query OK, 1 rows affected (0.06 sec)

//修改name等于Alen 的password 为 1111
mysql> update user set password=\'1111\' where name = \'Alen\';
Query OK, 1 row affected (0.05 sec)
Rows matched: 1  Changed: 1  Warnings: 0

//查看表内容
mysql> select * from user;
+--------+----------+
| name   | password |
+--------+----------+
| Tom    | 1321     |
| Alen   | 1111     |
+--------+----------+
rows in set (0.00 sec)

  

五,python 操作mysql数据库基础

  这里盗图一张,以流程图的方式展示python操作MySQL数据库的流程:

 

1,执行SQL,具体语句如下:

#coding=utf-8
import MySQLdb

# 打开数据库连接
conn= MySQLdb.connect(
        host=\'localhost\',
        port = 3306,
        user=\'root\',
        passwd=\'123456\',
        db =\'test\',
        )

# 使用cursor()方法获取操作游标 cur = conn.cursor() #创建数据表 #cur.execute("create table student(id int ,name varchar(20),class varchar(30),age varchar(10))") #插入一条数据 #cur.execute("insert into student values(\'2\',\'Tom\',\'3 year 2 class\',\'9\')") #修改查询条件的数据 #cur.execute("update student set class=\'3 year 1 class\' where name = \'Tom\'") #删除查询条件的数据 #cur.execute("delete from student where age=\'9\'")
# 关闭游标 cur.close()

# 提交,不然无法保存新建或者修改的数据 conn.commit()

# 关闭数据库连接 conn.close()

2,获取新创建数据自增ID  

import pymysql
  
conn = pymysql.connect(host=\'127.0.0.1\', port=3306, user=\'root\', passwd=\'123\', db=\'t1\')
cursor = conn.cursor()
cursor.executemany("insert into hosts(host,color_id)values(%s,%s)", [("1.1.1.11",1),("1.1.1.11",2)])
conn.commit()
cursor.close()
conn.close()
  
# 获取最新自增ID
new_id = cursor.lastrowid

3、获取查询数据

import pymysql
  
conn = pymysql.connect(host=\'127.0.0.1\', port=3306, user=\'root\', passwd=\'123\', db=\'t1\')
cursor = conn.cursor()
cursor.execute("select * from hosts")
  
# 获取第一行数据
row_1 = cursor.fetchone()
  
# 获取前n行数据
# row_2 = cursor.fetchmany(3)
# 获取所有数据
# row_3 = cursor.fetchall()
  
conn.commit()
cursor.close()
conn.close()

          fetchone()方法可以帮助我们获得表中的数据,可是每次执行cur.fetchone() 获得的数据都不一样,换句话说我没执行一次,游标会从表中的第一条数据移动到下一条数据的位置,所以,我再次执行的时候得到的是第二条数据。fetchone()函数的返回值是单个的元组,也就是一行记录,如果没有,就返回null

  fetchall() 函数的返回值是多个元组,即返回多个行记录,如果没有,返回的是()、

注:在fetch数据时按照顺序进行,可以使用cursor.scroll(num,mode)来移动游标位置,如:

  • cursor.scroll(1,mode=\'relative\')  # 相对当前位置移动
  • cursor.scroll(2,mode=\'absolute\') # 相对绝对位置移动

4、fetch数据类型

  关于默认获取的数据是元祖类型,如果想要或者字典类型的数据,即:

import pymysql
  
conn = pymysql.connect(host=\'127.0.0.1\', port=3306, user=\'root\', passwd=\'123\', db=\'t1\')
  
# 游标设置为字典类型
cursor = conn.cursor(cursor=pymysql.cursors.DictCursor)
r = cursor.execute("call p1()")
  
result = cursor.fetchone()
  
conn.commit()
cursor.close()
conn.close()

5,插入数据

通过上面execute()方法中写入纯的sql语句来插入数据并不方便。如:

>>>cur.execute("insert into student values(\'2\',\'Tom\',\'3 year 2 class\',\'9\')")

我要想插入新的数据,必须要对这条语句中的值做修改。我们可以做如下修改:

#coding=utf-8
import MySQLdb

conn= MySQLdb.connect(
        host=\'localhost\',
        port = 3306,
        user=\'root\',
        passwd=\'123456\',
        db =\'test\',
        )
cur = conn.cursor()

#插入一条数据
sqli="insert into student values(%s,%s,%s,%s)"
cur.execute(sqli,(\'3\',\'Huhu\',\'2 year 1 class\',\'7\'))

cur.close()
conn.commit()
conn.close()

     假如要一次向数据表中插入多条值呢?

    executemany()方法可以一次插入多条值,执行单挑sql语句,但是重复执行参数列表里的参数,返回值为受影响的行数。

#coding=utf-8
import MySQLdb

conn= MySQLdb.connect(
        host=\'localhost\',
        port = 3306,
        user=\'root\',
        passwd=\'123456\',
        db =\'test\',
        )
cur = conn.cursor()

#一次插入多条记录
sqli="insert into student values(%s,%s,%s,%s)"
cur.executemany(sqli,[
    (\'3\',\'Tom\',\'1 year 1 class\',\'6\'),
    (\'3\',\'Jack\',\'2 year 1 class\',\'7\'),
    (\'3\',\'Yaheng\',\'2 year 2 class\',\'7\'),
    ])

cur.close()
conn.commit()
conn.close()

   

5.6 练习python操作MySQL

#!/usr/bin/env python
# coding=utf-8

import pymysql

def connectdb():
    print(\'连接到mysql服务器...\')
    # 打开数据库连接
    # 用户名:hp, 密码:Hp12345.,用户名和密码需要改成你自己的mysql用户名和密码,并且要创建数据库TESTDB,并在TESTDB数据库中创建好表Student
    db = pymysql.connect("localhost","hp","Hp12345.","TESTDB")
    print(\'连接上了!\')
    return db

def createtable(db):
    # 使用cursor()方法获取操作游标 
    cursor = db.cursor()

    # 如果存在表Sutdent先删除
    cursor.execute("DROP TABLE IF EXISTS Student")
    sql = """CREATE TABLE Student (
            ID CHAR(10) NOT NULL,
            Name CHAR(8),
            Grade INT )"""

    # 创建Sutdent表
    cursor.execute(sql)

def insertdb(db):
    # 使用cursor()方法获取操作游标 
    cursor = db.cursor()

    # SQL 插入语句
    sql = """INSERT INTO Student
         VALUES (\'001\', \'CZQ\', 70),
                (\'002\', \'LHQ\', 80),
                (\'003\', \'MQ\', 90),
                (\'004\', \'WH\', 80),
                (\'005\', \'HP\', 70),
                (\'006\', \'YF\', 66),
                (\'007\', \'TEST\', 100)"""

    #sql = "INSERT INTO Student(ID, Name, Grade) \\
    #    VALUES (\'%s\', \'%s\', \'%d\')" % \\
    #    (\'001\', \'HP\', 60)
    try:
        # 执行sql语句
        cursor.execute(sql)
        # 提交到数据库执行
        db.commit()
    except:
        # Rollback in case there is any error
        print \'插入数据失败!\'
        db.rollback()

def querydb(db):
    # 使用cursor()方法获取操作游标 
    cursor = db.cursor()

    # SQL 查询语句
    #sql = "SELECT * FROM Student \\
    #    WHERE Grade > \'%d\'" % (80)
    sql = "SELECT * FROM Student"
    try:
        # 执行SQL语句
        cursor.execute(sql)
        # 获取所有记录列表
        results = cursor.fetchall()
        for row in results:
            ID = row[0]
            Name = row[1]
            Grade = row[2]
            # 打印结果
            print "ID: %s, Name: %s, Grade: %d" % \\
                (ID, Name, Grade)
    except:
        print "Error: unable to fecth data"

def deletedb(db):
    # 使用cursor()方法获取操作游标 
    cursor = db.cursor()

    # SQL 删除语句
    sql = "DELETE FROM Student WHERE Grade = \'%d\'" % (100)

    try:
       # 执行SQL语句
       cursor.execute(sql)
       # 提交修改
       db.commit()
    except:
        print \'删除数据失败!\'
        # 发生错误时回滚
        db.rollback()

def updatedb(db):
    # 使用cursor()方法获取操作游标 
    cursor = db.cursor()

    # SQL 更新语句
    sql = "UPDATE Student SET Grade = Grade + 3 WHERE ID = \'%s\'" % (\'003\')

    try:
        # 执行SQL语句
        cursor.execute(sql)
        # 提交到数据库执行
        db.commit()
    except:
        print \'更新数据失败!\'
        # 发生错误时回滚
        db.rollback()

def closedb(db):
    db.close()

def main():
    db = connectdb()    # 连接MySQL数据库

    createtable(db)     # 创建表
    insertdb(db)        # 插入数据
    print \'\\n插入数据后:\'
    querydb(db) 
    deletedb(db)        # 删除数据
    print \'\\n删除数据后:\'
    querydb(db)
    updatedb(db)        # 更新数据
    print \'\\n更新数据后:\'
    querydb(db)

    closedb(db)         # 关闭数据库

if __name__ == \'__main__\':
    main()

  

六,巩固练习  

练习题:
        参考表结构:
            用户类型

            用户信息

            权限

            用户类型&权限
        功能:

            # 登陆、注册、找回密码
            # 用户管理
            # 用户类型
            # 权限管理
            # 分配权限

        特别的:程序仅一个可执行文件

 

 python python操作SQLite

  SQLite是一种嵌入式数据库,它的数据库就是一个文件。由于SQLite本身是C写的,而且体积很小。所以,经常被集成到各种应用程序中,甚至在iOS 和 Android 的APP中都可以集成。

  Python就内置了SQLite3,所以在python中使用SQLite,不需要安装任何东西,直接使用。

  在使用SQLite之前,我们先要搞清楚几个概念:

  表是数据库中存放关系数据的集合,一个数据库里面通常都包含多个表,比如学生的表,班级的表,学校的表等等。表和表之间通过外键关联。

  要操作关系数据库,首先需要连接到数据库,一个数据库连接成为Connection;

  连接到数据库后,需要打开游标,称之为Cursor,通过Cursor执行SQL语句,然后获得执行结果。

  Python定义了一套操作数据库的API接口,任何数据库要连接到Python,只需要提供符合Python标准的数据库驱动即可。

  由于SQLite的驱动内置在Python标准库中,所以我们可以直接来操作SQLite数据库。

  我们在Python交互式命令行实践一下:

# 导入SQLite驱动:
>>> import sqlite3

# 连接到SQLite数据库
# 数据库文件是test.db
# 如果文件不存在,会自动在当前目录创建:
>>> conn = sqlite3.connect(\'test.db\')

# 创建一个Cursor:
>>> cursor = conn.cursor()

# 执行一条SQL语句,创建user表:
>>> cursor.execute(\'create table user (id varchar(20) primary key, name varchar(20))\')
<sqlite3.Cursor object at 0x10f8aa260>

# 继续执行一条SQL语句,插入一条记录:
>>> cursor.execute(\'insert into user (id, name) values (\\\'1\\\', \\\'Michael\\\')\')
<sqlite3.Cursor object at 0x10f8aa260>

# 通过rowcount获得插入的行数:
>>> cursor.rowcount
1

# 关闭Cursor:
>>> cursor.close()

# 提交事务:
>>> conn.commit()

# 关闭Connection:
>>> conn.close()

  我们再试试查询记录:

>>> conn = sqlite3.connect(\'test.db\')
>>> cursor = conn.cursor()

# 执行查询语句:
>>> cursor.execute(\'select * from user where id=?\', (\'1\',))
<sqlite3.Cursor object at 0x10f8aa340>

# 获得查询结果集:
>>> values = cursor.fetchall()
>>> values
[(\'1\', \'Michael\')]
>>> cursor.close()
>>> conn.close()

  使用Python的DB-API时,只要搞清楚connection 和cursor对象,打开后一定记得关闭,就可以放心使用。

  使用cursor对象执行insert,update,delete语句时,执行结果由rowcount返回影响的行数,就可以拿到执行结果。

  使用cursor对象执行select语句时,通过featchall() 可以拿到结果集,结果集是一个list,每个元素都是一个tuple,对应一行记录。

  如果SQL语句带有参数,那么需要把参数按照位置传递给execute()方法,有几个?占位符就必须对应几个参数,例如:

ursor.execute(\'select * from user where name=? and pwd=?\', (\'abc\', \'password\'))

练习:

import os, sqlite3

db_file = os.path.join(os.path.dirname(__file__), \'test.db\')
print(db_file)
# E:/backup/pycode/now/ProcessDataPreprocessing/code\\test.db

if os.path.isfile(db_file):
    os.remove(db_file)

# 初始化数据
conn = sqlite3.connect(db_file)
cursor = conn.cursor()
sql1 = \'create table user(id varchar(20) primary key , name varchar(20), score int)\'
cursor.execute(sql1)
sql2 = "insert into user values (\'001\',\'james\', 99)"
cursor.execute(sql2)

sql3 = "insert into user values (\'002\',\'durant\', 99)"
cursor.execute(sql3)

cursor.close()
conn.commit()
conn.close()

  查询操作:

# 查询记录:
conn = sqlite3.connect(\'test.db\')
cursor = conn.cursor()
# 执行查询语句:
sql4 = \'select * from user \'
cursor.execute(sql4)
# 获得查询结果集:
values = cursor.fetchall()
print(values)
cursor.close()
conn.close()

  

 

 参考文献:https://www.2cto.com/database/201807/761697.html

以上是关于python python操作MySQL的主要内容,如果未能解决你的问题,请参考以下文章

python 有用的Python代码片段

[未解决问题记录]python asyncio+aiohttp出现Exception ignored:RuntimeError('Event loop is closed')(代码片段

常用python日期日志获取内容循环的代码片段

通过Python代码操作MySQL:

在 Python代码中操作mysql数据

Python 向 Postman 请求代码片段