10.31 总结

Posted lidandanaa

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了10.31 总结相关的知识,希望对你有一定的参考价值。

1.Python操作mysql

import pymysql
#连接数据库的参数
conn=pymysql.connect(host='localhost',user='root',passward='',database='tt',charset='utf8')
#cursor=conn.cursor() #默认返回的值是元组类型
cursor=conn.cursor(cursor=pysql.cursors.DictCursor)#返回的值是字典类型
sql="select * from userinfo"
cursor.execute(sql)

#res=cursor.fetchall()  #取出所有的数据 返回的是列表套字典
#res=cursor.fetchone()  #取出一条数据 返回的是字典类型
res=cursor.fetchmany(12)  #指定获取多少条数据 返回的是列表套字典
print(res) 

cursor.close()
conn.close()
运行结果:
[{'id': 1, 'name': 'zekai', 'depart_id': 1}, {'id': 2, 'name': 'xxx', 'depart_id': 2}, {'id': 3, 'name': 'zekai1', 'depart_id': 3}, {'id': 4, 'name': 'zekai2', 'depart_id': 4}, {'id': 5, 'name': 'zekai3', 'depart_id': 1}, {'id': 6, 'name': 'zekai4', 'depart_id': 2}]

2.pymysql的sql注入:

import pymysql

user=input('输入用户名:').strip()
pwd=input('输入密码:').strip()

#接下来对用户输入的值进行校验

#连接数据库的参数
conn=pymysql.connect(host='localhost',user='root',passward='',database='tt',charset='utf8')
#cursor=conn.cursor() #默认返回的值是元组类型
cursor=conn.cursor(cursor=pysql.cursors.DictCursor)#返回的值是字典类型

sql="select * from user where name='%s' and passward='%s'" %(user,pwd)

cursor.execute(sql)

res=cursor.fetchall()  #取出所有的数据 返回的是列表套字典
print(res)

cursor.close()
conn.close()

id res:
    print('登录成功!')
else:
    print('登录失败!')
运行结果:
输入用户名:engon ' or 1=1 #
输入密码:ijhjk
[{'id': 1, 'name': 'engon1', 'passward': 123.0}, {'id': 2, 'name': 'engon2', 'passward': 456.0}, {'id': 3, 'name': 'engon3', 'passward': 789.0}]
登录成功

以上是sql注入问题
产生的原因:因为过于相信用户输入的内容,根本没有做任何的检验
解决方法:
sql="select * from user where name=%s and passward=%s"
cursor.execute(sql,(user,pwd))
运行结果:
输入用户名:engon1
输入密码:123
1
登录成功

2.pymysql增加数据

import pymysql

#连接数据库的参数
conn=pymysql.connect(host='localhost',user='root',passward='',database='tt',charset='utf8')
#cursor=conn.cursor() #默认返回的值是元组类型
cursor=conn.cursor(cursor=pysql.cursors.DictCursor)#返回的值是字典类型

sql="insert into user (name,passward) values(%s,%s)"
cursor.execute(sql,('jsdhfh','jdhfhghg')) 新增一条数据
print(cursor.lastrowid)  #获取最后一行的id值
# data = [
#     ('zekai1', 'qwe'),
#     ('zekai2', 'qwe1'),
#     ('zekai3', 'qwe2'),
#     ('zekai4', 'qwe3'),
# ]
# cursor.executemany(sql, data)  ### 新增多条数据
conn.commit()  #提交
cursor.close()
conn.close()

查:

fetchall() : 取出所有的数据 返回的是列表套字典#        fetchone() : 取出一条数据 返回的是字典#        fetchmany(size) : 取出size条数据 返回的是列表套字典

3.mysql修改数据

mport pymysql

### 连接数据库的参数
conn = pymysql.connect(host='localhost',user='root',password='',database='tt',charset='utf8')
# cursor = conn.cursor() ### 默认返回的值是元祖类型
cursor = conn.cursor(cursor=pymysql.cursors.DictCursor) ### 返回的值是字典类型 (*********)


sql = "update user set name=%s where id=%s"

cursor.execute(sql, ('dgsahdsa', 2))

conn.commit()

cursor.close()
conn.close()

4.mysql删除数据

import pymysql

### 连接数据库的参数
conn = pymysql.connect(host='localhost',user='root',password='',database='tt',charset='utf8')
# cursor = conn.cursor() ### 默认返回的值是元祖类型
cursor = conn.cursor(cursor=pymysql.cursors.DictCursor) ### 返回的值是字典类型 (*********)


sql = "delete from userinfo where id=%s"

cursor.execute(sql, (1,))

conn.commit()

cursor.close()
conn.close()

5.mysql插入300w条数据

import pymysql

### 连接数据库的参数
conn = pymysql.connect(host='localhost',user='root',password='',database='tt',charset='utf8')
# cursor = conn.cursor() ### 默认返回的值是元祖类型
cursor = conn.cursor(cursor=pymysql.cursors.DictCursor) ### 返回的值是字典类型 (*********)

sql = "insert into user (name, email) values (%s,  %s)"

data = []
for i in range(3000000):
    info = ('zzz'+str(i), 'zzz' + str(i) + '@qq.com' )
    data.append(info)


cursor.executemany(sql, data)  ### 新增多条数据
#
# #### 加如下代码
conn.commit()

cursor.close()
conn.close()

6.索引

为啥使用索引以及索引的作用:提高查询效率

类比:字典中的目录

索引的本质:一个特殊的文件

索引的底层原理:B+树

索引的种类:

? 主键索引:加速查找+约束(不能重复+不为空 )primary key

? 唯一索引:加速查找+约束(不能重复) unique(name)

? 联合唯一索引:unique(name,email)

? 普通索引:加速查找 index(name)

? 联合索引:index (name,email)、primary key(id,name)

索引的创建:

    主键索引:

    新增主键索引:
                    create table xxx(
                        id int auto_increment ,
                        primary key(id)
                    )

                alter table xxx change id id int auto_increment primary key;

                alter table t1 add primary key (id);

    删除主键索引:
    mysql> alter table t1 drop primary key;


            唯一索引:

                新增:
                    1.
                    create table t2(
                        id int auto_increment primary key,
                        name varchar(32) not null default '',
                        unique u_name (name)
                    )charset utf8

                    2.
                    CREATE  UNIQUE   INDEX  索引名 ON 表名 (字段名) ;
                        create  unique index ix_name on t2(name);

                    3.
                    alter table t2 add unique index ix_name (name)

                删除:
                    alter table t2 drop index u_name;

            普通索引:

                新增:
                    1.
                    create table t3(
                        id int auto_increment primary key,
                        name varchar(32) not null default '',
                        index u_name (name)
                    )charset utf8

                    2.
                    CREATE  INDEX  索引名 ON 表名 (字段名) ;
                        create   index ix_name on t3(name);

                    3.
                    alter table t3 add  index ix_name (name)

                删除:
                    alter table t3 drop index u_name;
                    索引的优缺点:

                通过观察 *.ibd文件可知:

                    1.索引加快了查询速度
                    2.但加了索引之后,会占用大量的磁盘空间


            索引加的越多越好?

                不是

            不会命中索引的情况:

                a. 不能在SQl语句中,进行四则运算, 会降低SQL的查询效率

                b. 使用函数
                    select * from tb1 where reverse(email) = 'zekai';
                c. 类型不一致
                    如果列是字符串类型,传入条件是必须用引号引起来,不然...
                    select * from tb1 where email = 999;

                #排序条件为索引,则select字段必须也是索引字段,否则无法命中
                d. order by
                    select name from s1 order by email desc;
                    当根据索引排序时候,select查询的字段如果不是索引,则速度仍然很慢

                    select email from s1 order by email desc;
                    特别的:如果对主键排序,则还是速度很快:
                        select * from tb1 order by nid desc;

                e. count(1)或count(列)代替count(*)在mysql中没有差别了

                f. 组合索引最左前缀

                    什么时候会创建联合索引?

                        根据公司的业务场景, 在最常用的几列上添加索引

                        select * from user where name='zekai' and email='zekai@qq.com';

                        如果遇到上述业务情况, 错误的做法:
                            index ix_name (name),
                            index ix_email(email)

                        正确的做法:
                            index ix_name_email(name, email)



                    如果组合索引为:ix_name_email (name,email) ************

                    where name='zekai' and email='xxxx'       -- 命中索引

                    where name='zekai'   -- 命中索引
                    where email='zekai@qq.com'                -- 未命中索引

                    例子:

                        index (a,b,c,d)

                        where a=2 and b=3 and c=4 and d=5   --->命中索引

                        where a=2 and c=3 and d=4   ----> 未命中 
1.查询的时候查询条件精确匹配索引的左边‘连续’一列或几列,则此列就可以被用到。
2.顺序不同也可以被查询到,会自动优化为匹配联合索引的顺序;
3.大多情况下,都应该尽量扩展 已有的索引而不是创建新的索引。



                g:
                    explain

                    mysql> explain select * from user where name='zekai' and email='zekai@qq.com'G
                    *************************** 1. row ***************************
                               id: 1
                      select_type: SIMPLE
                            table: user
                       partitions: NULL
                             type: ref       索引指向 all
                    possible_keys: ix_name_email     可能用到的索引
                              key: ix_name_email     确实用到的索引
                          key_len: 214            索引长度
                              ref: const,const
                             rows: 1            扫描的长度
                         filtered: 100.00
                            Extra: Using index   使用到了索引


                索引覆盖:

                    select id from user where id=2000;




        慢查询日志:
            查看慢SQL的相关变量

                mysql> show variables like '%slow%'
                    -> ;
                +---------------------------+-----------------------------------------------+
                | Variable_name             | Value                                         |
                +---------------------------+-----------------------------------------------+
                | log_slow_admin_statements | OFF                                           |
                | log_slow_slave_statements | OFF                                           |
                | slow_launch_time          | 2                                             |
                | slow_query_log            | OFF   ### 默认关闭慢SQl查询日志, on                                          |
                | slow_query_log_file       | D:mysql-5.7.28dataDESKTOP-910UNQE-slow.log | ## 慢SQL记录的位置
                +---------------------------+-----------------------------------------------+
                5 rows in set, 1 warning (0.08 sec)

                mysql> show variables like '%long%';
                +----------------------------------------------------------+-----------+
                | Variable_name                                            | Value     |
                +----------------------------------------------------------+-----------+
                | long_query_time                                          | 10.000000 |

            配置慢SQL的变量:
                set global 变量名 = 值

                set global slow_query_log = on;

                set global slow_query_log_file="D:/mysql-5.7.28/data/myslow.log";

                set global long_query_time=1;

以上是关于10.31 总结的主要内容,如果未能解决你的问题,请参考以下文章

python常用代码片段总结

BootStrap有用代码片段(持续总结)

BootStrap实用代码片段(持续总结)

10.31 模拟赛

回归 | js实用代码片段的封装与总结(持续更新中...)

10.31