数据库概述
数据存储阶段
- 人工管理阶段
缺点:数据无法共享,不能单独保持,数据存储量有限
- 文件管理阶段
优点:数据可以长期保存,可以存储大量的数据,使用简单
缺点:数据一致性差,数据查找修改不方便,数据冗余度可能比较大
- 数据库管理阶段
优点:数据阻止结构化降低了冗余度,提高了增删改查的效率,容易扩展,方便程序调用,做自动化处理
缺点:需要使用sql 或者 其他特定的语句,相对比较复杂
数据库应用
融机构,游戏网站,购物网站,论坛网站......
基础感念
数据:能够输入到计算机中并被识别处理的信息集合
数据结构:研究一个数据集合中数据之间关系的
数据库:按照数据结构,存储管理数据的仓库.数据库是在数据库管理系统管理和控制下,在一定介质上的数据集合
数据库管理系统:管理数据库的软件,用于建立和维护数据库
数据库系统:由数据库和数据库管理系统,开发工具等组成的集合
数据库分类和常见数据库
- 关系型数据库和非关系型数据库
关系型:采用关系模型(二维表)来组织数据结构的数据库
非关系型:不采用关系模型组织数据结构的数据库
- 开源数据库和非开源数据库
开源:MySQL,SQLite,MongoDB
非开源:Oracle,DB2,SQL_Server
- 常见的关系型数据库
MySQL,Oracle,SQL_Server,DB2,SQLite
认识关系型数据库和MySQL
- 数据库结构(图形结构)
数据元素--->记录--->数据表--->数据库
- 数据库概念解析
数据表:存放数据的表格
字段:每个列,用来表示该列数据的含义
记录:每个行,表示一组完整的数据
- MySQL特点
- 是开源数据库,使用C和C++编写
- 能够工作在众多不同的平台上
- 提供了用于C,C++,Python,Java,Perl,PHP,Ruby众多语言的API
- 存储结构优良,运行速度快
- 功能全面丰富
- MySQL安装
create database stu character set utf8;
另一种方法如下:
create database stu charset=utf8;
查看创建库的语句(字符集)
show create database 库名;
查看stu创建方法:
show create database stu;
查看当前所在库
select database();
切换库
use 库名;
使用stu数据库:
use stu;
删除库
drop database 库名;
删除test数据库:
drop database test;
库名的命名规则
- 数字,字母,下划线,但不能使用纯数字
- 库名区分字母大小写
- 不能使用特殊字符和mysql关键字
数据表的管理
表结构设计初步
- 分析存储内容
- 确定字段构成
- 设计字段类型
数据类型支持
数字类型:
整数类型(精确值)--->INTEGER,INT,SMALLINT,TINYINT,MEDIUMINT,BIGINT
定点类型(精确值)--->DECIMAL
浮点类型(近似值)--->FLOAT,DOUBLE
比特值类型--->BIT
对于精度比较高的东西,比如money,用decimal类型提高精度减少误差.列的声明语法是DECIMAL(M,D).
M是数字的最大位数(精度).其范围为1~65,M的默认值是10.D是小数点右侧数字的数目(标度).其范围是0~30.但不得超过M.
比如DECIMAL(6,2)最多存6位数字,小数点后占两位,取值范围-9999.99到9999.99
比特类型指0,1值表达2两情况,如真,假
字符串类型:
CHAR和VARCHAR类型
BLOB和TEXT类型
ENUM类型和SET类型
- char 和 varchar
char:定长,效率高,一般用于固定长度的表单提交数据存储,默认1字符
varchar: 不定长,效率偏低,但是节省空间.
- text 和 blob
text: 存储非二进制文本
blob: 存储二进制字节串
- enum 和 set
enum: 存储给出的一个值
set: 存储给出的值中一个或多个
表的基本操作
创建表(指定字符集)
create table 表名( 字段名 数据类型, 字段名 数据类型, ...... 字段名 数据类型 );
创建班级表,代码如下:
create table class_1 (id int primary key auto_increment,name varchar(32)not null,age int unsigned not null,sex enum('w','m'),score float default 0.0);
创建兴趣班表,代码如下:
create table interest(id int primary key auto_increment,name varchar(32) not null,hobby set('sing','dance','draw'),level char not null,price decimal(6,2),comment text);
查看数据表
show tables;
查看已有表的字符集
show create table 表名;
查看表结构
desc 表名;
删除表
drop table 表名;
数据基本操作
插入(insert)
insert into 表名 values(值1),(值2),......;
insert into class_1(2,'Baron',10,'m',91),(3,'Jame',9,'m',90);
查询(select)
查询表名内所有字段的信息
select * from 表名 [where 条件];
只查询 选定字段名信息
select 字段名1,字段名2 from 表名 [where 条件];
实例如下:
select * from class_1;
select name,age from class_1;
where子句
where子句在sql语句中扮演了重要角色,主要通过一定的运算条件进行数据的筛选
MySQL主要有一下几种运算符:
算数运算符
比较运算符
逻辑运算符
位运算符
算数运算符
实例如下:
select * from class_1 where age % 2 = 0;
比较运算符
实例如下:
select * from class_1 where age > 8;select * from class_1 where between 8 and 10;select * from class_1 where age in(8,9);
逻辑运算符
select * from class_1 where sex='m' and age > 9;
位运算符
运算符优先级顺序 ! ... > ... :=
更新记录表(update)
update 表名 set 字段1=值1,字段2=值2,... where 条件;
实例如下:
update class_1 set age=11 where name='Abby';
delete from 表名 where 条件;
注意:delete语句后如果不加where条件,所有记录全部清空
实例如下:
delete from class_1 where name='Abby';
- 添加字段(add)
alter table 表名 add 字段名 数据类型;
alter table 表名 add 字段名 数据类型 first;
alter table 表名 add 字段名 数据类型 after 字段名;
- 删除字段(drop)
alter table 表名 drop 字段名;
- 修改数据类型(modify)
alter table 表名 modify 字段名 新数据类型;
- 修改字段名(change)
alter table 表名 change 旧字段名 新字段名 新数据类型;
- 表重命名(raname)
alter table 表名 rename 新表名;
使用(after)添加字段:
alter table interest add tel char(11) after name;
时间和日期类型:
DATE,DATETIME和TIMESTAMP类型
TIME类型
年份类型YEAR
时间格式
date :"YYYY-MM-DD"
time:"HH:MM:SS"
datetime:"YYYY-MM-DD HH:MM:SS"
timestamp:"YYYY-MM-DD HH:MM:SS"
注意:
- datetime:以系统时间存储
- timestamp:以标准时间存储但是查看时转换为系统市区,所以表现形式和datetime相同
实例如下:
create table marathon (id int primary key auto_increment,athlete varchar(32),birthday date,registration_time datetime,performance time);
日期时间函数
- now()返回服务器当前时间,格式对应datetime类型
- curdate()返回当前日期,格式对应date类型
- curtime()返回当前时间,格式对应time类型
时间操作
- 查找操作
select * from marathon where birthday>='2000-01-01'; select * from marathon where birthday>="2000-07-01" and performance<="2:30:00";
日期时间运算
语法格式:
select * from 表名 where 字段名 运算符 (时间-interval 时间间隔单位);
时间间隔单位: 2 hour | 1 minute | 2 second | 2 year | 3 month | 1 day
实例如下:
select * from marathon where registration_time > (now()-interval 7 day);
得到指定的时间
time('2:30:00')
得到指定日期
date('2019-11-11')
主要用于时间运算
select * from marathon where performance < (time('2:30:00') + interval 10 minute);
LIKE用于在where子句中进行模糊查询,SQL LIKE 子句中使用百分号 %来表示任意0个或多个字符,下划线_表示任意一个字符。
使用 LIKE 子句从数据表中读取数据的通用语法:
SELECT field1, field2,...fieldN
FROM table_name
WHERE field1 LIKE condition1
实例如下:
mysql> select * from class_1 where name like 'A%';
mysql中对正则表达式的支持有限,只支持部分正则元字符
SELECT field1, field2,...fieldN
FROM table_name
WHERE field1 REGEXP condition1
实例如下:
select * from class_1 where name regexp '^B.+';
ORDER BY 子句来设定你想按哪个字段哪种方式来进行排序,再返回搜索结果。
使用 ORDER BY 子句将查询数据排序后再返回数据:
SELECT field1, field2,...fieldN from table_name1 where field1 ORDER BY field1 [ASC [DESC]]
默认情况ASC表示升序,DESC表示降序
select * from class_1 where sex='m' order by age;
LIMIT 子句用于限制由 SELECT 语句返回的数据数量 或者 UPDATE,DELETE语句的操作数量
带有 LIMIT 子句的 SELECT 语句的基本语法如下:
SELECT column1, column2, columnN
FROM table_name
WHERE field LIMIT [num]
UNION 操作符用于连接两个以上的 SELECT 语句的结果组合到一个结果集合中。多个 SELECT 语句会删除重复的数据。
UNION 操作符语法格式:
SELECT expression1, expression2, ... expression_n FROM tables [WHERE conditions] UNION [ALL | DISTINCT] SELECT expression1, expression2, ... expression_n FROM tables [WHERE conditions];
- expression1, expression2, ... expression_n: 要检索的列。
实例如下:
select * from class_1 where sex='m' UNION ALL select * from class_1 where age > 9;
恢复命令格式
mysql -uroot -p 目标库名 < stu.sql
从所有库备份中恢复某一个库(--one-database)
mysql -uroot -p --one-database 目标库名 < all.sql
-
-
创建游标对象(cur = db.cursor())
-
游标方法: cur.execute("insert ....")
-
提交到数据库或者获取数据 : db.commit()/db.fetchall()
-
关闭游标对象 :cur.close()
-
断开数据库连接 :db.close()
db = pymysql.connect(参数列表)
host :主机地址,本地 localhost
port :端口号,默认3306
user :用户名
password :密码
database :库
charset :编码方式,推荐使用 utf8
数据库连接对象(db)的方法
cur = db.cursor() 返回游标对象,用于执行具体SQL命令 db.commit() 提交到数据库执行 db.rollback() 回滚,用于当commit()出错是回复到原来的数据形态 db.close() 关闭连接
pymysql 数据库操作流程实现
import pymysql # 连接数据库 db = pymysql.connect(host='localhost', port=3306, user='root', password = '123456', database = 'stu', charset='utf8') # 创建游标 (操作数据库语句,获取查询结果) cur = db.cursor() # 数据库操作 cur.execute("insert into class_1 \ values (6,'Levi',11,'m',98);") # 向数据库提交 (可以多次execute一次提交,只有写操作需要) db.commit() # 关闭游标和数据库 cur.close() db.close()
游标对象(cur)的方法
cur.execute(sql命令,[列表]) 执行SQL命令 cur.fetchone() 获取查询结果集的第一条数据,查找到返回一个元组否则返回None cur.fetchmany(n) 获取前n条查找到的记录,返回结果为元组嵌套元组, ((记录1),(记录2))。 cur.fetchall() 获取所有查找到的记录,返回结果形式同上。 cur.close() 关闭游标对象
数据库读操作示例
import pymysql # 连接数据库 db = pymysql.connect(host='localhost', port=3306, user='root', password = '123456', database = 'stu', charset='utf8') # 创建游标 (操作数据库语句,获取查询结果) cur = db.cursor() # 数据库操作 sql="select name,age from class_1 where sex='m';" cur.execute(sql) # 获取查询结果 one_row = cur.fetchone() print(one_row) # 元组 many_row = cur.fetchmany(3) print(many_row) # 元组套元组 all_row = cur.fetchall() print(all_row) # 元组套元组 # 关闭游标和数据库 cur.close() db.close()
数据库写操作示例
import pymysql # 连接数据库 db = pymysql.connect(host='localhost', port=3306, user='root', password = '123456', database = 'stu', charset='utf8') # 创建游标 (操作数据库语句,获取查询结果) cur = db.cursor() # 数据库操作 try: # 具体写操作 # name = input("Name:") # age = input("Age:") # sex = input("Sex:") # score = input("Score:") # 直接构建sql语句 # sql="insert into class_1 (name,age,sex,score) \ # values ('%s',%s,'%s',%s)"%(name,age,sex,score) # cur.execute(sql) # 通过execute第二个参数列表构建sql语句 # sql = "insert into class_1 (name,age,sex,score) \ # values (%s,%s,%s,%s)" # cur.execute(sql,[name,age,sex,score]) # 修改操作 # sql = "update interest set price=12800 " \ # "where name='Tom'" # cur.execute(sql) # 删除操作 sql = "delete from class_1 where score < 80" cur.execute(sql) db.commit() except Exception as e: db.rollback() # 如果提交异常则回到提交前的状态 print(e) # 关闭游标和数据库 cur.close() db.close()
二进制文件存储到数据库
- 存储文件的所在路径 "/home/tarena/......"
- 存储文件本身
图片存储以及提取代码实现:
import pymysql # 连接数据库 db = pymysql.connect(host='localhost', port=3306, user='root', password = '123456', database = 'stu', charset='utf8') # 创建游标 (操作数据库语句,获取查询结果) cur = db.cursor() # 存储图片 # with open('timg.jpeg','rb') as f: # data = f.read() # # try: # sql = "insert into images values (1,'jd',%s)" # cur.execute(sql,[data]) # db.commit() # except: # db.rollback() # 提取图片 sql = "select image from images where filename='jd'" cur.execute(sql) data = cur.fetchone() with open('jd.jpeg','wb') as f: f.write(data[0]) # 关闭游标和数据库 cur.close() db.close()