22、ORM框架（orm框架有什么用）
ORM框架（SQLAlchemy）
安装
内部处理
SQLAlchemy操作库
创建表
多表外键
SQLAlchemy操作表
创建session
数据插入示例
数据查询示例
数据删除
数据修改
操作总结
增
删
改
查
其他
ORM框架（SQLAlchemy）
SQLAlchemy是Python编程语言下的一款ORM框架，该框架建立在数据库API之上，使用关系对象映射进行数据库操作，简言之便是：将对象转换成SQL，然后使用数据API执行SQL并获取执行结果。
作用：
1、提供简单的规则；
2、自动转换成优化后的SQL语句；
SQLAlchemy本身无法操作数据库，其必须以来pymsql等第三方插件，Dialect用于和数据API进行交流，根据配置文件的不同调用不同的数据库API，从而实现对数据库的操作，如：
MySQL-Python
mysql+mysqldb://<user>:<password>@<host>[:<port>]/<dbname>
pymysql
mysql+pymysql://<username>:<password>@<host>/<dbname>[?<options>]
MySQL-Connector
mysql+mysqlconnector://<user>:<password>@<host>[:<port>]/<dbname>
cx_Oracle
oracle+cx_oracle://user:pass@host:port/dbname[?key=value&key=value...]
更多详见：http://docs.sqlalchemy.org/en/latest/dialects/index.html
安装
pip3 install SQLAlchemy
pip3 install pymysql
内部处理
#!/usr/bin/env python
# -*- coding:utf-8 -*-
from sqlalchemy import create_engine
engine = create_engine("mysql+pymysql://root:123qwe@127.0.0.1:3306/cce", max_overflow=5)
# 执行SQL
cur = engine.execute(
"INSERT INTO cce (name, gender,email) VALUES ('cce', 'M','mail0426@163.com')"
)
# 新插入行自增ID
print(cur.lastrowid)
# 结果 1116502
# 执行SQL
# cur = engine.execute(
# "INSERT INTO hosts (host, color_id) VALUES(%s, %s)",[('1.1.1.22', 3),('1.1.1.221', 3),]
# )
# 执行SQL
# cur = engine.execute(
# "INSERT INTO hosts (host, color_id) VALUES (%(host)s, %(color_id)s)",
# host='1.1.1.99', color_id=3
# )
# 执行SQL
# cur = engine.execute('select * from hosts')
# 获取第一行数据
# cur.fetchone()
# 获取第n行数据
# cur.fetchmany(3)
# 获取所有数据
# cur.fetchall()
SQLAlchemy操作库
创建表
#!/usr/bin/env python
# -*- coding:utf-8 -*-
from sqlalchemy.ext.declarative import declarative_base
from sqlalchemy import Column, Integer, String, ForeignKey, UniqueConstraint, Index ,Enum
from sqlalchemy.orm import sessionmaker, relationship
from sqlalchemy import create_engine
DBbase = declarative_base()
# 创建单表
class Users(DBbase):
__tablename__ = 'users' # 标准写法，指明表名
id = Column(Integer, primary_key=True,autoincrement=True)
name = Column(String(32),nullable=False)
gender = Column(Enum('M','F'),default='M',nullable=False)
email = Column(String(16),nullable=False)
__table_args__ = ( # 定义表的约束信息
UniqueConstraint('id', 'name', name='uix_id_name'), # 联合唯一键
Index('ix_id_name', 'name', 'email'), # 普通联合索引，ix_id_name是索引名称
)
engine = create_engine("mysql+pymysql://root:123qwe@127.0.0.1:3306/data?charset=utf8", max_overflow=5) # 连接mysql，max_overflow控制在连接池达到最大值后可以创建的连接数。当这些额外的连接回收到连接池后将会被断开和抛弃
DBbase.metadata.create_all(engine) # 找到所有继承了base的类，直接创建表
多表外键
#!/usr/bin/env python
# -*- coding:utf-8 -*-
from sqlalchemy.ext.declarative import declarative_base
from sqlalchemy import Column, Integer, String, ForeignKey, UniqueConstraint, Index ,Enum
from sqlalchemy.orm import sessionmaker, relationship
from sqlalchemy import create_engine
DBbase = declarative_base()
# 创建用户类型表
class usertype(DBbase):
__tablename__ = 'usertype'
tid = Column(Integer, primary_key=True,autoincrement=True)
type = Column(Enum('付费用户','未付费用户'))
# 创建用户表
class users(DBbase):
__tablename__ = 'users' # 标准写法，指明表名
uid = Column(Integer, primary_key=True,autoincrement=True)
name = Column(String(32),nullable=False)
gender = Column(Enum('M','F'),default='M',nullable=False)
email = Column(String(16),nullable=False)
user_type_id = Column(Integer, ForeignKey('usertype.tid')) # ForeignKey外键，连接到usertype的tid字段
__table_args__ = ( # 定义表的约束信息
UniqueConstraint('uid', 'name', name='uix_uid_name'), # 联合唯一键
Index('ix_name_email', 'name', 'email'), # 普通联合索引，ix_id_name是索引名称
)
engine = create_engine("mysql+pymysql://root:123qwe@127.0.0.1:3306/data?charset=utf8", max_overflow=5) # 连接mysql，max_overflow控制在连接池达到最大值后可以创建的连接数。当这些额外的连接回收到连接池后将会被断开和抛弃
DBbase.metadata.create_all(engine) # 找到所有继承了base的类，直接创建表
# DBbase.metadata.drop_all(engine) # 找到所有继承了base的类，直接drop表
SQLAlchemy操作表
说到数据库，就离不开Session。Session的主要目的是建立与数据库的会话，它维护你加载和关联的所有数据库对象。它是数据库查询（Query）的一个入口。在Sqlalchemy中，数据库的查询操作是通过Query对象来实现的。而Session提供了创建Query对象的接口。Query对象返回的结果是一组同一映射（Identity Map）对象组成的集合。事实上，集合中的一个对象，对应于数据库表中的一行（即一条记录）。所谓同一映射，是指每个对象有一个唯一的ID。如果两个对象（的引用）ID相同，则认为它们对应的是相同的对象。要完成数据库查询，就需要建立与数据库的连接。这就需要用到Engine对象。一个Engine可能是关联一个Session对象，也可能关联一个数据库表。当然Session最重要的功能还是实现原子操作。
创建session
from sqlalchemy import create_engine
from sqlalchemy.orm import sessionmaker
some_engine = create_engine('nysql://username:password@localhost/mydb?charset=utf8') # 创建一个Engine对象，我们提供的参数是数据库连接的url。
ession = sessionmaker(bind=some_engine) # 通过sessionmaker方法创建了一个Session工厂。
session = Session() #通过调用工厂方法来创建一个Session对象。
数据插入示例
#!/usr/bin/env python
# -*- coding:utf-8 -*-
from sqlalchemy.ext.declarative import declarative_base
from sqlalchemy import Column, Integer, String, ForeignKey, UniqueConstraint, Index, Enum
from sqlalchemy.orm import sessionmaker, relationship
from sqlalchemy import create_engine
DBbase = declarative_base()
# 创建用户类型表
class usertype(DBbase):
__tablename__ = 'usertype'
tid = Column(Integer, primary_key=True, autoincrement=True)
type = Column(Enum('付费用户', '未付费用户'))
# 创建用户表
class users(DBbase):
__tablename__ = 'users' # 标准写法，指明表名
uid = Column(Integer, primary_key=True, autoincrement=True)
name = Column(String(32), nullable=False)
gender = Column(Enum('M', 'F'), default='M', nullable=False)
email = Column(String(16), nullable=False)
user_type_id = Column(Integer, ForeignKey('usertype.tid')) # ForeignKey外键，连接到usertype的tid字段
__table_args__ = ( # 定义表的约束信息
UniqueConstraint('uid', 'name', name='uix_uid_name'), # 联合唯一键
Index('ix_name_email', 'name', 'email'), # 普通联合索引，ix_id_name是索引名称
)
engine = create_engine("mysql+pymysql://root:123qwe@127.0.0.1:3306/data?charset=utf8",
max_overflow=5) # 连接mysql，max_overflow控制在连接池达到最大值后可以创建的连接数。当这些额外的连接回收到连接池后将会被断开和抛弃
# 每次执行数据库操作时，都需要创建一个session
Session = sessionmaker(bind=engine) # 拿到一个连接
session = Session()
# 增加
# 类 代指 表
# 对象 代指 行
# 单行增加,创建一个对象
obj=usertype(type='付费用户')
# 将对象加入到session中
session.add(obj)
# 多行增加
objs = [
usertype(type='付费用户'),
usertype(type='未付费用户'),
]
session.add_all(objs)
session.commit() # 提交
session.close() # 关闭session连接
数据查询示例
#!/usr/bin/env python
# -*- coding:utf-8 -*-
from sqlalchemy.ext.declarative import declarative_base
from sqlalchemy import Column, Integer, String, ForeignKey, UniqueConstraint, Index, Enum
from sqlalchemy.orm import sessionmaker, relationship
from sqlalchemy import create_engine
DBbase = declarative_base()
# 创建用户类型表
class usertype(DBbase):
__tablename__ = 'usertype'
tid = Column(Integer, primary_key=True, autoincrement=True)
type = Column(Enum('付费用户', '未付费用户'))
# 创建用户表
class users(DBbase):
__tablename__ = 'users' # 标准写法，指明表名
uid = Column(Integer, primary_key=True, autoincrement=True)
name = Column(String(32), nullable=False)
gender = Column(Enum('M', 'F'), default='M', nullable=False)
email = Column(String(16), nullable=False)
user_type_id = Column(Integer, ForeignKey('usertype.tid')) # ForeignKey外键，连接到usertype的tid字段
__table_args__ = ( # 定义表的约束信息
UniqueConstraint('uid', 'name', name='uix_uid_name'), # 联合唯一键
Index('ix_name_email', 'name', 'email'), # 普通联合索引，ix_id_name是索引名称
)
engine = create_engine("mysql+pymysql://root:123qwe@127.0.0.1:3306/data?charset=utf8",
max_overflow=5) # 连接mysql，max_overflow控制在连接池达到最大值后可以创建的连接数。当这些额外的连接回收到连接池后将会被断开和抛弃
# 每次执行数据库操作时，都需要创建一个session
Session = sessionmaker(bind=engine) # 拿到一个连接
session = Session()
print(session.query(usertype)) # 查看下生成的sql语句
data=session.query(usertype).all() # 取出所有的数据；
for i in data: # 循环取出的数据
print(i.tid,i.type)
session.close()
# 使用filter进行过滤
#!/usr/bin/env python
# -*- coding:utf-8 -*-
from sqlalchemy.ext.declarative import declarative_base
from sqlalchemy import Column, Integer, String, ForeignKey, UniqueConstraint, Index, Enum
from sqlalchemy.orm import sessionmaker, relationship
from sqlalchemy import create_engine
DBbase = declarative_base()
# 创建用户类型表
class usertype(DBbase):
__tablename__ = 'usertype'
tid = Column(Integer, primary_key=True, autoincrement=True)
type = Column(Enum('付费用户', '未付费用户'))
# 创建用户表
class users(DBbase):
__tablename__ = 'users' # 标准写法，指明表名
uid = Column(Integer, primary_key=True, autoincrement=True)
name = Column(String(32), nullable=False)
gender = Column(Enum('M', 'F'), default='M', nullable=False)
email = Column(String(16), nullable=False)
user_type_id = Column(Integer, ForeignKey('usertype.tid')) # ForeignKey外键，连接到usertype的tid字段
__table_args__ = ( # 定义表的约束信息
UniqueConstraint('uid', 'name', name='uix_uid_name'), # 联合唯一键
Index('ix_name_email', 'name', 'email'), # 普通联合索引，ix_id_name是索引名称
)
engine = create_engine("mysql+pymysql://root:123qwe@127.0.0.1:3306/data?charset=utf8",
max_overflow=5) # 连接mysql，max_overflow控制在连接池达到最大值后可以创建的连接数。当这些额外的连接回收到连接池后将会被断开和抛弃
# 每次执行数据库操作时，都需要创建一个session
Session = sessionmaker(bind=engine) # 拿到一个连接
session = Session()
print(session.query(usertype)) # 查看下生成的sql语句
data=session.query(usertype.tid,usertype.type).filter(usertype.tid < 2) # 取出所有的数据；
for i in data: # 循环取出的数据
print(i.tid,i.type)
session.close()
数据删除
删除数据之前需要先查询；
#!/usr/bin/env python
# -*- coding:utf-8 -*-
from sqlalchemy.ext.declarative import declarative_base
from sqlalchemy import Column, Integer, String, ForeignKey, UniqueConstraint, Index, Enum
from sqlalchemy.orm import sessionmaker, relationship
from sqlalchemy import create_engine
DBbase = declarative_base()
# 创建用户类型表
class usertype(DBbase):
__tablename__ = 'usertype'
tid = Column(Integer, primary_key=True, autoincrement=True)
type = Column(Enum('付费用户', '未付费用户'))
# 创建用户表
class users(DBbase):
__tablename__ = 'users' # 标准写法，指明表名
uid = Column(Integer, primary_key=True, autoincrement=True)
name = Column(String(32), nullable=False)
gender = Column(Enum('M', 'F'), default='M', nullable=False)
email = Column(String(16), nullable=False)
user_type_id = Column(Integer, ForeignKey('usertype.tid')) # ForeignKey外键，连接到usertype的tid字段
__table_args__ = ( # 定义表的约束信息
UniqueConstraint('uid', 'name', name='uix_uid_name'), # 联合唯一键
Index('ix_name_email', 'name', 'email'), # 普通联合索引，ix_id_name是索引名称
)
engine = create_engine("mysql+pymysql://root:123qwe@127.0.0.1:3306/data?charset=utf8",
max_overflow=5) # 连接mysql，max_overflow控制在连接池达到最大值后可以创建的连接数。当这些额外的连接回收到连接池后将会被断开和抛弃
# 每次执行数据库操作时，都需要创建一个session
Session = sessionmaker(bind=engine) # 拿到一个连接
session = Session()
print(session.query(usertype)) # 查看下生成的sql语句
data=session.query(usertype.tid,usertype.type).filter(usertype.tid > 2).delete() # 取出所有的数据,然后删除；
for i in data: # 循环取出的数据
print(i.tid,i.type)
session.close()
数据修改
修改之前也需要先查询；
#!/usr/bin/env python
# -*- coding:utf-8 -*-
from sqlalchemy.ext.declarative import declarative_base
from sqlalchemy import Column, Integer, String, ForeignKey, UniqueConstraint, Index, Enum
from sqlalchemy.orm import sessionmaker, relationship
from sqlalchemy import create_engine
DBbase = declarative_base()
# 创建用户类型表
class usertype(DBbase):
__tablename__ = 'usertype'
tid = Column(Integer, primary_key=True, autoincrement=True)
type = Column(Enum('付费用户', '未付费用户'))
# 创建用户表
class users(DBbase):
__tablename__ = 'users' # 标准写法，指明表名
uid = Column(Integer, primary_key=True, autoincrement=True)
name = Column(String(32), nullable=False)
gender = Column(Enum('M', 'F'), default='M', nullable=False)
email = Column(String(16), nullable=False)
user_type_id = Column(Integer, ForeignKey('usertype.tid')) # ForeignKey外键，连接到usertype的tid字段
__table_args__ = ( # 定义表的约束信息
UniqueConstraint('uid', 'name', name='uix_uid_name'), # 联合唯一键
Index('ix_name_email', 'name', 'email'), # 普通联合索引，ix_id_name是索引名称
)
engine = create_engine("mysql+pymysql://root:123qwe@127.0.0.1:3306/data?charset=utf8",
max_overflow=5) # 连接mysql，max_overflow控制在连接池达到最大值后可以创建的连接数。当这些额外的连接回收到连接池后将会被断开和抛弃
# 每次执行数据库操作时，都需要创建一个session
Session = sessionmaker(bind=engine) # 拿到一个连接
session = Session()
print(session.query(usertype)) # 查看下生成的sql语句
data = session.query(usertype.tid, usertype.type).filter(usertype.tid <= 3).update(
{
usertype.type: '未付费用户'
}
) # 取出所有过滤后的数据,然后进行数据更新；
session.commit()
session.close()
操作总结
增
obj = Users(name="alex0", extra='sb')
session.add(obj)
session.add_all([
Users(name="alex1", extra='sb'),
Users(name="alex2", extra='sb'),
])
session.commit()
删
session.query(Users).filter(Users.id > 2).delete()
session.commit()
改
session.query(Users).filter(Users.id > 2).update({"name" : "099"})
session.query(Users).filter(Users.id > 2).update({Users.name: Users.name + "099"}, synchronize_session=False) # 在原来的基础上做操作，这是字符串的操作
session.query(Users).filter(Users.id > 2).update({"num": Users.num + 1}, synchronize_session="evaluate") # 在原来的基础上做操作，这是数字的操作
session.commit()
查
ret = session.query(Users).all()
ret = session.query(Users.name, Users.extra).all()
ret = session.query(Users).filter_by(name='alex').all()
ret = session.query(Users).filter_by(name='alex').first()
ret = session.query(Users).filter(text("id<:value and name=:name")).params(value=224, name='fred').order_by(User.id).all()
ret = session.query(Users).from_statement(text("SELECT * FROM users where name=:name")).params(name='ed').all()
其他
# 条件
ret = session.query(Users).filter_by(name='alex').all()
ret = session.query(Users).filter(Users.id > 1, Users.name == 'eric').all()
ret = session.query(Users).filter(Users.id.between(1, 3), Users.name == 'eric').all()
ret = session.query(Users).filter(Users.id.in_([1,3,4])).all()
ret = session.query(Users).filter(~Users.id.in_([1,3,4])).all()
ret = session.query(Users).filter(Users.id.in_(session.query(Users.id).filter_by(name='eric'))).all()
from sqlalchemy import and_, or_
ret = session.query(Users).filter(and_(Users.id > 3, Users.name == 'eric')).all()
ret = session.query(Users).filter(or_(Users.id < 2, Users.name == 'eric')).all()
ret = session.query(Users).filter(
or_(
Users.id < 2,
and_(Users.name == 'eric', Users.id > 3),
Users.extra != ""
)).all()
# 通配符
ret = session.query(Users).filter(Users.name.like('e%')).all()
ret = session.query(Users).filter(~Users.name.like('e%')).all()
# 限制
ret = session.query(Users)[1:2]
# 排序
ret = session.query(Users).order_by(Users.name.desc()).all()
ret = session.query(Users).order_by(Users.name.desc(), Users.id.asc()).all()
# 分组
from sqlalchemy.sql import func
ret = session.query(Users).group_by(Users.extra).all()
ret = session.query(
func.max(Users.id),
func.sum(Users.id),
func.min(Users.id)).group_by(Users.name).all()
ret = session.query(
func.max(Users.id),
func.sum(Users.id),
func.min(Users.id)).group_by(Users.name).having(func.min(Users.id) >2).all()
# 连表
ret = session.query(Users, Favor).filter(Users.id == Favor.nid).all()
ret = session.query(Person).join(Favor).all()
ret = session.query(Person).join(Favor, isouter=True).all()
# 组合
q1 = session.query(Users.name).filter(Users.id > 2)
q2 = session.query(Favor.caption).filter(Favor.nid < 2)
ret = q1.union(q2).all()
q1 = session.query(Users.name).filter(Users.id > 2)
q2 = session.query(Favor.caption).filter(Favor.nid < 2)
ret = q1.union_all(q2).all()