内容简介：本次更新的版本是v0.0.3, 在v0.0.2的基础上，去除了zeromq相关依赖，添加了测试用例以及性能测试脚本。 保证开发者安装依赖过程更加方便快速。 Agileutil是什么？ Agileutil是一个Python3 RPC框架。基于微服务架构...
本次更新的版本是v0.0.3, 在v0.0.2的基础上，去除了zeromq相关依赖，添加了测试用例以及性能测试脚本。
保证开发者安装依赖过程更加方便快速。
Agileutil是什么？
Agileutil是一个 Python 3 RPC框架。基于微服务架构，封装了rpc/http/orm/log等常用组件，提供了简洁的API，开发者可以很快上手，快速进行业务开发。
安装
pip install agileutil
RPC
这是Agileutil最核心的功能。基于TCP协议和Pickle序列化方式实现的远程过程调用。下面是一个基于TCP协议的服务端例子。可参考下面的步骤进行开发：
- 创建一个TcpRpcServer对象, 指定服务端监听地址和端口
- 调用regist()方法，将提供服务的方法注册到服务端（只有调用regist()方法注册过的服务，才可以被客户端访问）
- 调用serve()方法，开始处理客户端请求
TCP RPC 服务端
from agileutil.rpc.server import TcpRpcServer
def sayHello(name):
return 'hello ' + name
nationServer = TcpRpcServer('0.0.0.0', 9988, workers=4)
nationServer.regist(sayHello)
nationServer.serve()
TCP RPC 客户端
客户端例子：
- 创建TcpRpcClient对象，指定RPC服务端地址
- 通过call()方法，指定服务端方法名称和参数（注意：如果方法名不存在，或者服务端未调用regist()方法注册，那么call（）方法将抛出异常）
- call() 方法的返回值和在本地调用一样，原来是什么返回类型，就还是什么（例如返回字典、列表、对象甚至内置类型，经过序列化后，不会发生改变）
from agileutil.rpc.client import TcpRpcClient c = TcpRpcClient('127.0.0.1', 9988) resp = c.call(func = 'sayHello', args = ('zhangsan')) print('resp', resp)
Tornado RPC 服务端
TornadoTcpRpcServer同样是基于TCP协议的RPC服务端，只是底层是基于Tornado高性能网络库实现。你同样可以使用TornadoTcpRpcServer创建一个TCP服务，参考TcpRpcServer的创建步骤：
- 创建一个TornadoTcpRpcServer对象，指定监听的地址和端口
- 调用regist()注册需要提供给客户端的方法
- 调用server()方法开始处理客户端请求
from agileutil.rpc.server import TornadoTcpRpcServer
def rows():
return {'name' : 123}
s = TornadoTcpRpcServer('127.0.0.1', 9988)
s.regist(rows)
s.serve()
Tornado RPC 客户端
客户端使用TcpRpcClient对象即可。
from agileutil.rpc.client import TcpRpcClient c = TcpRpcClient('127.0.0.1', 9988) resp = c.call(func = 'rows')) print('resp', resp)
HTTP RPC 服务端
Agileutil也提供了基于HTTP协议的远程过程调用。底层是基于高性能的Sanic异步web框架实现的，使用起来非常简单，和TcpRpcServer的用法类似:
from agileutil.rpc.server import HttpRpcServer
def sayHello(name):
return 'hello ' + name
s = HttpRpcServer('0.0.0.0', 9988, workers=1)
s.regist(sayHello)
s.serve()
HTTP RPC Client
同样的，客户端使用对应的HttpRpcClient对象:
from agileutil.rpc.client import HttpRpcClient cli = HttpRpcClient('127.0.0.1', 9988) for i in range(10): resp = cli.call(func = 'sayHello', args=('zhangsan')) print('resp', resp)
UDP RPC 服务端
如果想要使用UDP协议，将TcpRpcServer替换为UdpRpcServer即可。一个UDP RPC服务端的例子如下，与TCP类似：
- 创建UdpRpcServer对象，指定监听的地址和端口
- 调用regist()方法，将需要被客户端请求的方法注册进去
- 调用serve()方法开始处理客户端请求
- 返回的内容和调用本地方法没有差别，框架内部通过序列化和反序列化，将数据转化为程序内的对象（字典、列表、内置类型、各种类对象等等）
from agileutil.rpc.server import UdpRpcServer
def sayHello(name):
return 'hello ' + name
s = UdpRpcServer('0.0.0.0', 9988)
s.regist(sayHello)
s.serve()
UDP RPC 客户端
一个UDP客户端的例子：
- 创建UdpRpcClient对象，指定服务端地址和端口
- 调用call()方法，并指定服务端的方法名称和参数
- 返回的内容和调用本地方法没有差别，框架内部通过序列化和反序列化，将数据转化为程序内的对象（字典、列表、内置类型、各种类对象等等）
from agileutil.rpc.client import UdpRpcClient cli = UdpRpcClient('127.0.0.1', 9988) for i in range(5000): resp = cli.call(func = 'sayHello', args =('xiaoming') ) print(resp)
服务发现
Agileutil既支持客户端与服务端直连，也支持服务注册发现 （客户端与服务端直连的例子，请参考上面的TcpRpcServer部分）。 目前仅支持基于Consul的服务发现，未来计划支持etcd。TCP/UDP/HTTP这些协议的服务端、客户端类库均支持服务注册发现，下面的例子以TCP为例。
健康检查
基于Consul的Check机制。服务注册后，自动添加一个定期的健康检查（默认为TCP端口检查，未来有计划支持HTTP健康检查）。一旦服务进程挂掉，那么客户端将请求到其他健康的服务节点上。同时客户端也存在重试机制，由于健康检查存在时间间隔，可能服务端进程挂掉后，仍需等待一段时间才被Consul发现，这时客户端如果请求到挂掉的服务节点上失败后，客户端会尝试请求其他服务节点进行重试。
快速开始
服务注册发现的使用也很简单，请耐心看完。
- 第一步，你需要定义一个DiscoverConfig对象。 指定用于服务注册发现的Consul的地址和端口。同时通过serviceName参数指定一个全局唯一的服务名称（用于标记服务端服务）。同时指定服务端监听的地址和端口。
from agileutil.rpc.discovery import DiscoveryConfig
disconf = DiscoveryConfig(
consulHost = '192.168.19.103',
consulPort = 8500,
serviceName = 'test-rpc-server',
serviceHost = local_ip(),
servicePort = 9988
)
说明: 1.consulHost 和 consulPort 参数指定Consul的地址和端口 2.ServiceName 参数用于标记服务端名称，并通过服务名称进行服务发现，需要保证全局唯一 3.serviceHost和servicePort参数指定服务端监听的端口和地址
- 第二步、调用setDiscoverConfig()方法将DiscoveryConfig对象传入
- 第三步，之后调用serve()方法，开始处理请求
s = TcpRpcServer('0.0.0.0', 9988) s.regist(sayHello) disconf = DiscoveryConfig( consulHost = '192.168.19.103', consulPort = 8500, serviceName = 'test-rpc-server', serviceHost = local_ip(), servicePort = 9988 ) s.setDiscoverConfig(disconf) s.serve()
完整的服务端示例 (UDP/HTTP调用方式相同)
from agileutil.rpc.server import TcpRpcServer
from agileutil.rpc.discovery import DiscoveryConfig
def sayHello(name):
return 'hello ' + name
disconf = DiscoveryConfig(
consulHost = '192.168.19.103',
consulPort = 8500,
serviceName = 'test-rpc-server',
serviceHost = local_ip(),
servicePort = 10001
)
server = TcpRpcServer('0.0.0.0', 10001)
server.setDiscoverConfig(disconf)
server.regist(sayHello)
server.serve()
完整的客户端示例（UDP/HTTP调用方式相同）
- 创建DiscoveryConfig对象，指定Consul的地址端口（serviceName参数和服务端的保持一致，且全局唯一）
- 调用setDiscoveryConfig()方法传入服务发现配置
from agileutil.rpc.client import TcpRpcClient
from agileutil.rpc.discovery import DiscoveryConfig
cli = TcpRpcClient()
disconf = DiscoveryConfig(
consulHost= '192.168.19.103',
consulPort= 8500,
serviceName='test-rpc-server'
)
cli.setDiscoveryConfig(disconf)
for i in range(3):
resp = cli.call(func = 'sayHello', args=('mary'))
ORM
定义一个nation表，包含两个字段：id字段和name字段
CREATE TABLE `nation` ( `id` int(11) NOT NULL AUTO_INCREMENT, `name` varchar(32) DEFAULT NULL, PRIMARY KEY (`id`) USING BTREE ) ENGINE=InnoDB AUTO_INCREMENT=1 DEFAULT CHARSET=utf8
- 首先调用Model.init()方法，设置 mysql 连接地址等信息
- 然后为nation表定一个Nation类，并继承自Model类
- 指定字段类型
from agileutil.orm import Model, IntField, CharField Model.init('127.0.0.1', 3306, 'root', '', 'test2', min_conn_num=10) class Nation(Model): tableName = 'nation' #required primaryKey = 'id' #required id = IntField() #field type int name = CharField() #field type char
创建记录
Nation(name='test').create()
查询一条记录
obj = Nation.filter('name', '=', 'test').first() print(obj.name, obj.id)
查询多条记录
objs = Nation.filter('name', '=', 'test') for obj in objs: print(obj.name, obj.id)
修改记录
obj = Nation.filter('name', '=', 'test').first() obj.name = 'test update' obj.update()
删除记录
Nation.filter('name', '=', 'test').delete()
另一种删除的方式
obj = Nation.filter('name', '=', 'test').first() obj.delete()
PoolDB
PooolDB实现了数据库连接池，并且ORM功能是基于PoolDB实现的。对于常用的数据库操作，如果不使用ORM，直接使用PoolDB也是可以的。
定义 PoolDB 对象.
from agileutil.db4 import PoolDB db = PoolDB(host='127.0.0.1', port=3306, user='root', passwd='', dbName='test2', min_conn_num=10) db.connect()
查询记录
sql = 'select * from nation'
rows = db.query(sql)
print(rows)
删除、修改、插入记录
sql = "insert into nation(name) values('test')" effect, lastid = db.update(sql) print(effect,lastid) sql = "delete from nation where name='test'" effect, _ = db.update(sql) print(effect,lastid)
DB
DB 是一个操作数据库的类，和PoolDB的区别是，它不支持数据库连接池，因此更建议使用PoolDB.它的用法和PoolDB是相似的。
定义DB对象
from agileutil.db import DB db = DB(host='127.0.0.1', port=3306, user='root', passwd='', dbName='test2')
查询记录
sql = 'select * from nation'
rows = db.query(sql)
print(rows)
修改、删除、插入记录
sql = "insert into nation(name) values('test')"
effetc = db.update(sql)
print(effetc, db.lastrowid())
日志
Agileutil提供了一个线程安全的Log对象，使用起来非常简单。
from agileutil.log import Log logger = Log('./debug.log') logger.info(123, '456') logger.warning('warning') logger.error('error')
日志切割
默认日志按天分割，保留最近7天的，你也可以指定日志保留的天数。
logger = Log('./debug.log', logSaveDays=7)
logger.info('info')
当然，也可以强制不切割日志，通过isRotate参数。
logger = Log('./debug.log', isRotate=False)
logger.info('info')
ERROR级别日志
默认的，ERROR级别的日志，在日志文件中会被标红表示，更加醒目，便于排查问题。
logger.error('runtimee exception raise')
以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持 码农网
猜你喜欢:
本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。
爆款：如何打造超级IP
【美】安妮塔•埃尔伯斯 / 杨雨 / 中信出版社 / 2016-1-10 / 49
哈佛商学院IP运营与产品管理方法论第一书，翻转长尾理论的重要著作！ 电影大片、当红炸子鸡、百万畅销书背后的运营逻辑是什么？ 《五十度灰》、Lady Gaga、维多利亚的秘密有何共同秘密？ 漫威如何将蜘蛛侠、X战警、绿巨人打造成金矿？ 皇马如何打造体育IP，一跃成为全球收 入最高的足球俱乐部？ 爆款策略如何运用于电影、电视、音乐、出版、体育与商业各领域？ ----......一起来看看 《爆款：如何打造超级IP》 这本书的介绍吧!
