jjfjjj 发表于 2017-4-23 06:07:24

python与RPC

  介绍一下python 的rpc 解决方案。
  在google的doc上有共享的ppt文档 地址http://docs.google.com/present/view?id=dfz4688f_0gvdx5cc8&revision=_latest&start=0&theme=blank&cwj=true
  全文摘抄如下:
  主要内容

  
0 动态语言特性,python简介 。


1 以python自带的一个RPC库 ,SimpleXMLRPCServer 来说明 什么是RPC, 以及RPC工作过程。


2 通过RPC的工作过程讨论它的本质。以及动态语言在运用RPC上的优势。


3 RPC的传输协议, UDP,TCP,HTTP,XXXP.


4 RPC的数据协议, xml,json,各种私有二进制协议(hessian amf3….)。 大公司的google的 protocolbuffer , facebook的 thrift。


5 个人推荐 一个精巧 好用 开源 的RPC ----phprpc
 
0.1 动态语言特性,python举例说明
1 弱类型
a = 10 a = ‘string’ a = [] 变量可以改变类型 不用声明。 往往可以看成是同一父类,如python的所有类型在c语言级别上都是Pyobject这个类型
2 解释执行
python一行一行的解释执行,其动态语言也很相似(js 一段一段解释执行)。Python lua, ruby 等会生成字节代码,python的dis模块可以显示字节代码。
3 虚拟机
解释性的语言往往面对的不是cpu具体硬件机器,所以一般都有虚拟机(解释器)。Javascript ?对动态语言的深入了解 就是了解他的虚机。
4自省能力强
弱类型的特点也就等价于它具有强大的自省能力,强大的自省能力允许了动态改变类型数据的基础。这个为RPC的应用带来了很多的便利。主要是介绍这点。
0.2python的自省与动态

0 查看自己的类型 type()


1查看自己的属性 dir() , __dict__ 查看帮助 help()。


2设置获得自己的属性getattr(重载__getattr__) setattr hasattr 。


3 弱类型的多态更加广泛。例如print 可以对任何对象调用。这里用到
可以像函数一样被调用的类。一个类也可以被call 只要重载__call__


1.1自在电池的python
一个最简单的RPC 服务器端
from SimpleXMLRPCServer import SimpleXMLRPCServer
def add(a , b):
return a+b
server = SimpleXMLRPCServer(("localhost", 8000))
server.register_function(add)
server.serve_forever()


测试客户端
from xmlrpclib import ServerProxy
server = ServerProxy("http://localhost:8000")
try:
ret = server.add(30,90)
print 'result:', ret
print 'result type:', type(ret)
except Exception as ex:
print "exception", ex
1.2 服务器客户端都干了什么?


1 从客户端打印出通讯的数据:
发向服务器的:
POST /RPC2 HTTP/1.0
Host: localhost:8000
User-Agent: xmlrpclib.py/1.0.1 (by www.pythonware.com)
Content-Type: text/xml
Content-Length: 189
<?xml version='1.0'?>
<methodCall>
<methodName>add</methodName>
<params>
<param><value><int>30</int></value></param>
<param><value><int>90</int></value></param>
</params>
</methodCall>
 
 

2 服务器返回的数据:
HTTP/1.0 200 OK'
Server: BaseHTTP/0.3 Python/2.6.1
Date: Mon, 20 Jul 2009 05:33:09 GMT
Content-type: text/xml
Content-length: 123
<?xml version='1.0'?>
<methodResponse>
<params><param><value><int>120</int></value></param></params>
</methodResponse>
特点: http协议传输协议,xml做数据协议应用协议。
因为http只作为传输协议 所以只使用了post方法。
 
 

3 Xml作为数据协议是如何生成的?
客户端在调用 server.add(30,90) 如何生成xml接口调用描述?
重载方法: def __getattr__(self, name) , 点操作符会调用它。返回对象的一个属性。因为python的函数也是对象所以 __getattr__ 返回的是一个函数对象。 函数对象可以重载它的__call__方法 来达到函数调用时的行为。如图:
server.add(30,90) ➔ server.__getattr(‘name’) ➔ methodobj(30,90) ➔ method.__call__(30,90) ➔ 生成xml ,send request ➔ 收到xml数据 ➔生成python对象return。


这个过程动态语言和静态语言的区别在于,动态语言是自省能力生成的接口描述调用,而静态语言rpc往往需要手工来编写这个调用描述。所以动态语言可以像写本地函数调用一样调用远程函数。 给程序员最好的用户感受。


RPC本质上是一个链接程序 ld。
1 找到函数地址
2 确保参数正确(因为动态语言弱类型 所以这点表现不明显,只是确保参数个数正确 ,类型正确属于语义上的由程序员保证。)


回忆c语言的编译链接。当调用一个外部库函数的时候,只写符号在文件里,链接程序确保找到这个函数加载进来,确定程序运行时这个函数代码段的内存地址。
而且链接程序在链接之前会检查函数声明,来确保函数的参数类型和个数正确(c90之前 还是只有K&R c 链接时 是不检查参数的)。
泛开来想,计算机内所谓远近,都是相对的 ,硬盘相对于内存来说是远的,网络相对于内存也是远的。调用一个文件函数,底层也是调用文件系统这个服务然后把硬盘数据读入硬盘。调用远程函数也是如此。只是“寻址”的过程有所不同。其实都是链接技术。
 
 
3.1RPC 传输协议与应用协议
 

1 传输协议:
RPC的特点之一是向程序员隐藏网络层。 使得调用远程方法像调用本地方法一样。 所以传输协议也就可以有N多的选择。 常见 HTTP, TCP,udp 。甚至可以用邮件协议。总之这点对程序员要保持透明。
也就是说程序员即使不会网络编程 没有玩过socket 都不妨碍他进行服务器的远程调用。
2 应用协议:
有很多数据格式可以采用 ,xml ,json, amf3, yaml …… 为了速度和空间考虑很多rpc采用了二进制协议。不管怎样这一层对程序员也应当是透明的。


所有这些使得程序员彻底脱离了重复的“网络建设”。而且保证了代码的分离。
4.1Protocolbuffer

这是google公司使用的标准数据格式。Google的产品都是用的它
Protocol buffers are now Google's lingua franca for data – at time of writing, there are 48,162 different message types defined in the Google code tree across 12,183.proto files. They're used both in RPC systems and for persistent storage of data in a variety of storage systems.
http://code.google.com/intl/zh-CN/apis/protocolbuffers/docs/overview.html
因为google公司只使用 python java c++ 所以这个东东也只支持这三种语言。


特点:

<span
页: [1]
查看完整版本: python与RPC