设为首页 收藏本站
查看: 662|回复: 0

[经验分享] python与RPC

[复制链接]

尚未签到

发表于 2017-4-23 06:07:24 | 显示全部楼层 |阅读模式
  介绍一下python 的rpc 解决方案。
  在google的doc上有共享的ppt文档 地址http://docs.google.com/present/view?id=dfz4688f_0gvdx5cc8&revision=_latest&start=0&theme=blank&cwj=true
  全文摘抄如下:
  主要内容

  
[size=0.666667em]
动态语言特性,python简介 

[size=0.666667em]

[size=0.666667em]python带的一个RPC SimpleXMLRPCServer 说明 什么是RPC, 以及RPC工作过程。

[size=0.666667em]

[size=0.666667em]RPC的工作过程讨论它的本质。以及动态语言在运用RPC上的优势。

[size=0.666667em]

[size=0.666667em]3 RPC传输协议, UDP,TCP,HTTP,XXXP.

[size=0.666667em]

[size=0.666667em]4 RPC的数据协议, xmljson,各种私有二进制协议(hessian amf3.)。 大公司的google protocolbuffer  facebook thrift

[size=0.666667em]

[size=0.666667em]个人推荐 一个精巧 好用 开源 RPC ----phprpc

[size=0.666667em] 

[size=0.666667em]
[size=0.666667em]
[size=0.666667em]
0.1 动态语言特性,python举例说明

[size=0.666667em]
[size=0.75em]类型

[size=0.5em]a = 10 a = string a = [] 变量可以改变类型 不用声明。 往往可以看成是同一父类,如python的所有类型在c语言级别上都是Pyobject这个类型

[size=0.75em]释执行

[size=0.75em]python一行一行的解释执行,其动态语言也很相似(js 一段一段解释执行)。Python lua ruby 等会生成字节代码,pythondis块可以显示字节代码。

[size=0.75em]拟机

[size=0.75em]释性的语言往往面对的不是cpu具体硬件机器,所以一般都有虚拟机(解释器)。Javascript 对动态语言的深入了解 就是了解他的虚机。

[size=0.75em]4自省能力

[size=0.75em]类型的特点也就等价于它具有强大的自省能力,强大的自省能力允许了动态改变类型数据的基础。这个为RPC应用带来了很多的便利。主要是介绍这点。

[size=0.75em]
0.2python的自省与动态


查看自己的类型 type()

[size=0.666667em]

[size=0.666667em]1查看自己的属性 dir()  __dict__ 查看帮助 help()。

[size=0.666667em]

[size=0.666667em]2设置获得自己的属性getattr(重__getattr__ setattr hasattr 

[size=0.666667em]

[size=0.666667em]类型的多态更加广泛。例如print 可以对任何对象调用。这里用到

[size=0.666667em]可以像函数一样被调用的类。一个类也可以被call 只要重__call__

[size=0.666667em]

[size=0.666667em]
1.1自在电池的python

[size=0.75em]一个最简单的RPC 务器端

[size=0.75em]from SimpleXMLRPCServer import SimpleXMLRPCServer

[size=0.75em]def add(a , b):

[size=0.75em]return a+b

[size=0.75em]server = SimpleXMLRPCServer(("localhost", 8000))

[size=0.75em]server.register_function(add)

[size=0.75em]server.serve_forever()

[size=0.75em]

[size=0.75em]测试客户端

[size=0.75em]from xmlrpclib import ServerProxy

[size=0.75em]server = ServerProxy("http://localhost:8000")

[size=0.75em]try:

[size=0.75em]ret = server.add(30,90)

[size=0.75em]print 'result:', ret

[size=0.75em]print 'result type:', type(ret)

[size=0.75em]except Exception as ex:

[size=0.75em]print "exception", ex

[size=0.75em]
1.2 务器客户端都干了什么?



[size=0.583333em]从客户端打印出通讯的数据:

[size=0.583333em]发向服务器的:

[size=0.666667em]POST /RPC2 HTTP/1.0

[size=0.666667em]Host: localhost:8000

[size=0.666667em]User-Agent: xmlrpclib.py/1.0.1 (by www.pythonware.com)

[size=0.666667em]Content-Type: text/xml

[size=0.666667em]Content-Length: 189

[size=0.666667em]<?xml version='1.0'?>

[size=0.666667em]<methodCall>

[size=0.666667em]<methodName>add</methodName>

[size=0.666667em]<params>

[size=0.666667em]<param><value><int>30</int></value></param>

[size=0.666667em]<param><value><int>90</int></value></param>

[size=0.666667em]</params>

[size=0.666667em]</methodCall>

[size=0.666667em] 

[size=0.666667em] 


[size=0.583333em]务器返回的数据:

[size=0.75em]HTTP/1.0 200 OK'

[size=0.75em]Server: BaseHTTP/0.3 Python/2.6.1

[size=0.75em]Date: Mon, 20 Jul 2009 05:33:09 GMT

[size=0.75em]Content-type: text/xml

[size=0.75em]Content-length: 123

[size=0.75em]<?xml version='1.0'?>

[size=0.75em]<methodResponse>

[size=0.75em]<params><param><value><int>120</int></value></param></params>

[size=0.75em]</methodResponse>

[size=0.75em]特点: http协议传输协议,xml做数据协议应用协议。

[size=0.75em]http只作为传输协议 所以只使用了post方法。

[size=0.75em] 

[size=0.75em] 


[size=0.75em]3 Xml为数据协议是如何生成的?

[size=0.75em]户端在调用 server.add(30,90) 如何生成xml接口调用描述?

[size=0.75em]载方法: def __getattr__(self, name)  点操作符会调用它。返回对象的一个属性。因为python的函数也是对象所以 __getattr__ 返回的是一个函数对象。 函数对象可以重载它的__call__方法 来达到函数调用时的行为。如图:

[size=0.75em]server.add(30,90)  server.__getattr(name methodobj(30,90)  method.__call__(30,90)  生成xml send request  收到xml数据 生成python对象return

[size=0.75em]

[size=0.75em]这个过程动态语言和静态语言的区别在于,动态语言是自省能力生成的接口描述调用,而静态语言rpc往往需要手工来编写这个调用描述。所以动态语言可以像写本地函数调用一样调用远程函数。 给程序员最好的用户感受。

[size=0.75em]

[size=0.75em]RPC质上是一个链接程序 ld

[size=0.75em]找到函数地址

[size=0.75em]确保参数正确(因为动态语言弱类型 所以这点表现不明显,只是确保参数个数正确 类型正确属于语义上的由程序员保证。)

[size=0.75em]

[size=0.75em]c语言的编译链接。当调用一个外部库函数的时候,只写符号在文件里,链接程序确保找到这个函数加载进来,确定程序运行时这个函数代码段的内存地址。

[size=0.75em]而且链接程序在链接之前会检查函数声明,来确保函数的参数类型和个数正确(c90之前 还是只有K&R c 链接时 是不检查参数的)。

[size=0.75em]泛开来想,计算机内所谓远近,都是相对的 ,硬盘相对于内存来说是远的,网络相对于内存也是远的。调用一个文件函数,底层也是调用文件系统这个服务然后把硬盘数据读入硬盘。调用远程函数也是如此。只是“寻址”的过程有所不同。其实都是链接技术。

[size=0.75em] 

[size=0.75em] 

[size=0.75em]
3.1RPC 传输协议与应用协议

[size=0.75em] 


[size=0.75em]传输协议:

[size=0.75em]RPC的特点之一是向程序员隐藏网络层。 使得调用远程方法像调用本地方法一样。 所以传输协议也就可以有N多的选择。  HTTP TCPudp 。甚至可以用邮件协议。总之这点对程序员要保持透明。

[size=0.75em]也就是说程序员即使不会网络编程 没有玩socket 都不妨碍他进行服务器的远程调用。

[size=0.75em]应用协议:

[size=0.75em]有很多数据格式可以采用 xml json amf3 yaml …… 为了速度和空间考虑很多rpc采用了二进制协议。不管怎样这一层对程序员也应当是透明的。

[size=0.75em]

[size=0.75em]所有这些使得程序员彻底脱离了重复的“网络建设”。而且保证了代码的分离。

[size=0.75em]
4.1Protocolbuffer


[size=0.75em]这是google公司使用的标准数据格式。Google产品都是用的它

[size=0.666667em]Protocol buffers are now Google's lingua franca for data  at time of writing, there are 48,162 different message types defined in the Google code tree across 12,183.proto files. They're used both in RPC systems and for persistent storage of data in a variety of storage systems.

[size=0.75em]http://code.google.com/intl/zh-CN/apis/protocolbuffers/docs/overview.html

[size=0.583333em]google公司只使用 python java c++ 所以这个东东也只支持这三种语言。

[size=0.583333em]

[size=0.583333em]特点:


<span

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-367903-1-1.html 上篇帖子: python tips(3) 下篇帖子: Python自学教程
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表