openstack中的rpc遠(yuǎn)程調(diào)用的方法
眾所周知,OpenStack的通信方式有兩種,一種是基于HTTP協(xié)議的RESTFul API方式,另一種則是RPC調(diào)用。兩種通信方式的應(yīng)用場(chǎng)景有所不同,在OpenStack中,前者主要用于各組件之間的通信(如nova與glance的通信),而后者則用于同一組件中各個(gè)不同模塊之間的通信(如nova組件中nova-compute與nova-scheduler的通信)。
nova中rpc調(diào)用非常多,用pycharm點(diǎn)點(diǎn)點(diǎn)跟函數(shù)的時(shí)候遇到rpc就會(huì)點(diǎn)不下去了,不解決直接就看不下去了那種多法
什么是 RPC
看不明白這個(gè)圖對(duì)于看nova代碼,其實(shí)不是很重要,直接忽略以后再看也可以,當(dāng)務(wù)之急是解決一下看openstack代碼遇到rpc就跟丟了的問(wèn)題
RPC、消息隊(duì)列、RESTful
這三個(gè)其實(shí)不是一個(gè)層面的東西,本質(zhì)上不應(yīng)該放在一起比,但是因?yàn)槎加脕?lái)通信,比較容易混淆就還是解釋一下
- RESTful:主要用于各組件之間的通信(比如nova與glance的通信),或者說(shuō)用于組件對(duì)外提供調(diào)用接口
- RPC:則用于同一組件中各個(gè)不同模塊之間的通信(比如nova組件中nova-compute與-nova-scheduler的通信)
- 消息隊(duì)列:用于解耦組件,也是組件間通信用的,而且會(huì)有一個(gè)隊(duì)列用來(lái)暫存消息
在nova中的典型rpc
nova/nova/nova/conductor/tasks/live_migrate.py
class LiveMigrationTask(base.TaskBase): def __init__(self, context, instance, destination, block_migration, disk_over_commit, migration, compute_rpcapi, servicegroup_api, scheduler_client): super(LiveMigrationTask, self).__init__(context, instance) ... def _execute(self): self._check_instance_is_active() self._check_host_is_up(self.source) if not self.destination: self.destination = self._find_destination() self.migration.dest_compute = self.destination self.migration.save() else: self._check_requested_destination() # TODO(johngarbutt) need to move complexity out of compute manager # TODO(johngarbutt) disk_over_commit? #調(diào)用 ComputeAPI 類中的 live_migration() RPC接口 return self.compute_rpcapi.live_migration(self.context, host=self.source, instance=self.instance, dest=self.destination, block_migration=self.block_migration, migration=self.migration, migrate_data=self.migrate_data)
conductor
以compute_rpcapi.live_migration
的方式遠(yuǎn)程調(diào)用compute
的live_migration
,過(guò)程就是, conductor
以RPC
的方式發(fā)出一個(gè)請(qǐng)求到Queue
再被nova-compute
接收
nova/nova/nova/compute/rpcapi.py
class ComputeAPI(object): # 這是一個(gè)RPC遠(yuǎn)程調(diào)用的方法 def live_migration(self, ctxt, instance, dest, block_migration, host, migration, migrate_data=None): args = {'migration': migration} version = '4.2' if not self.client.can_send_version(version): version = '4.0' # 獲取目標(biāo) compute 主機(jī)(DEST HOST)的RPC client,即被調(diào)用的服務(wù)進(jìn)程的HostIP cctxt = self.client.prepare(server=host, version=version) # 通過(guò)目標(biāo)主機(jī)對(duì)象的 RPC cliient 來(lái)調(diào)用遠(yuǎn)程過(guò)程方法 cast() ,以此來(lái)實(shí)現(xiàn)遠(yuǎn)程調(diào)用 cctxt.cast(ctxt, 'live_migration', instance=instance, dest=dest, block_migration=block_migration, migrate_data=migrate_data, **args) # cast()異步遠(yuǎn)程調(diào)用,不會(huì)阻塞別的進(jìn)程,適合于需要長(zhǎng)時(shí)間進(jìn)行的執(zhí)行過(guò)程 # cast()的第二個(gè)參數(shù)是RPC client調(diào)用的函數(shù)名,case()后面的參數(shù)會(huì)繼續(xù)作為參數(shù)傳入該調(diào)用函數(shù) # cast()函數(shù)內(nèi)的live_migration()函數(shù)是 manager.live_migration() 視具體實(shí)現(xiàn)遷移功能的函數(shù),在manager.py內(nèi)實(shí)現(xiàn)。
調(diào)用的時(shí)候是從nova/nova/conductor/tasks/live_migrate.py
到nova/nova/compute/rpcapi.py
,但是實(shí)際上是compute
服務(wù)首先得在rpcapi.py
提供出接口函數(shù),然后使用者通過(guò)
- 1. import導(dǎo)入的方式去使用rpc調(diào)用
- 2. 類實(shí)例化傳參的方式去引入
熱遷移這里用的就是類實(shí)例化傳參
tip: call()表示同步調(diào)用 和 cast()表示異步調(diào)用
根據(jù)在rpc.py
或者rpcapi.py
中的cast()
的第二個(gè)參數(shù),去該服務(wù)下的manager.py
中找和這個(gè)參數(shù)同名的函數(shù)(這個(gè)就是rpc
最終想要調(diào)用的函數(shù)),我們這里是compute_rpcapi
,所以要去找compute
下的mannager.py
為什么要去找mannager,是因?yàn)閚ova.compute.manager 會(huì)一直監(jiān)聽(tīng) Queue ,當(dāng)Queue中存在相關(guān)的 RPC 請(qǐng)求時(shí),就去完成這個(gè)請(qǐng)求
nova/nova/nova/compute/manager.py
@wrap_exception() @wrap_instance_event(prefix='compute') @wrap_instance_fault def live_migration(self, context, dest, instance, block_migration, migration, migrate_data): """執(zhí)行實(shí)時(shí)遷移。 :param context: security context :param dest: destination host :param instance: a nova.objects.instance.Instance object :param block_migration: if true, prepare for block migration :param migration: an nova.objects.Migration object :param migrate_data: implementation specific params """ self._set_migration_status(migration, 'queued') def dispatch_live_migration(*args, **kwargs): with self._live_migration_semaphore: # 調(diào)用_do_live_migration執(zhí)行遷移 self._do_live_migration(*args, **kwargs) # NOTE(danms): We spawn here to return the RPC worker thread back to # the pool. Since what follows could take a really long time, we don't # want to tie up RPC workers. utils.spawn_n(dispatch_live_migration, context, dest, instance, block_migration, migration, migrate_data)
當(dāng)然實(shí)際干活的還不是manager.py
的def live_migration
,而是live_migration
函數(shù)去調(diào)用_do_live_migration
,但是之后的就是熱遷移的流程,在之前的文檔里寫(xiě)了就不展開(kāi)了,反正rpc的體現(xiàn)就只到這里
冷遷移中還有很多例子,不一一列舉了,有興趣可以去看冷遷移源碼分析這篇博客
看完例子會(huì)發(fā)現(xiàn),既然原生的代碼既然已經(jīng)寫(xiě)了rpc調(diào)用,那么對(duì)應(yīng)的服務(wù)肯定已經(jīng)提供了rpc接口,所以實(shí)際上看到compute_rpcapi
,可以不去compute
下的rpc
文件中找了,直接去compute
下的manager
看具體實(shí)現(xiàn)(不止compute
,其他服務(wù)也一樣),當(dāng)然,如果需要雪確定是同步還是異步調(diào)用那還是不要偷這一步的懶。
總結(jié)
完整的rpc應(yīng)該具有
- 組件A提供出rpc調(diào)用接口(
rpc.py
或者rpcapi.py
文件) - 組件B引入組件A的rpc (
import
或者類實(shí)例化傳參
) - 組件B調(diào)用組件A的rpc(以
rpc
方式發(fā)送一個(gè)請(qǐng)求到消息隊(duì)列) - 組件A處理請(qǐng)求(組件A監(jiān)聽(tīng)到發(fā)給自己的
rpc
請(qǐng)求會(huì)通過(guò)manager
處理請(qǐng)求)
如果只是看代碼,那么去對(duì)應(yīng)的manager
下面找實(shí)現(xiàn)就可以了,但是如果自己要加就還是的明白從哪里提供的、怎樣導(dǎo)入,何種途徑接收,這樣想在代碼里添加自己的rpc調(diào)用才心里有數(shù)
參考文獻(xiàn):
https://zhuanlan.zhihu.com/p/36427583
https://blog.csdn.net/Jmilk/article/details/52655645
https://www.cnblogs.com/wongbingming/p/11086773.html
https://blog.csdn.net/qq_33909098/article/details/118578133
到此這篇關(guān)于openstack中的rpc遠(yuǎn)程調(diào)用的文章就介紹到這了,更多相關(guān)openstack rpc調(diào)用內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
Python對(duì)象與json數(shù)據(jù)的轉(zhuǎn)換問(wèn)題實(shí)例詳解
JSON(JavaScript?Object?Notation)?是一種輕量級(jí)的數(shù)據(jù)交換格式,很受廣大用戶喜愛(ài),今天通過(guò)本文給大家介紹Python對(duì)象與json數(shù)據(jù)的轉(zhuǎn)換問(wèn)題,需要的朋友可以參考下2022-07-07pycharm 實(shí)現(xiàn)調(diào)試窗口恢復(fù)
這篇文章主要介紹了pycharm 實(shí)現(xiàn)調(diào)試窗口恢復(fù)的操作,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2021-02-02pycharm設(shè)置python文件模板信息過(guò)程圖解
這篇文章主要介紹了pycharm設(shè)置python文件模板信息過(guò)程圖解,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-03-03Python實(shí)現(xiàn)的多進(jìn)程拷貝文件并顯示百分比功能示例
這篇文章主要介紹了Python實(shí)現(xiàn)的多進(jìn)程拷貝文件并顯示百分比功能,涉及Python多進(jìn)程、文件遍歷、拷貝等相關(guān)操作技巧,需要的朋友可以參考下2019-04-04python利用xpath爬取網(wǎng)上數(shù)據(jù)并存儲(chǔ)到django模型中
這篇文章主要介紹了python利用xpath爬取網(wǎng)上數(shù)據(jù)并存儲(chǔ)到django模型中,本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2021-02-02python使用Bokeh庫(kù)實(shí)現(xiàn)實(shí)時(shí)數(shù)據(jù)的可視化
Python語(yǔ)言以其豐富的數(shù)據(jù)科學(xué)生態(tài)系統(tǒng)而聞名,其中Bokeh庫(kù)作為一種功能強(qiáng)大的可視化工具,為實(shí)時(shí)數(shù)據(jù)的可視化提供了優(yōu)秀的支持,本文將介紹如何使用Bokeh庫(kù)實(shí)現(xiàn)實(shí)時(shí)數(shù)據(jù)的可視化,并提供相關(guān)代碼實(shí)例,需要的朋友可以參考下2024-05-05Python機(jī)器學(xué)習(xí)NLP自然語(yǔ)言處理基本操作之命名實(shí)例提取
自然語(yǔ)言處理(?Natural?Language?Processing,?NLP)是計(jì)算機(jī)科學(xué)領(lǐng)域與人工智能領(lǐng)域中的一個(gè)重要方向。它研究能實(shí)現(xiàn)人與計(jì)算機(jī)之間用自然語(yǔ)言進(jìn)行有效通信的各種理論和方法2021-11-11用openCV和Python 實(shí)現(xiàn)圖片對(duì)比,并標(biāo)識(shí)出不同點(diǎn)的方式
今天小編就為大家分享一篇用openCV和Python 實(shí)現(xiàn)圖片對(duì)比,并標(biāo)識(shí)出不同點(diǎn)的方式,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-12-12