解讀調(diào)用jupyter?notebook文件內(nèi)的函數(shù)一種簡(jiǎn)單方法
調(diào)用jupyter notebook文件內(nèi)的函數(shù)一種簡(jiǎn)單方法
python開(kāi)發(fā)環(huán)境jupyter notebook良好的交互式和模塊化受到很多python開(kāi)發(fā)人員的青睞,但是jupyter notebook是以json格式保存文件內(nèi)容的,而不是python文件那樣的普通格式,所以不能直接被python解析器解析,如何調(diào)用.ipynb中的module也成為一個(gè)問(wèn)題。
本文介紹一種方法,使得只要在我們的工作目錄下放置一個(gè)python文件,就可以正常調(diào)用其他jupyter notebook文件。
Jupyter Notebook官網(wǎng)介紹了一種簡(jiǎn)單的方法:http://jupyter-notebook.readthedocs.io/en/latest/examples/Notebook/Importing Notebooks.html
添加jupyter notebook解析文件
首先,創(chuàng)建一個(gè)python文件,例如Ipynb_importer.py,代碼如下:
import io, os,sys,types from IPython import get_ipython from nbformat import read from IPython.core.interactiveshell import InteractiveShell class NotebookFinder(object): """Module finder that locates Jupyter Notebooks""" def __init__(self): self.loaders = {} def find_module(self, fullname, path=None): nb_path = find_notebook(fullname, path) if not nb_path: return key = path if path: # lists aren't hashable key = os.path.sep.join(path) if key not in self.loaders: self.loaders[key] = NotebookLoader(path) return self.loaders[key] def find_notebook(fullname, path=None): """find a notebook, given its fully qualified name and an optional path This turns "foo.bar" into "foo/bar.ipynb" and tries turning "Foo_Bar" into "Foo Bar" if Foo_Bar does not exist. """ name = fullname.rsplit('.', 1)[-1] if not path: path = [''] for d in path: nb_path = os.path.join(d, name + ".ipynb") if os.path.isfile(nb_path): return nb_path # let import Notebook_Name find "Notebook Name.ipynb" nb_path = nb_path.replace("_", " ") if os.path.isfile(nb_path): return nb_path class NotebookLoader(object): """Module Loader for Jupyter Notebooks""" def __init__(self, path=None): self.shell = InteractiveShell.instance() self.path = path def load_module(self, fullname): """import a notebook as a module""" path = find_notebook(fullname, self.path) print ("importing Jupyter notebook from %s" % path) # load the notebook object with io.open(path, 'r', encoding='utf-8') as f: nb = read(f, 4) # create the module and add it to sys.modules # if name in sys.modules: # return sys.modules[name] mod = types.ModuleType(fullname) mod.__file__ = path mod.__loader__ = self mod.__dict__['get_ipython'] = get_ipython sys.modules[fullname] = mod # extra work to ensure that magics that would affect the user_ns # actually affect the notebook module's ns save_user_ns = self.shell.user_ns self.shell.user_ns = mod.__dict__ try: for cell in nb.cells: if cell.cell_type == 'code': # transform the input to executable Python code = self.shell.input_transformer_manager.transform_cell(cell.source) # run the code in themodule exec(code, mod.__dict__) finally: self.shell.user_ns = save_user_ns return mod sys.meta_path.append(NotebookFinder())
調(diào)用jupyter notebook module
在我們的jupyter notebook文件里調(diào)用Ipynb_importer.py,接下來(lái)我們就可以像調(diào)用普通python文件一樣調(diào)用其他.ipynb文件里的module了,例如有一個(gè)IpynbModule.ipynb文件,里面定義了一個(gè)foo函數(shù):
調(diào)用例子如下:
只要在我們的工作目錄下放置Ipynb_importer.py文件,就可以正常調(diào)用所有的jupyter notebook文件。
這種方法的本質(zhì)就是使用一個(gè)jupyter notenook解析器先對(duì).ipynb文件進(jìn)行解析,把文件內(nèi)的各個(gè)模塊加載到內(nèi)存里供其他python文件調(diào)用。
參考資料:
http://jupyter-notebook.readthedocs.io/en/latest/examples/Notebook/Importing Notebooks.html
jupyter Notebook魔法函數(shù)
魔法函數(shù)
使用魔法函數(shù)可以簡(jiǎn)單的實(shí)現(xiàn)一些單純python要很麻煩才能實(shí)現(xiàn)的功能。
符號(hào) | 功能 |
---|---|
%: | 行魔法函數(shù),只對(duì)本行代碼生效。 |
%%: | Cell魔法函數(shù),在整個(gè)Cell中生效,必須放于Cell首行。 |
%lsmagic: | 列出所有的魔法函數(shù) |
%magic | 查看各個(gè)魔法函數(shù)的說(shuō)明 |
? | 后面加上魔法函數(shù)名稱,可以查看該函數(shù)的說(shuō)明 |
一些常用魔法函數(shù)的示例:
魔法函數(shù) | 作用 |
---|---|
%%writefile | 調(diào)用外部python腳本 |
%run | 調(diào)用外部python腳本 |
%timeit | 測(cè)試單行語(yǔ)句的執(zhí)行時(shí)間 |
%%timeit | 測(cè)試整個(gè)單元中代碼的執(zhí)行時(shí)間 |
% matplotlib inline | 顯示 matplotlib 包生成的圖形 |
%%writefile | 寫(xiě)入文件 |
%pdb | 調(diào)試程序 |
%pwd | 查看當(dāng)前工作目錄 |
%ls | 查看目錄文件列表 |
%reset | 清除全部變量 |
%who | 查看所有全局變量的名稱,若給定類型參數(shù),只返回該類型的變量列表 |
%whos | 顯示所有的全局變量名稱、類型、值/信息 |
%xmode Plain | 設(shè)置為當(dāng)異常發(fā)生時(shí)只展示簡(jiǎn)單的異常信息 |
%xmode Verbose | 設(shè)置為當(dāng)異常發(fā)生時(shí)展示詳細(xì)的異常信息 |
%debug bug | 調(diào)試,輸入quit退出調(diào)試 |
%env | 列出全部環(huán)境變量 |
注意這些命令是在Python kernel中適用的,其他 kernel 不一定適用
magic函數(shù)主要包含兩大類,一類是行魔法(Line magic)前綴為%,一類是單元魔法(Cell magic)前綴為%%
%%writefile
調(diào)用外部python腳本%run
調(diào)用外部python腳本%timeit
測(cè)試單行語(yǔ)句的執(zhí)行時(shí)間%%timeit
測(cè)試整個(gè)單元中代碼的執(zhí)行時(shí)間% matplotlib inline
顯示 matplotlib 包生成的圖形%%writefile
寫(xiě)入文件%pdb
調(diào)試程序%pwd
查看當(dāng)前工作目錄%ls
查看目錄文件列表%reset
清除全部變量%who
查看所有全局變量的名稱,若給定類型參數(shù),只返回該類型的變量列表%whos
顯示所有的全局變量名稱、類型、值/信息
總結(jié)
以上為個(gè)人經(jīng)驗(yàn),希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。
相關(guān)文章
python爬蟲(chóng)爬取某圖書(shū)網(wǎng)頁(yè)實(shí)例講解
這篇文章主要介紹了python爬蟲(chóng)爬取某圖書(shū)網(wǎng)頁(yè)實(shí)例,下面是通過(guò)requests庫(kù)來(lái)對(duì)ajax頁(yè)面進(jìn)行爬取的案例,與正常頁(yè)面不同,這里我們獲取url的方式也會(huì)不同,這里我們通過(guò)爬取一個(gè)簡(jiǎn)單的ajax小說(shuō)頁(yè)面來(lái)為大家講解,需要的朋友可以參考下2024-08-08python利用platform模塊獲取系統(tǒng)信息
這篇文章主要介紹了python利用platform模塊獲取系統(tǒng)信息,幫助大家更好的理解和使用python,感興趣的朋友可以了解下2020-10-10Python+OpenCV圖像處理——實(shí)現(xiàn)輪廓發(fā)現(xiàn)
這篇文章主要介紹了Python+OpenCV實(shí)現(xiàn)輪廓發(fā)現(xiàn),幫助大家更好的利用python處理圖片,感興趣的朋友可以了解下2020-10-10設(shè)置python3為默認(rèn)python的方法
我們知道在Windows下多版本共存的配置方法就是改可執(zhí)行文件的名字,配置環(huán)境變量。接下來(lái)通過(guò)本文給大家介紹設(shè)置python3為默認(rèn)python的方法,一起看看吧2018-10-10python3 json數(shù)據(jù)格式的轉(zhuǎn)換(dumps/loads的使用、dict to str/str to dict、j
JSON (JavaScript Object Notation) 是一種輕量級(jí)的數(shù)據(jù)交換格式。它基于ECMAScript的一個(gè)子集。這篇文章主要介紹了python3 json數(shù)據(jù)格式的轉(zhuǎn)換(dumps/loads的使用、dict to str/str to dict、json字符串/字典的相互轉(zhuǎn)換) ,需要的朋友可以參考下2019-04-04手把手教你用Python打造互動(dòng)式中秋節(jié)慶祝小程序
中秋節(jié)將至,本文提供了一個(gè)使用Python開(kāi)發(fā)的中秋節(jié)慶祝小程序教程,通過(guò)簡(jiǎn)單的步驟,您可以創(chuàng)建一個(gè)具有節(jié)日祝福、互動(dòng)式燈謎游戲和模擬中秋明月動(dòng)態(tài)背景的小程序,文章詳細(xì)介紹了程序的功能、實(shí)現(xiàn)步驟以及如何運(yùn)行程序,需要的朋友可以參考下2024-09-09Python機(jī)器學(xué)習(xí)應(yīng)用之基于天氣數(shù)據(jù)集的XGBoost分類篇解讀
XGBoost是一個(gè)優(yōu)化的分布式梯度增強(qiáng)庫(kù),旨在實(shí)現(xiàn)高效,靈活和便攜。它在?Gradient?Boosting?框架下實(shí)現(xiàn)機(jī)器學(xué)習(xí)算法。XGBoost提供并行樹(shù)提升(也稱為GBDT,GBM),可以快速準(zhǔn)確地解決許多數(shù)據(jù)科學(xué)問(wèn)題2022-01-01Python中實(shí)現(xiàn)變量賦值傳遞時(shí)的引用和拷貝方法
下面小編就為大家分享一篇Python中實(shí)現(xiàn)變量賦值傳遞時(shí)的引用和拷貝方法,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2018-04-04