2.Python入門之 -- Python 包管理工具解惑

本站文章除注明轉載外,均為本站原創或者翻譯。

本站文章歡迎各種形式的轉載,但請18歲以上的轉載者注明文章出處,尊重我的勞動,也尊重你的智商;

本站部分原創和翻譯文章提供markdown格式源碼,歡迎使用文章源碼進行轉載;

本博客采用WPCMD維護;

本文標題:Python 包管理工具解惑

本文鏈接:http://zengrong.net/post/2169.htm

一、困惑

作為一個 Python 初學者,我在包管理上感到相當疑惑(嗯,是困惑)。主要表現在下面幾個方面:

這幾個包管理工具有什么不同?

distutils

setuptools

distribute

disutils2

distlib

pip

什么時候該用pip,什么時候該用setup.py,它們有關系么?

easy_install、ez_setup.py、setup.py、setup.cfg分別都是干啥的?

wheel 和 pip 的關系?

Egg 和 whl 的關系?

如何發布自己的模塊(發布到PyPI)?

如何進行模塊的私有發布(不發布到PyPI)?

為了弄清這些問題,我找了許多資料。最后發現最好的資料還是 python 的官方文檔。

下面是閱讀了所有我找到的資料后的一個總結,希望能幫到幾個月后又把這些全部忘光的那個自己。

二、python 包管理工具大亂斗

我用時間順序來描述亂斗過程。

1. distutils

distutils是 python 標準庫的一部分,2000年發布。使用它能夠進行 python 模塊的安裝發布

setup.py 就是利用distutils的功能寫成,我們可以看一個簡單的setup.py的例子。

在這里可以看到關于 setupt.py 格式的所有詳細描述:Writing the Setup Script

要安裝一個模塊到當前的 python 環境中,可以使用這個模塊提供的 setup.py 文件:

pythonsetup.pyinstall

下面的代碼會發布一個 python 模塊,將其打包成 tar.gz 或者 zip 壓縮包:

pythonsetup.pysdist

甚至能打包成 rpm 或者 exe 安裝包:

pythonsetup.pybdist_rpmpythonsetup.pybdist_wininst

2. setuptools 和 distribute

setuptools是一個為了增強 distutils 而開發的集合,2004年發布。它包含了easy_install這個工具。

ez_setup.py是 setuptools 的安裝工具。ez就是easy的縮寫。

簡單的說,setuptools 是一個項目的名稱,是基礎組件。而easy_install是這個項目中提供的工具,它依賴基礎組件工作。

為了方便描述,下面文章中提到的 setuptools 被認為與easy_install同義。

使用 setuptools 可以自動下載、構建、安裝和管理python 模塊。

例如,從 PyPI 上安裝一個包:

easy_installSQLObject

下載一個包文件,然后安裝它:

easy_installhttp://example.com/path/to/MyPackage-1.2.3.tgz

從一個 .egg 格式安裝:

easy_install/my_downloads/OtherPackage-3.2.1-py2.3.egg

distribute是 setuptools 的一個分支版本。分支的原因可能是有一部分開發者認為 setuptools 開發太慢了。但現在,distribute 又合并回了 setuptools 中。因此,我們可以認為它們是同一個東西。事實上,如果你查看一下easy_install的版本,會發現它本質上就是 distribute 。

# easy_install --versiondistribute0.6.28

3. Eggs

Eggs格式是 setuptools 引入的一種文件格式,它使用 .egg 擴展名,用于 Python 模塊的安裝。

setuptools 可以識別這種格式。并解析它,安裝它。

想要詳細了解,可以看看這篇:The Quick Guide to Python Eggs

Eggs are to Pythons as Jars are to Java..

4. pip

注意,從此處開始,easy_install和setuptools不再同義。

pip是目前 python 包管理的事實標準,2008年發布。它被用作easy_install的替代品,但是它仍有大量的功能建立在 setuptools 組件之上。

pip 希望不再使用Eggs格式(雖然它支持 Eggs),而更希望采用“源碼發行版”(使用python setup.py sdist創建)。這可以充分利用Requirements File Format提供的方便功能。

pip 可以利用 requirments.txt 來實現在依賴的安裝。在setup.py中,也存在一個install_requires表來指定依賴的安裝。它們的區別在哪里?可以看這篇文章:setup.py vs requirements.txt(中文版)

pip 支持git/svn/hg 等流行的 VCS 系統,可以直接從 gz 或者 zip 壓縮包安裝,支持搜索包,以及指定服務器安裝等等功能。

pip vs easy_install詳細介紹了兩者的不同。它們可以說是各占勝場,但 pip 明顯優勢更大。

5. wheel

wheel本質上是一個 zip 包格式,它使用 .whl 擴展名,用于 python 模塊的安裝,它的出現是為了替代 Eggs。

wheel 還提供了一個bdist_wheel作為 setuptools 的擴展命令,這個命令可以用來生成 wheel 包。

pip 提供了一個 wheel 子命令來安裝 wheel 包。當然,需要先安裝 wheel 模塊。

setup.cfg可以用來定義 wheel 打包時候的相關信息。

Wheel vs Egg詳細介紹了 wheel 和 Eggs 格式的區別,很顯然,wheel 優勢明顯。

Python Wheels網站展示了使用 Wheels 發行的 python 模塊在 PyPI 上的占有率。

pypip.in也支持 wheel。

6. distutils2 和 distlib

distutils2被設計為distutils的替代品。從2009年開發到2012年。它包含更多的功能,并希望以packaging作為名稱進入 python 3.3 成為標準庫的一部分。但這個計劃后來停滯了

distlibdistutils2的部分,它為distutils2/packaging提供的低級功能增加高級 API,使其便于使用。

這里介紹了 distlib 沒有進入 python 3.3 標準庫的一些原因。

因此,可以暫時不必了解這兩個工具,靜觀其變即可。

三、工具選擇

如果仔細看過上面的亂斗內容,我相信你已經清楚當前應該如何選擇了。

對于我這樣剛剛開始的新手來說,自然是使用 pip 而不使用easy_install了。

如果發布模塊,當然是使用 wheel 格式。

四、發布自己的模塊

對于 python3 程序員來說,當然應該先看這一篇:Distributing Python Modules

另外,Tutorial on Packaging and Distributing Projects也足夠詳細和官方。

而 Python2 程序員則應該看這篇Distributing Python Modules

當然,setuptools 的官方文檔也是不錯的教程:Building and Distributing Packages with Setuptools

這篇教程可以用來入門:Sharing Your Labor of Love: PyPI Quick and Dirty

至于如何發布自己的模塊到 PyPI 或者搭建自己的私有包管理服務器,上面的文章已經講得非常清楚了。

五、引用

上面提到的大部分資料,都是在這里找到,或者是提到:Python Packaging User Guide

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,363評論 6 532
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,497評論 3 416
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 176,305評論 0 374
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,962評論 1 311
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,727評論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,193評論 1 324
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,257評論 3 441
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,411評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,945評論 1 335
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,777評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,978評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,519評論 5 359
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,216評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,642評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,878評論 1 286
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,657評論 3 391
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,960評論 2 373

推薦閱讀更多精彩內容