自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

開源 Python 項目詳細(xì)指南

開發(fā) 后端
作者以 SciTime 項目(一個對算法訓(xùn)練時間進(jìn)行估計的包)的發(fā)布為例,詳細(xì)解釋了發(fā)布的每個步驟。

[[434539]]

 作者以 SciTime 項目(一個對算法訓(xùn)練時間進(jìn)行估計的包)的發(fā)布為例,詳細(xì)解釋了發(fā)布的每個步驟。

注意:本文假設(shè)你在 GitHub 上已經(jīng)有一個想要打包和發(fā)布的項目。

第 0 步:獲取項目許可證

在做其他事之前,由于你的項目要開源,因此應(yīng)該有一個許可證。獲取哪種許可證取決于項目包的使用方式。開源項目中一些常見許可證有 MIT 或 BSD。

要在項目中添加許可證,只需參照以下鏈接中的步驟,將 LICENSE 文件添加到項目庫中的根目錄即可:https://help.github.com/en/articles/adding-a-license-to-a-repository

第 1 步:讓你的代碼準(zhǔn)備就緒

要將項目進(jìn)行打包,你需要做一些預(yù)備工作:

  • 讓你的項目結(jié)構(gòu)正確就位。通常情況下,項目庫的根目錄包含一個以項目名稱命名的文件夾,項目的核心代碼應(yīng)該位于此文件夾中。在這個文件夾之外是運(yùn)行和構(gòu)建包(測試、文檔等)所需的其他代碼。
  •  核心文件夾應(yīng)包括一個(或多個)模塊和一個 __init__.py 文件,該文件包含你希望讓終端用戶訪問的類/函數(shù)。此文件還可以包含包的版本,以便于終端用戶訪問。
  •  理想情況下,應(yīng)使用 logging 包來設(shè)置合理的日志記錄系統(tǒng)(而不是用 prints 輸出)。
  •  理想情況下,應(yīng)將你的核心代碼分配到一個或多個類中。 
  1. from .estimate import Estimator 

以__init__.py 為例,如果 Estimator 是終端用戶將會訪問的類(該類在 estimate.py 文件中定義) 

  1. import logging  
  2. class LogMixin(object):  
  3.     @property  
  4.     def logger(self):  
  5.         name =  . .join([self.__module__, self.__class__.__name__])  
  6.         FORMAT =  %(name)s:%(levelname)s:%(message)s   
  7.         logging.basicConfig(format=FORMATlevel=logging.DEBUG)  
  8.         logger = logging.getLogger(name)  
  9.         return logger 

以日志系統(tǒng)為例:LogMixin 類可以在其他任何類中使用

第 2 步:使用打包工具創(chuàng)建 setup.py

在你的項目有了一套結(jié)構(gòu)之后,你應(yīng)該在項目庫的根目錄下添加 setup.py 文件。這有助于所有發(fā)布和版本維護(hù)過程的自動化。以下是 setup.py 的例子(源代碼:https://github.com/nathan-toubiana/scitime/blob/master/setup.py)。 

  1. from setuptools import setup  
  2. from os import path  
  3. DIR = path.dirname(path.abspath(__file__))  
  4. INSTALL_PACKAGES = open(path.join(DIR,  requirements.txt )).read().splitlines()  
  5. with open(path.join(DIR,  README.md )) as f:  
  6.     README = f.read()  
  7. setup(  
  8.     namescitime ,  
  9.     packages=[ scitime ],  
  10.     description="Training time estimator for scikit-learn algorithms" 
  11.     long_description=README 
  12.     long_description_content_typetext/markdown ,  
  13.     install_requires=INSTALL_PACKAGES 
  14.     version0.0.2 ,  
  15.     urlhttp://github.com/nathan-toubiana/scitime ,  
  16.     authorGabriel Lerner & Nathan Toubiana ,  
  17.     author_emailtoubiana.nathan@gmail.com ,  
  18.     keywords=[ machine-learning ,  scikit-learn ,  training-time ],  
  19.     tests_require=[  
  20.          pytest ,  
  21.          pytest-cov ,  
  22.          pytest-sugar   
  23.     ],  
  24.     package_data={  
  25.         # include json and pkl files  
  26.           : [ *.json ,  models/*.pkl ,  models/*.json ],  
  27.     },  
  28.     include_package_data=True 
  29.     python_requires>=3   

setup.py 文件的示例

幾點(diǎn)注意事項:

  •  如果你的包有依賴項,處理這些依賴項的簡單方法是在配置文件中通過 install_requires 參數(shù)來添加依賴項(如果列表很長,你可以像之前那樣指向一個 requirement.txt 文件)。
  •  如果你希望在任何人安裝包時(從項目庫中)下載元數(shù)據(jù),則應(yīng)通過 package_data 參數(shù)來添加這些元數(shù)據(jù)。
  •  有關(guān) setup() 函數(shù)的更多信息,請參見:https://setuptools.readthedocs.io/en/latest/setuptools.html

注意:第 3 步到第 6 步是可選的(但強(qiáng)烈推薦),但是如果你現(xiàn)在馬上想發(fā)布你的包,可以直接跳到第 7 步。

第 3 步:設(shè)置本地測試和檢查測試覆蓋率

此時還沒有完成,你的項目還應(yīng)該有單元測試。盡管有許多框架能幫助你做到,但一種簡單的方法是使用 pytest。所有測試都應(yīng)該放在一個專用的文件夾中(例如名為 tests/或 testing 的文件夾)。在這個文件夾中放置你需要的所有測試文件,以便盡可能多地包含你的核心代碼。下面是一個如何編寫單元測試的示例。這里還有一個 SciTime 的測試文件。

一旦就位,你就可以通過在項目庫的根目錄運(yùn)行 python -m pytest 在本地進(jìn)行測試。

創(chuàng)建測試后,你還應(yīng)該能估算覆蓋率。這一點(diǎn)很重要,因為你希望盡可能多地測試項目中的代碼量(以減少意外的 bug)。

很多框架也可以用于計算覆蓋率,對于 SciTime,我們使用了 codecov。你可以通過創(chuàng)建.codecov.yml 文件來決定允許的最小覆蓋率閾值,還可以通過創(chuàng)建.coveragerc 文件來決定要在覆蓋率分析中包含哪些文件。 

  1. comment: false  
  2. coverage:  
  3.   status:  
  4.     project:  
  5.       default:  
  6.         target: auto  
  7.         threshold: 10%  
  8.     patch:  
  9.       default:  
  10.         target: auto  
  11.         threshold: 10% 

.codecov.yml 文件示例 

  1. [run]  
  2. branch = True  
  3. source = scitime  
  4. include = */scitime/*  
  5. omit =  
  6.     */_data.py  
  7.     */setup.py 

.coveragerc 文件示例

第 4 步:標(biāo)準(zhǔn)化語法和代碼風(fēng)格

你還需要確保你的代碼遵循 PEP8 準(zhǔn)則(即具有標(biāo)準(zhǔn)樣式并且語法正確)。同樣,有很多工具可以幫助你解決。這里我們用了 flake8。

第 5 步:創(chuàng)建一個合理的文檔

現(xiàn)在你的項目已經(jīng)測試過了,結(jié)構(gòu)也很好了,是時候添加一個合理的文檔。首先是要有一個好的 readme 文件,它會在你的 Github 項目庫的根目錄上顯示。完成后,加上以下幾點(diǎn)會更好:

由于 readme 文件應(yīng)該相當(dāng)綜合,因此通常會有一個更詳細(xì)的文檔。你可以用 sphinx 來完成,然后在 readthedocs 上管理文檔。與文檔相關(guān)的文件通常放在 docs/文件夾中。sphinx 和 readthedocs 相關(guān)教程:https://docs.readthedocs.io/en/stable/intro/getting-started-with-sphinx.html。

包含標(biāo)簽和說明的項目庫示例

第 6 步:創(chuàng)建持續(xù)集成

此時,你的項目離發(fā)布就緒不遠(yuǎn)了。但是,在每次提交之后,必須更新文檔、運(yùn)行測試以及檢查樣式和覆蓋率似乎有點(diǎn)難以應(yīng)付。幸運(yùn)的是,持續(xù)集成(CI)可以幫助你完成。你可以在每次提交之后使用 GitHub 的 webhook 來自動執(zhí)行所有的這些操作。以下是我們在 SciTime 中使用的一套 CI 工具:

  •  對于運(yùn)行測試,我們使用了 travis ci 和 appveyor(用于 Windows 平臺上的測試)。對于 Travis CI,除了在項目庫上設(shè)置 webhook 之外,你還必須創(chuàng)建一個.travis.yml 文件,在該文件中,你不僅可以運(yùn)行測試,還可以上傳更新的覆蓋率輸出以及檢查樣式和格式。通過創(chuàng)建 appveyor.yml 文件,appveyor 也可以這樣做。
  •  codecov 和 readthdocs 也有專用的 webhook 
  1. language: python  
  2. python:  
  3.   - "3.6"  
  4. # command to install dependencies  
  5. install:  
  6.   - pip install -r requirements.txt  
  7.   - pip install flake8  
  8.   - pip install pytest-cov  
  9.   - pip install codecov  
  10. # command to run tests  
  11. script:  
  12.   - python -m pytest --cov=scitime  
  13.   - ./build_tools/flake_diff.sh  
  14. after_success: 
  15.   - codecov 

.travis.yml 文件的示例:請注意,每次提交,測試都需要與檢查測試覆蓋率一起進(jìn)行。但還有一個 flake8 檢查(邏輯則在 flake_diff.sh 文件中定義:https://github.com/nathan-toubiana/scitime/blob/master/build_tools/flake_diff.sh) 

  1. environment:  
  2.   matrix:  
  3.     - PYTHON: "C:\Python36-x64"  
  4. install:  
  5.   # We need wheel installed to build wheels  
  6.   - "%PYTHON%\python.exe -m pip install -r requirements.txt"  
  7.   - "%PYTHON%\python.exe -m pip install pytest==3.2.1"  
  8. build: off  
  9. test_script:  
  10.   - "%PYTHON%\python.exe -m pytest" 

appveyor.yml 文件示例:這里我們只運(yùn)行測試。

這將使更新項目庫的整個過程更加容易。

集成 webhook 的提交歷史記錄示例

第 7 步:創(chuàng)建你的第一個 release 和 publication

此時,你即將發(fā)布的包應(yīng)與以下類似: 

  1. your_package/  
  2.    __init__.py  
  3.    your_module.py  
  4. docs/  
  5. tests/  
  6. setup.py  
  7. travis.yml  
  8. appveyor.yml 
  9. .coveragerc  
  10. .codecov.yml  
  11. README.md  
  12. LICENSE  
  13. .github/  
  14.    CODE_OF_CONDUCT.md  
  15.    CONTRIBUTING.md  
  16.    PULL_REQUEST_TEMPLATE.md  
  17.    ISSUE_TEMPLATE/ 

現(xiàn)在可以發(fā)布了!首先要做的是在 GitHub 上創(chuàng)建你的第一個 release——這是為了在給定的時間點(diǎn)跟蹤項目的狀態(tài),每次版本更改時都需要創(chuàng)建新的 release。創(chuàng)建步驟:https://help.github.com/en/articles/creating-releases。

完成后,唯一要做的就是發(fā)布包。發(fā)布 python 包最常見的平臺是 PyPI 和 Conda。以下我們將描述如何用兩者發(fā)布:

  •  對于 PyPI,首先需要創(chuàng)建一個帳戶,然后用 twine 執(zhí)行一些步驟:https://realpython.com/pypi-publish-python-package/。這應(yīng)該相當(dāng)簡單,而且 Pypi 還提供了一個可以在實際部署之前使用的測試環(huán)境。PyPI 總體上包括創(chuàng)建源代碼(python setup.py sdist)并使用 twine(twine upload dist/*)來上傳。完成后,應(yīng)該有一個與你的包對應(yīng)的 PyPI 頁面,并且任何人都應(yīng)該能夠通過運(yùn)行 pip 命令來安裝你的包。
  • 對于 Conda,我們推薦通過 conda forge 來發(fā)布你的包,conda forge 是一個社區(qū),幫助你通過 conda 渠道發(fā)布和維護(hù)包。你可以按照以下步驟將包添加到社區(qū):https://conda-forge.org/#add_recipe,然后你會被添加到 conda forge Github 組織中,并能夠非常輕松地維護(hù)你的包,然后任何人都可以通過運(yùn)行 conda 命令來安裝你的包。

完成!

現(xiàn)在,你的包應(yīng)該已經(jīng)發(fā)出去,并且任何人都可以使用了!雖然大部分工作都完成了,但是你仍然需要維護(hù)你的項目,你需要進(jìn)行一些更新:這大體上意味著每次進(jìn)行重大更改時都要更改版本,創(chuàng)建新的 release,并再次執(zhí)行第 7 步。 

 

責(zé)任編輯:龐桂玉 來源: 戀習(xí)Python
相關(guān)推薦

2021-02-20 17:36:30

Google開源項目漏洞

2019-11-13 12:39:26

Python 開發(fā)編程語言

2022-05-26 07:42:22

Python編輯器VSCode

2022-05-16 15:37:32

開源軟件

2010-02-23 09:22:36

Python項目

2021-07-07 09:00:00

分解式存儲架構(gòu)云服務(wù)

2018-06-28 12:47:30

2012-08-16 13:45:12

ERP產(chǎn)品采購

2018-11-14 10:36:47

Python 開發(fā)編程語言

2024-03-01 19:53:37

PyBuilderPython開發(fā)

2022-11-30 08:00:00

金絲雀部署IT測試

2022-05-08 09:39:20

LinuxTee 命令

2023-09-12 10:07:30

ML人工智能

2014-06-26 14:53:48

開源開源軟件

2017-03-16 09:51:39

開源OdooSSD

2018-12-17 13:52:47

Python開源項目數(shù)據(jù)可視化

2018-07-12 14:34:05

2018-12-19 15:15:24

開源Github

2024-05-17 17:29:00

CurdlingPython開發(fā)
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號