一篇帶你了解npm的原理
npm的原理
npm據(jù)稱(chēng)成為世界最大的包管理器?原因真的只是用戶(hù)友好?
一、npm init
用來(lái)初始化一個(gè)簡(jiǎn)單的package.json文件。package.json文件用來(lái)定義一個(gè)package的描述文件。
1、npm init的執(zhí)行的默認(rèn)行為
執(zhí)行npm init --yes,全部使用默認(rèn)的值。
2、 自定義npm init行為
npm init命令的原理是:調(diào)用腳本,輸出一個(gè)初始化的package.json文件。
獲取用戶(hù)輸入使用prompt()方法。
二、依賴(lài)包安裝
npm的核心功能:依賴(lài)管理。執(zhí)行npm i從package.json中dependencies和devDependencies將依賴(lài)包安裝到當(dāng)前目錄的node_modules文件夾中。
1、package定義
npm i 就可以安裝一個(gè)包。通常package就是我們需要安裝的包名,默認(rèn)配置下npm會(huì)從默認(rèn)的源(Registry)中查找該包名的對(duì)應(yīng)的包地址,并且下載安裝。 還可以是一個(gè)指向有效包名的http url/git url/文件夾路徑。
package的準(zhǔn)確定義,符合以下a)到g)其中一個(gè)條件,他就是一個(gè)package:
package的準(zhǔn)確定義
2、安裝本地包/遠(yuǎn)程git倉(cāng)庫(kù)包
共享依賴(lài)包,并非非要把包發(fā)布到npm源上才能使用。
(1)場(chǎng)景1:本地模塊引用
開(kāi)發(fā)中避免不了模塊之間調(diào)用,開(kāi)發(fā)中,我們把頻繁調(diào)用的配置模塊放在根目錄,然后如果有很多層級(jí)目錄,后來(lái)引用
- const config = require(''../../../../..config)
這樣的路徑引用不利于代碼重構(gòu)。這時(shí)候我們需要考慮把這個(gè)模塊分離出來(lái)供其他模塊共享。比如config.js可以封裝成一個(gè)package放到node_modules目錄下。
不需要手動(dòng)拷貝或者創(chuàng)建軟連接到node_modules目錄,npm 有自己的解決方案:
方案:
1、新增config文件夾,將config.js移入文件夾,名字修改為index.js,創(chuàng)建package.json定義config包
- {
- "name": "config",
- "main": "index.js",
- "version": "0.1.0"
- }
2、在項(xiàng)目的package.json新增依賴(lài)項(xiàng),然后執(zhí)行npm i。
- {
- "dependencies": {
- "config":"file: ./config"
- }
- }
查看 node_modules 目錄我們會(huì)發(fā)現(xiàn)多出來(lái)一個(gè)名為 config,指向上層 config/ 文件夾的軟鏈接。這是因?yàn)?npm 識(shí)別 file: 協(xié)議的url,得知這個(gè)包需要直接從文件系統(tǒng)中獲取,會(huì)自動(dòng)創(chuàng)建軟鏈接到 node_modules 中,完成“安裝”過(guò)程。
(2)場(chǎng)景2:私有g(shù)it共享package
團(tuán)隊(duì)內(nèi)會(huì)有一些代碼/公用庫(kù)需要在團(tuán)隊(duì)內(nèi)不同項(xiàng)目間共享,但可能由于包含了敏感內(nèi)容。
我們可以簡(jiǎn)單的將被依賴(lài)的包托管到私有的git倉(cāng)庫(kù)中,然后將git url保存到dependencies中。npm會(huì)直接調(diào)用系統(tǒng)的git命令從git倉(cāng)庫(kù)拉取包的內(nèi)容到node_modules中。
npm支持的git url格式:
- <protocol>://[<user>[:<password>]@]<hostname>[:<port>][:][/]<path>[#<commit-ish> | #semver:<semver>]
git 路徑后可以使用 # 指定特定的 git branch/commit/tag, 也可以 #semver: 指定特定的 semver range.
比如:
- git+ssh://git@github.com:npm/npm.git#v1.0.27
- git+ssh://git@github.com:npm/npm#semver:^5.0
- git+https://isaacs@github.com/npm/npm.git
- git://github.com/npm/npm.git#v1.0.27
(3)場(chǎng)景3:開(kāi)源package問(wèn)題修復(fù)
此時(shí)我們可以手動(dòng)進(jìn)入 node_modules 目錄下修改相應(yīng)的包內(nèi)容,也許修改了一行代碼就修復(fù)了問(wèn)題。但是這種做法非常不明智!
方案:
fork原作者的git庫(kù),在自己的repo修復(fù)問(wèn)題,然后將dependencies中的相應(yīng)依賴(lài)改為自己修復(fù)后版本的git url就可以解決問(wèn)題。
三、npm install如何工作
npm i執(zhí)行完畢,node_modules中看到所有的依賴(lài)包。開(kāi)發(fā)人員無(wú)關(guān)注node_modules文件夾的結(jié)構(gòu)細(xì)節(jié),關(guān)注業(yè)務(wù)代碼中引用依賴(lài)包。
理解node_modules結(jié)構(gòu)幫助我們更好理解npm如何工作。npm2到npm5變化和改進(jìn)。
3.1 npm2
npm2在安裝依賴(lài)包,采用的是簡(jiǎn)單的遞歸安裝方法。每一個(gè)包都有自己的依賴(lài)包,每一個(gè)包的依賴(lài)都安裝在自己的node_modules中,依賴(lài)關(guān)系層層遞進(jìn),構(gòu)成整個(gè)依賴(lài)樹(shù),這個(gè)依賴(lài)樹(shù)與文件系統(tǒng)中的文件結(jié)構(gòu)樹(shù)一一對(duì)應(yīng)。
最方便的依賴(lài)樹(shù)的方式在根目錄下執(zhí)行npm ls。
優(yōu)點(diǎn):
層級(jí)結(jié)構(gòu)明顯,便于傻瓜式管理。
缺點(diǎn):
復(fù)雜工程,目錄結(jié)構(gòu)可能太深,深層的文件路徑過(guò)長(zhǎng)觸發(fā)window文件系統(tǒng)中文件路徑不能超過(guò)260個(gè)字符長(zhǎng)。
部分被多個(gè)包依賴(lài)的包在很多地方重復(fù)安裝,造成大量的冗余。
3.2 npm3
npm3的node_modules目錄改成更加扁平狀層級(jí)結(jié)構(gòu)。npm3在安裝的時(shí)候遍歷整個(gè)依賴(lài)樹(shù),計(jì)算最合理的文件夾安裝方式,所有被重復(fù)依賴(lài)的包都可以去重安裝。
npm來(lái)說(shuō),同名不同版本的包是兩個(gè)獨(dú)立的包。
npm3的依賴(lài)樹(shù)結(jié)構(gòu)不再與文件夾層級(jí)一一對(duì)應(yīng)。
3.3 npm5
沿用npm3的扁平化依賴(lài)包安裝方式。最大的變化時(shí)增加package-lock.json文件。
package-lock.json作用:鎖定依賴(lài)安裝結(jié)構(gòu),發(fā)現(xiàn)node_modules目錄文件層級(jí)結(jié)構(gòu)是與json的結(jié)構(gòu)一一對(duì)應(yīng)。
npm5默認(rèn)會(huì)在執(zhí)行npm i后生成package-lock.json文件,提交到git/svn代碼庫(kù)。
要升級(jí),不要使用 5.0版本。
注意:在 npm 5.0 中,如果已有 package-lock 文件存在,若手動(dòng)在 package.json 文件新增一條依賴(lài),再執(zhí)行 npm install, 新增的依賴(lài)并不會(huì)被安裝到 node_modules 中, package-lock.json 也不會(huì)做相應(yīng)的更新。
四、依賴(lài)包版本管理
介紹依賴(lài)包升級(jí)管理相關(guān)知識(shí)。
4.1 語(yǔ)義化版本semver
npm依賴(lài)管理的一個(gè)重要特性采用語(yǔ)義化版本(semver)規(guī)范,作為版本管理方案。
語(yǔ)義化版本號(hào)必須包含三個(gè)數(shù)字,格式:major.minor.patch。意思是:主版本號(hào).小版本號(hào).修改版本號(hào)。
我們需要在dependencies中使用semver約定的指定所需依賴(lài)包的版本號(hào)或者范圍。
常用的規(guī)則如下圖:
semver語(yǔ)義化版本
1、任意兩條規(guī)則,用空格連接起來(lái),表示“與”邏輯,即為兩個(gè)規(guī)則的交集。
如 >=2.3.1 <=2.8.0 可以解讀為: >=2.3.1 且 <=2.8.0
- 可以匹配 2.3.1, 2.4.5, 2.8.0
- 但不匹配 1.0.0, 2.3.0, 2.8.1, 3.0.0
2、任意兩條規(guī)則,用||連接起來(lái),表示“或”邏輯,即為兩條規(guī)則的并集。
如 ^2 >=2.3.1 || ^3 >3.2
- 可以匹配 2.3.1, 2,8.1, 3.3.1
- 但不匹配 1.0.0, 2.2.0, 3.1.0, 4.0.0
3、更直觀(guān)的表示版本號(hào)范圍的寫(xiě)法
- 或 x 匹配所有主版本
- 1 或 1.x 匹配 主版本號(hào)為 1 的所有版本
- 1.2 或 1.2.x 匹配 版本號(hào)為 1.2 開(kāi)頭的所有版本
4、在 MAJOR.MINOR.PATCH 后追加 - 后跟點(diǎn)號(hào)分隔的標(biāo)簽,作為預(yù)發(fā)布版本標(biāo)簽 通常被視為不穩(wěn)定、不建議生產(chǎn)使用的版本。
- 1.0.0-alpha
- 1.0.0-beta.1
- 1.0.0-rc.3
4.2 依賴(lài)版本升級(jí)
在安裝完一個(gè)依賴(lài)包之后有新的版本發(fā)布了,如何使用npm進(jìn)行版本升級(jí)呢?
- npm i或者npm update,但是不同的npm版本,不同的package.json和package-lock.json文件,安裝和升級(jí)表現(xiàn)是不同的。
使用npm3的結(jié)論:
- 如果本地 node_modules 已安裝,再次執(zhí)行 install 不會(huì)更新包版本, 執(zhí)行 update 才會(huì)更新; 而如果本地 node_modules 為空時(shí),執(zhí)行 install/update 都會(huì)直接安裝更新包。
- npm update 總是會(huì)把包更新到符合 package.json 中指定的 semver 的最新版本號(hào)——本例中符合 ^1.8.0 的最新版本為 1.15.0
- 一旦給定 package.json, 無(wú)論后面執(zhí)行 npm install 還是 update, package.json 中的 webpack 版本一直頑固地保持 一開(kāi)始的 ^1.8.0 巋然不動(dòng)
使用npm5的結(jié)論:
- 無(wú)論何時(shí)執(zhí)行 install, npm 都會(huì)優(yōu)先按照 package-lock 中指定的版本來(lái)安裝 webpack; 避免了 npm 3 表中情形 b) 的狀況;
- 無(wú)論何時(shí)完成安裝/更新, package-lock 文件總會(huì)跟著 node_modules 更新 —— (因此可以視 package-lock 文件為 node_modules 的 JSON 表述)
- 已安裝 node_modules 后若執(zhí)行 npm update,package.json 中的版本號(hào)也會(huì)隨之更改為 ^1.15.0
4.3 最佳實(shí)踐
我常用的node是8.11.x,npm是5.6.0。
- 使用npm >= 5.1 版本,保持package-lock.json文件默認(rèn)開(kāi)啟配置。
- 初始化,npm i 安裝依賴(lài)包,默認(rèn)保存^X.Y.Z,項(xiàng)目提交package.json和package-lock.json。
- 不要手動(dòng)修改package-lock.json
升級(jí)依賴(lài)包:
- 升級(jí)小版本,執(zhí)行npm update升級(jí)到新的小版本。
- 升級(jí)大版本,執(zhí)行npm install @ 升級(jí)到新的大版本。
- 手動(dòng)修改package.json中的版本號(hào),然后npm i。
- 本地驗(yàn)證升級(jí)新版本后沒(méi)有問(wèn)題,提交新的package.json和package-lock.json文件。
降級(jí)依賴(lài)包:
- 正確:npm i @驗(yàn)證沒(méi)有問(wèn)題后,提交package.json和package-lock.json文件。
- 錯(cuò)誤:修改package.json中的版本號(hào),執(zhí)行npm i不會(huì)生效。因?yàn)閜ackage-lock.json鎖定了版本。
刪除依賴(lài)包:
- A計(jì)劃:npm uninstall 。提交package.json和package-lock.json。
- B計(jì)劃:在package.json中刪除對(duì)應(yīng)的包,然后執(zhí)行npm i,提交package.json和package-lock.json。
五、npm的sctipts
5.1 基本使用
npm scripts是npm的一個(gè)重要的特性。在package.json中scripts字段定義一個(gè)腳本。
比如:
- {
- "scripts": {
- "echo": "echo HELLO WORLD"
- }
- }
我們可以通過(guò)npm run echo 命令執(zhí)行這段腳本,就像shell中執(zhí)行echo HELLO WOLRD,終端是可以看到輸出的。
總結(jié)如下:
- npm run 命令執(zhí)行時(shí),會(huì)把./node_modules/.bin目錄添加到執(zhí)行環(huán)境的PATH變量中。全局的沒(méi)有安裝的包,在node_modules中安裝了,通過(guò)npm run 可以調(diào)用該命令。
- 執(zhí)行npm 腳本時(shí)要傳入?yún)?shù),需要在命令后加 -- 表明,比如 npm run test -- --grep="pattern" 可以將--grep="pattern"參數(shù)傳給test命令。
- npm 還提供了pre和post兩種鉤子的機(jī)制,可以定義某個(gè)腳本前后的執(zhí)行腳本。
- 運(yùn)行時(shí)變量:npm run 的腳本執(zhí)行環(huán)境內(nèi),可以通過(guò)環(huán)境變量的方式獲取更多的運(yùn)行相關(guān)的信息??梢酝ㄟ^(guò)process.env對(duì)象訪(fǎng)問(wèn)獲得:
- npm_lifecycle_event:正在運(yùn)行的腳本名稱(chēng)
- npm_package_:獲取當(dāng)前package.json中某一個(gè)字段的匹配值:如包名npm_package_name
- npm_package__:package中的嵌套字段。
5.2 node_modules/.bin目錄
保存了依賴(lài)目錄中所安裝的可供調(diào)用的命令行包。本質(zhì)是一個(gè)可執(zhí)行文件到指定文件源的映射。
例如 webpack 就屬于一個(gè)命令行包。如果我們?cè)诎惭b webpack 時(shí)添加 --global 參數(shù),就可以在終端直接輸入 webpack 進(jìn)行調(diào)用。
上一節(jié)所說(shuō),npm run 命令在執(zhí)行時(shí)會(huì)把 ./node_modules/.bin 加入到 PATH 中,使我們可直接調(diào)用所有提供了命令行調(diào)用接口的依賴(lài)包。所以這里就引出了一個(gè)最佳實(shí)踐:
•將項(xiàng)目依賴(lài)的命令行工具安裝到項(xiàng)目依賴(lài)文件夾中,然后通過(guò) npm scripts 調(diào)用;而非全局安裝
于是 npm 從5.2 開(kāi)始自帶了一個(gè)新的工具 npx.
5.3 npx
npx 的使用很簡(jiǎn)單,就是執(zhí)行 npx 即可,這里的 默認(rèn)就是 ./node_modules 目錄中安裝的可執(zhí)行腳本名。例如上面本地安裝好的 webpack 包,我們可以直接使用 npx webpack 執(zhí)行即可。
5.4 用法
1、傳入?yún)?shù)
- "scripts": {
- "serve": "vue-cli-service serve",
- "serve1": "vue-cli-service --serve1",
- "serve2": "vue-cli-service -serve2",
- "serve3": "vue-cli-service serve --mode=dev --mobile -config build/example.js"
- }
除了第一個(gè)可執(zhí)行的命令,以空格分割的任何字符串都是參數(shù),并且都能通過(guò)process.argv屬性訪(fǎng)問(wèn)。
比如執(zhí)行npm run serve3命令,process.argv的具體內(nèi)容為:
- [ '/usr/local/Cellar/node/7.7.1_1/bin/node',
- '/Users/mac/Vue-projects/hao-cli/node_modules/.bin/vue-cli-service',
- 'serve',
- '--mode=dev',
- '--mobile',
- '-config',
- 'build/example.js'
- ]
2、多命令運(yùn)行 在啟動(dòng)時(shí)可能需要同時(shí)執(zhí)行多個(gè)任務(wù),多個(gè)任務(wù)的執(zhí)行順序決定了項(xiàng)目的表現(xiàn)。
(1)串行執(zhí)行
串行執(zhí)行,要求前一個(gè)任務(wù)執(zhí)行成功之后才能執(zhí)行下一個(gè)任務(wù)。使用 && 服務(wù)來(lái)連接。
- npm run scipt1 && npm run script2
串行執(zhí)行命令,只要一個(gè)命令執(zhí)行失敗,整個(gè)腳本會(huì)中止的。
(2)并行執(zhí)行
并行執(zhí)行,就是多個(gè)命令同時(shí)平行執(zhí)行,使用 & 符號(hào)來(lái)連接。
- npm run script1 & npm run script2
3、env 環(huán)境變量 在執(zhí)行npm run腳本時(shí),npm會(huì)設(shè)置一些特殊的env環(huán)境變量。其中package.json中的所有字段,都會(huì)被設(shè)置為以npm_package_ 開(kāi)頭的環(huán)境變量。
4、指令鉤子 在執(zhí)行npm scripts命令(無(wú)論是自定義還是內(nèi)置)時(shí),都經(jīng)歷了pre和post兩個(gè)鉤子,在這兩個(gè)鉤子中可以定義某個(gè)命令執(zhí)行前后的命令。比如在執(zhí)行npm run serve命令時(shí),會(huì)依次執(zhí)行npm run preserve、npm run serve、npm run postserve,所以可以在這兩個(gè)鉤子中自定義一些動(dòng)作:
- "scripts": {
- "preserve": "xxxxx",
- "serve": "cross-env NODE_ENV=production webpack",
- "postserve": "xxxxxx"
- }
5、常用腳本示例
- // 刪除目錄
- "clean": "rimraf dist/*",
- // 本地搭建一個(gè)http服務(wù)
- "server": "http-server -p 9090 dist/",
- // 打開(kāi)瀏覽器
- "open:dev": "opener http://localhost:9090",
- // 實(shí)時(shí)刷新
- "livereload": "live-reload --port 9091 dist/",
- // 構(gòu)建 HTML 文件
- "build:html": "jade index.jade > dist/index.html",
- // 只要 CSS 文件有變動(dòng),就重新執(zhí)行構(gòu)建
- "watch:css": "watch 'npm run build:css' assets/styles/",
- // 只要 HTML 文件有變動(dòng),就重新執(zhí)行構(gòu)建
- "watch:html": "watch 'npm run build:html' assets/html",
- // 部署到 Amazon S3
- "deploy:prod": "s3-cli sync ./dist/ s3://example-com/prod-site/",
- // 構(gòu)建 favicon
- "build:favicon": "node scripts/favicon.js",
六.npm配置
6.1 npm config
- 通過(guò)npm config ls -l 可查看npm 的所有配置,包括默認(rèn)配置。
- 通過(guò)npm config set ,常見(jiàn)配置:
- proxy,https-proxy:指定npm使用的代理
- registry:指定npm下載安裝包時(shí)的源,默認(rèn)是https://registry.npmjs.org??梢灾付ㄋ接械膔egistry源。
- package-lock.json:指定是否默認(rèn)生成package-lock.json,建議保持默認(rèn)true。
- save :true/false指定是否在npm i之后保存包為dependencies,npm5開(kāi)始默認(rèn)為true。
- 通過(guò)npm config delete 刪除指定的配置項(xiàng)。
6.2 npmrc文件
可以通過(guò)刪除npm config命令修改配置,還可以通過(guò)npmrc文件直接修改配置。
npmrc文件優(yōu)先級(jí)由高到低,包括:
- 工程內(nèi)配置文件:項(xiàng)目根目錄下的.npmrc文件
- 用戶(hù)級(jí)配置文件:用戶(hù)配置里
- 全局配置文件
- npm內(nèi)置配置文件 我們可以在自己的團(tuán)隊(duì)中在根目錄下創(chuàng)建一個(gè).npmrc文件來(lái)共享需要在團(tuán)隊(duì)中共享的npm運(yùn)行相關(guān)配置。
比如:我們?cè)诠緝?nèi)網(wǎng)下需要代理才能訪(fǎng)問(wèn)默認(rèn)源:https://registry.npmjs.org源;或者訪(fǎng)問(wèn)內(nèi)網(wǎng)的registry,就可以在工作項(xiàng)目下新增.npmrc文件并提交代碼庫(kù)。
示例配置:
- proxy = http://proxy.example.com/
- https-proxy = http://proxy.example.com/
- registry = http://registry.example.com/
這種在工程內(nèi)配置文件的優(yōu)先級(jí)最高,作用域在這個(gè)項(xiàng)目下,可以很好的隔離公司項(xiàng)目和學(xué)習(xí)研究的項(xiàng)目?jī)煞N不同環(huán)境。
將這個(gè)功能與 ~/.npm-init.js 配置相結(jié)合,可以將特定配置的 .npmrc 跟 .gitignore, README 之類(lèi)文件一起做到 npm init 腳手架中,進(jìn)一步減少手動(dòng)配置。
6.3 node版本約束
一個(gè)團(tuán)隊(duì)中共享了相同的代碼,但是每個(gè)人開(kāi)發(fā)機(jī)器不一致,使用的node版本也不一致,服務(wù)端可能與開(kāi)發(fā)環(huán)境不一致。
- 這就帶來(lái)了不一致的因素----方案:聲明式約束+腳本限制。
- 聲明:通過(guò)package.json的engines屬性聲明應(yīng)用運(yùn)行所需的版本要求。例如我呢項(xiàng)目中使用了async,await特性,得知node查閱兼容表格[1]得知最低支持版本是7.6.0.因此指定engines配置為:
- {
- "engines": {"node": ">=7.6.0"}
- }
- 強(qiáng)約束(可選):需要添加強(qiáng)約束,需要自己寫(xiě)腳本鉤子,讀取并解析engines字段的semver range并與運(yùn)行環(huán)境做比對(duì)校驗(yàn)并適當(dāng)提醒。
總結(jié)
- npm init初始化新項(xiàng)目
- 統(tǒng)一項(xiàng)目配置:需要團(tuán)隊(duì)共享npm config配置項(xiàng),固化到.npmrc文件中
- 統(tǒng)一運(yùn)行環(huán)境:統(tǒng)一package.json,統(tǒng)一package-lock.json文件。
- 合理使用多樣化的源安裝依賴(lài)包
- 使用npm版本:>= 5.2版本
- 使用npm scripts和npx管理相應(yīng)腳本
- 安全漏洞檢查:npm audit fix修復(fù)安全漏洞的依賴(lài)包(本質(zhì):自動(dòng)更新到兼容的安全版本)
引用鏈接
[1] node查閱兼容表格: https://node.green/