自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

Node + FFmpeg 實現(xiàn)Canvas動畫導出視頻

開發(fā) 前端
Canvas為前端提供了動畫展示的平臺,隨著現(xiàn)在視頻娛樂的流行,你是否想過把Canvas動畫導出視頻?目前純前端的視頻編碼轉換(例如WebM Encoder Whammy)還存在許多限制,較為成熟的方案是將每幀圖片傳給后端實現(xiàn),由后端調用FFmpeg進行視頻轉碼。整體流程并不復雜,這篇文章將帶大家實現(xiàn)這個過程。

Node + FFmpeg 實現(xiàn)Canvas動畫導出視頻

導言

Canvas為前端提供了動畫展示的平臺,隨著現(xiàn)在視頻娛樂的流行,你是否想過把Canvas動畫導出視頻?目前純前端的視頻編碼轉換(例如WebM Encoder Whammy)還存在許多限制,較為成熟的方案是將每幀圖片傳給后端實現(xiàn),由后端調用FFmpeg進行視頻轉碼。整體流程并不復雜,這篇文章將帶大家實現(xiàn)這個過程。

整體方案

  • 由前端記錄Canvas動畫的每幀圖像,以base64字符串形式傳給后端
  • 利用node fluent-ffmpeg模塊,調用FFmpeg將圖片合并成視頻,并將視頻存儲在server端,并返回相應下載url
  • 前端通過請求得到視頻文件

前端部分

每幀圖片生成

圖片生成可以通過canvas原生接口toDataURL實現(xiàn),最終返回base64形式的圖像數(shù)據(jù)。 

  1. generatePng () { 
  2.   ... 
  3.   var imgData = canvas.toDataURL("image/png"); 
  4.   return imgData; 
  5.  

動畫錄制與圖片流傳輸

動畫的記錄與傳送是個異步過程,這里返回一個Promise,等待后端處理完畢,收到回應后,即完成此異步過程。

以下代碼將canvas每幀動畫信息存入一個圖片數(shù)組imgs中,將數(shù)組轉成字符串的形式傳給后端。注意這里contentType設置為“text/plain”。

  1. generateVideo () { 
  2.   var that = this; 
  3.   return new Promise ( 
  4.     function (resolve, reject) { 
  5.       var imgs = []; 
  6.       ... 
  7.       window.requestAnimationFrame(that.recordTick.bind(that, imgs, resolve, reject)); 
  8.     } 
  9.   ) 
  10.   
  1. recordTick (imgs, resolve, reject) { 
  2.   ...//每幀動畫的記錄信息,如時間戳等 
  3.  
  4.   if (...) {//動畫終止條件 
  5.     this.stopPlay(); 
  6.     imgs.push(this.generatePng()); 
  7.     $.ajax({ 
  8.       url: '/video/record'
  9.       data: imgs.join(' '), 
  10.       method: 'POST'
  11.       contentType: 'text/plain'
  12.       success: function (data, textStatus, jqXHR) { 
  13.         resolve(data); 
  14.       }, 
  15.       error: function (jqXHR, textStatus, errorThrown) { 
  16.         reject(errorThrown); 
  17.       } 
  18.     }); 
  19.   } else { 
  20.     ...//每幀動畫展示的代碼 
  21.  
  22.     imgs.push(this.generatePng()); 
  23.     window.requestAnimationFrame(this.recordTick.bind(this, imgs, resolve, reject)); 
  24.   } 
  25.  

視頻下載

上一節(jié)代碼中,動畫停止時,會通過post請求給后端傳送所有圖片數(shù)據(jù),后端處理完畢后,返回數(shù)據(jù)中包含一個url,此url即為視頻文件的下載地址。

為了支持瀏覽器端用戶點擊下載,我們需要用到a標簽的download屬性,此屬性可以支持點擊a標簽后下載指定文件。

  1. editor.generateVideo().then(function (data) { 
  2.   videoRecordingModal.setDownloadLink(data.url, data.filename); 
  3.   videoRecordingModal.changeStatus('recorded'); 
  4. });   
  1. setDownloadLink: function (url, filename) { 
  2.   this.config.$dom.find('.video-download').attr('href', url); 
  3.   this.config.$dom.find('.video-download').attr('download', filename); 
  4.  

后端部分

圖片序列生成

接收到前端傳送的圖片數(shù)據(jù)后,我們首先需要將圖片解析、存儲在服務器中,我們建立以當前時間戳命名的文件夾,將圖片序列以一定格式存儲于其中。由于每張圖片寫入都是異步過程,為確保所有圖片都已處理完畢后,才執(zhí)行視頻轉碼過程,我們需要用到Promise.all。

  1. Promise.all(imgs.map(function (value, index) { 
  2.   var img = decodeBase64Image(value) 
  3.   var data = img.data 
  4.   var type = img.type 
  5.   return new Promise(function (resolve, reject) { 
  6.     fs.writeFile(path.resolve(__dirname, (folder + '/img' + index + '.' + type)), data, 'base64'function(err) { 
  7.       if (err) { 
  8.         reject(err) 
  9.       } else { 
  10.         resolve() 
  11.       } 
  12.     }) 
  13.   }) 
  14. })).then(function () { 
  15.   …//視頻轉碼 
  16. })  

其中decodeBase64Image函數(shù)參考這里。

視頻生成

視頻生成利用FFmpeg轉碼工具。首先確保server端安裝了FFmpeg

  1. brew install ffmpeg 

在項目中安裝fluent-ffmpeg,這是node調用ffmpeg的接口模塊

  1. npm install fluent-ffmpeg --save 

結合上一節(jié)圖片序列存儲的代碼,整個接口代碼如下:

  1. app.post('/video/record'function(req, res) { 
  2.   var imgs = req.text.split(' '
  3.   var timeStamp = Date.now() 
  4.   var folder = 'images/' + timeStamp 
  5.   if (!fs.existsSync(resolve(folder))){ 
  6.     fs.mkdirSync(resolve(folder)); 
  7.   } 
  8.  
  9.   Promise.all(imgs.map(function (value, index) { 
  10.     var img = decodeBase64Image(value) 
  11.     var data = img.data 
  12.     var type = img.type 
  13.     return new Promise(function (resolve, reject) { 
  14.       fs.writeFile(path.resolve(__dirname, (folder + '/img' + index + '.' + type)), data, 'base64'function(err) { 
  15.         if (err) { 
  16.           reject(err) 
  17.         } else { 
  18.           resolve() 
  19.         } 
  20.       }) 
  21.     }) 
  22.   })).then(function () { 
  23.     var proc = new ffmpeg({ source: resolve(folder + '/img%d.png'), nolog: true }) 
  24.       .withFps(25) 
  25.       .on('end'function() { 
  26.         res.status(200) 
  27.         res.send({ 
  28.           url: '/video/mpeg/' + timeStamp
  29.           filename: 'jianshi' + timeStamp + '.mpeg' 
  30.         }) 
  31.       }) 
  32.       .on('error'function(err) { 
  33.         console.log('ERR: ' + err.message) 
  34.       }) 
  35.       .saveToFile(resolve('video/jianshi' + timeStamp + '.mpeg')) 
  36.   }) 
  37. })  

視頻下載

最終將視頻文件傳輸給前端的接口代碼如下:

  1. app.get('/video/mpeg/:timeStamp'function(req, res) { 
  2.   res.contentType('mpeg'); 
  3.   var rstream = fs.createReadStream(resolve('video/jianshi' + req.params.timeStamp + '.mpeg')); 
  4.   rstream.pipe(res, {endtrue}); 
  5. })  

效果預覽 

  

注:此功能是個人項目”簡詩”的一部分,完整代碼可以查看https://github.com/moyuer1992...

責任編輯:龐桂玉 來源: segmentfault
相關推薦

2012-07-13 13:52:54

Canvas

2022-08-29 10:39:32

FFmpeg多媒體框架開源

2022-03-09 09:00:41

SwiftUI視圖生成器Swift

2022-08-11 09:30:52

transitionCSS

2012-07-11 15:54:59

canvas

2021-12-02 15:14:02

ffmpeg視頻Python

2024-02-27 13:03:38

前端視頻合成FFmpeg

2015-10-08 08:48:44

HTML5canvas動畫

2022-11-28 17:22:02

CanvasCSS

2009-12-29 10:06:09

WPF Canvas

2022-06-29 14:06:54

canvas鴻蒙

2021-02-21 07:49:40

Web動畫SVG線條動畫

2024-12-12 08:50:30

開源多媒體框架

2012-07-13 13:41:35

Canvas

2022-07-05 16:21:44

繪制表盤鴻蒙

2022-03-10 11:04:04

Vue3Canvas前端

2011-07-08 10:15:15

IPhone 動畫

2012-11-30 10:42:00

IBMdW

2016-01-20 10:11:56

華麗CanvasHTML5

2021-03-15 06:49:03

Ffmpeg項目轉換庫
點贊
收藏

51CTO技術棧公眾號