正文

短視頻解析api（短視頻解析api源碼非三方）

發(fā)布時間：2023-03-19 01:52:14 稿源：創(chuàng)意嶺閱讀： 453 問大家

大家好！今天讓創(chuàng)意嶺的小編來大家介紹下關(guān)于短視頻解析api的問題，以下是小編對此問題的歸納整理，讓我們一起來看看吧。

開始之前先推薦一個非常厲害的Ai人工智能工具，一鍵生成原創(chuàng)文章、方案、文案、工作計(jì)劃、工作報(bào)告、論文、代碼、作文、做題和對話答疑等等

只需要輸入關(guān)鍵詞，就能返回你想要的內(nèi)容，越精準(zhǔn)，寫出的就越詳細(xì)，有微信小程序端、在線網(wǎng)頁版、PC客戶端

官網(wǎng)：https://ai.de1919.com

本文目錄:

1、短視頻編輯：可實(shí)時交互的播放器
2、如何解析抖音短視頻？
3、抖音去水印之后是0秒說明視頻解析出現(xiàn)錯誤
4、如何解析抖音短視頻

短視頻解析api（短視頻解析api源碼非三方）

一、短視頻編輯：可實(shí)時交互的播放器

如何開發(fā)一個類似剪影或抖音的視頻剪輯工具？

其開發(fā)任務(wù)如上圖，一個短視頻生產(chǎn)app的首要任務(wù)在于實(shí)現(xiàn)一個高度可實(shí)時交互的播放器，在播放預(yù)覽時支持多種編輯能力。

最初我們調(diào)研了多種方案，乍一看Android原生播放器肯定不夠用，估計(jì)要在眾多c++的開源播放器中尋找參考方案，最好自己實(shí)現(xiàn)一個播放器，高度靈活高度可控。然而我們發(fā)現(xiàn)exo這個男團(tuán)播放器的厲害之處，雖然這個播放器如此常用，但是我們不知道其潛力值爆表，可以拓展得如此強(qiáng)大。

事實(shí)上直到現(xiàn)在，我們?nèi)匀辉谧匝幸曨l剪輯工具中使用exoplayer做編輯預(yù)覽。為什么選擇exoplayer,基于以下幾點(diǎn)原因（一句話，性價比高）：

使用基于exoplayer播放器進(jìn)行二次開發(fā)，快速高效實(shí)現(xiàn)視頻剪輯功能。視頻剪輯播放器用于視頻編輯過程中的實(shí)時預(yù)覽播放，支持有功能有：

針對上述視頻剪輯所需要支持的功能，逐一對照explayer的api文檔，尋找拓展實(shí)現(xiàn)的方法。

其中，視頻旋轉(zhuǎn)、文字貼紙、美顏濾鏡、素材轉(zhuǎn)場需要調(diào)用setVideoSurface控制視頻呈現(xiàn)層，自定義GLSurfaceView，使用opengl實(shí)現(xiàn)對視頻的旋轉(zhuǎn)、美顏濾鏡、添加貼紙。exoplayer播放輸出的surface與自定義GLSurfaceView的渲染紋理相綁定。

視頻裁剪播放使用ClippingMediaSource設(shè)置裁剪素材，按api文檔傳入起始時間和結(jié)束時間。

多個視頻拼接播放，使用ConcatenatingMediaSource可以用來無縫地合并播放多個素材，為了能對單個素材進(jìn)行編輯，isAtomic設(shè)為true。

變速使用setPlaybackParameters設(shè)置速度參數(shù)

這三個功能使用exoplayer已提供的api就可以實(shí)現(xiàn)，相對容易。在執(zhí)行編輯操作后即時更新播放器素材和參數(shù)即可。在我們的產(chǎn)品中，有一個撤銷操作的交互，所以需要保留一份數(shù)據(jù)拷貝，如果用戶撤銷操作則更新為原來的數(shù)據(jù)。

exoplayer本身不支持圖片格式的素材播放。注入一個自定義渲染器來實(shí)現(xiàn)圖片（格式為jpg、png、gif等）

其中ImageRender繼承BaseRenderer，實(shí)現(xiàn)了圖片的自定義渲染。render主要工作是將每幀數(shù)據(jù)解碼流渲染為屏幕圖像。對于圖片來說，我們定義ImageMediaSourceImage、SampleStreamImpl和ImageMediaPeriod，分別繼承于BaseMediaSource、SampleStream和MediaPeriod，從原素材解析并傳送每幀圖片數(shù)據(jù)。圖片不需要真正的解碼，實(shí)現(xiàn)SampleStream的readData方法讀取圖片uri為解碼buffer。

實(shí)現(xiàn)圖片播放的核心在于實(shí)現(xiàn)render接口：

在這個方法內(nèi)，我們創(chuàng)建opengl環(huán)境，將bitmap繪制到屏幕上

添加的文字或貼紙支持移動、旋轉(zhuǎn)、縮放和設(shè)置時間軸。對于多個文字貼紙，我們最終包裝為一個與渲染屏幕同尺寸的bitmap，在這個bitmap的畫布上繪制一系列帶坐標(biāo)大小、起止時間的小bitmap(即stickerItem.getBitmap)。

將這張貼紙畫布bitmap與原視頻幀像素混合就實(shí)現(xiàn)了所有文字貼紙的繪制。用opengl繪制貼紙，就是對屏幕上像素做一個水印濾鏡的運(yùn)算。采用GLSL內(nèi)建的mix函數(shù)做兩個紋理的混合，以下是水印濾鏡所用的片元著色器。

和文字貼紙一樣，要實(shí)現(xiàn)實(shí)時的美顏濾鏡效果，必須使用幀緩沖fbo。幀緩沖的每一存儲單元對應(yīng)著屏幕每一個像素。而美顏濾鏡涉及較復(fù)雜算法，由部門內(nèi)的人工智能組提供sdk接入，在繪制過程中調(diào)用sdk方法如下，就是使用fbo進(jìn)行一次圖像紋理轉(zhuǎn)換。傳入?yún)?shù)為屏幕方向、攝像頭方向和渲染尺寸。

目前產(chǎn)品實(shí)現(xiàn)了左右移、上下移、拉近拉遠(yuǎn)、順時針逆時針旋轉(zhuǎn)等幾種轉(zhuǎn)場效果。轉(zhuǎn)場的實(shí)現(xiàn)方法是：對于兩個在其中添加了轉(zhuǎn)場的素材，在上一個素材的最后1000ms繪制轉(zhuǎn)場濾鏡，轉(zhuǎn)場濾鏡即將兩張圖片的像素以一定的規(guī)律進(jìn)行渲染，轉(zhuǎn)場算法由opengl使用glsl著色器實(shí)現(xiàn)。轉(zhuǎn)場基類的片元著色器如下，移動轉(zhuǎn)場（左右向移動和上下移動）、縮放轉(zhuǎn)場（拉近拉遠(yuǎn)）、旋轉(zhuǎn)轉(zhuǎn)場對getFromColor與getToColor執(zhí)行的行為不同。

以移動轉(zhuǎn)場的轉(zhuǎn)場glsl著色器為例

轉(zhuǎn)場的具體實(shí)現(xiàn)參考了GPUImageFilter庫，和美顏濾鏡以及文字貼紙不同的是，轉(zhuǎn)場濾鏡需要在渲染前預(yù)先設(shè)置將下個素材的首幀圖。

在預(yù)覽編輯過程中，由于音樂并不需要真正合成于視頻中，因此可以使用另一個播放器單獨(dú)播放音頻，我們采用android更原始的MediaPlayer單獨(dú)播放音樂，單獨(dú)支持音樂的裁剪播放和seek。

抽幀預(yù)覽即每隔固定時間取視頻的一幀圖片構(gòu)成時間軸，我們使用ffmpegMediaMetadataRetriever庫進(jìn)行抽幀，使用方法為

該庫內(nèi)部使用ffmpeg進(jìn)行解碼取幀，接口易用但是其軟件解碼方式效率過低，相對較慢。因?yàn)閑xoplayer播放器是默認(rèn)使用硬件解碼的，可以采用另一個exoplayer播放器快速播放一次素材，然后每隔一段時間獲取屏幕圖像，但此種方法開銷過大，兩個exoplayer播放器不利于管理。

最后，我們發(fā)現(xiàn)常用的圖片加載庫glide也能進(jìn)行視頻抽幀，使用更為簡單方便，其內(nèi)部采用mediaMetadataRetriever進(jìn)行抽幀。

1.調(diào)整素材，拼接、裁剪、變速

https://vod.cc.163.com/file/5f896ef25655da63cc2d3237.mp4

2.轉(zhuǎn)場、文字貼紙、美顏濾鏡

https://vod.cc.163.com/file/5f896edad70f81a0e3c77dbe.mp4

二、如何解析抖音短視頻？

可以用一些好用的手機(jī)剪輯軟件制作方便快捷，比如我們常見的抖音情感視頻制作等。

1、打開手機(jī)軟件【美冊】的視頻制作功能，點(diǎn)擊【故事視頻功能】或者【視頻加字幕】可以自動給手機(jī)添加字幕。

視頻編輯頁面其他給視頻添加音樂的功能，加封面等也可以試一下。

2、視頻去水印功能，可以選擇給視頻打馬賽克的方式模糊水印，或者把有水印的視頻裁剪掉。

3、制作抖音3d環(huán)繞視頻，

三、抖音去水印之后是0秒說明視頻解析出現(xiàn)錯誤