詳解如何用Java實(shí)現(xiàn)對(duì)m3u8直播流抽幀
什么是抽幀
抽幀(frame extraction)是指從視頻流中提取一些特定的幀,通常是關(guān)鍵幀或者隨機(jī)幀,以供后續(xù)處理。對(duì)于m3u8直播流,可以使用Java中的FFmpeg庫(kù)來(lái)實(shí)現(xiàn)抽幀功能。
什么是 FFmpeg
FFmpeg是一套可以用來(lái)記錄、轉(zhuǎn)換數(shù)字音頻、視頻,并能將其轉(zhuǎn)化為流的開源計(jì)算機(jī)程序。采用LGPL或GPL許可證。它提供了錄制、轉(zhuǎn)換以及流化音視頻的完整解決方案。
什么是 JavaCV
JavaCV 是一款基于JavaCPP 調(diào)用方式,由多種開源計(jì)算機(jī)視覺庫(kù)組成的包裝庫(kù),封裝了包含F(xiàn)Fmpeg、OpenCV、tensorflow、caffe、tesseract、libdc1394、OpenKinect、videoInput和ARToolKitPlus等在內(nèi)的計(jì)算機(jī)視覺領(lǐng)域的常用庫(kù)和實(shí)用程序類。
最簡(jiǎn)單的抽幀
使用 Java 中的 FFmpeg 庫(kù)實(shí)現(xiàn)的最簡(jiǎn)單的抽幀。
<dependency> <groupId>org.bytedeco</groupId> <artifactId>javacv</artifactId> <version>1.4.1</version> </dependency>
import org.bytedeco.javacv.*; import java.io.IOException; public class FrameExtractor { public static void main(String[] args) throws IOException, FrameGrabber.Exception, FrameRecorder.Exception { FFmpegFrameGrabber grabber = new FFmpegFrameGrabber("直播流地址xxx.m3u8"); grabber.setOption("rtsp_transport", "tcp"); grabber.start(); Frame frame; Java2DFrameConverter converter = new Java2DFrameConverter(); int i = 0; // grabber.grabImage() 獲取幀圖片,不包含音頻 // grabber.grab() 包含音頻 while ((frame = grabber.grabImage()) != null) { // 在這里處理抽取到的幀 // 例如,將幀保存為圖像文件 converter.convert(frame).createGraphics().dispose(); String outputFilename = "frame_" + i + ".jpg"; File f = new File(outputFilename); if(!f.exists())f.mkdirs(); ImageIO.write(converter.convert(frame), "jpg", f); i++; } grabber.stop(); } }
抽幀算法
什么是幀率:每秒刷新幾次就是幾幀。例如25幀就是每秒展示25張圖片。
指定每幾秒抽取幾幀。這里的核心思想是,平均數(shù)累加。
假設(shè)對(duì)幀率為25的視頻。要實(shí)現(xiàn)每3秒抽3幀。
設(shè):幀率=fps;時(shí)間=t;t時(shí)間內(nèi)抽取總幀數(shù)=x;
avg=(fps.t)/x;
只需找出 1*avg,2*avg,...,x*avg分別對(duì)應(yīng)的值就找到了需要抽取的幀。
最后只需要使用一個(gè)變量對(duì)幀率計(jì)數(shù)。在指定的幀率進(jìn)行抽取操作就可以了。
代碼:
public class FrameExtractor { public static void main(String[] args) throws IOException, FrameGrabber.Exception, FrameRecorder.Exception { // 讀取流 FFmpegFrameGrabber grabber = new FFmpegFrameGrabber("http:.m3u8"); grabber.setOption("rtsp_transport", "tcp"); grabber.start(); Frame frame; Java2DFrameConverter converter = new Java2DFrameConverter(); // 控制讀取幀數(shù) int frameRate = (int) grabber.getFrameRate(); int targetFrameRateNum[] = {10,10}; //(每10秒讀10幀) 目標(biāo)幀率數(shù)量,每幾秒鐘讀取幾幀 SortedSet<Integer> targetFrameRate = new TreeSet<>(); // 需要抽取的目標(biāo)幀率 // 計(jì)算需要抽取的目標(biāo)幀 int calFrameRate = frameRate * targetFrameRateNum[0]; int partSize = calFrameRate / targetFrameRateNum[1]; int remainder = calFrameRate % targetFrameRateNum[1]; int current = 1; for (int i = 0; i < targetFrameRateNum[1]; i++) { // 避免出現(xiàn)幀數(shù)多一個(gè) if (current <= calFrameRate){ targetFrameRate.add(current); } current += partSize; if (i < remainder) { current++; } } // 計(jì)數(shù)器 int frameCount = 0; int i = 0; while ((frame = grabber.grabImage()) != null) { // 每讀取一幀,增加計(jì)數(shù)器 frameCount++; // 如果計(jì)數(shù)器達(dá)到目標(biāo)幀率,則進(jìn)行處理 if (targetFrameRate.contains(frameCount)) { // 處理抽取到的幀 } // 重置計(jì)數(shù)器 if (calFrameRate == frameCount){ frameCount = 0; } } grabber.stop(); } }
到此這篇關(guān)于詳解如何用Java實(shí)現(xiàn)對(duì)m3u8直播流抽幀的文章就介紹到這了,更多相關(guān)Java m3u8直播流抽幀內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
IDEA如何修改maven的JVM啟動(dòng)內(nèi)存參數(shù)
這篇文章主要介紹了IDEA如何修改maven的JVM啟動(dòng)內(nèi)存參數(shù)問題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2024-09-09Java實(shí)現(xiàn)ArrayList自動(dòng)擴(kuò)容
ArrayList的擴(kuò)容規(guī)則是非常簡(jiǎn)單的,它會(huì)根據(jù)需要自動(dòng)擴(kuò)容,本文就來(lái)介紹一下Java實(shí)現(xiàn)ArrayList自動(dòng)擴(kuò)容,具有一定的參考價(jià)值,感興趣的可以了解一下2023-12-12SpringBoot自定義注解使用讀寫分離Mysql數(shù)據(jù)庫(kù)的實(shí)例教程
這篇文章主要給大家介紹了關(guān)于SpringBoot自定義注解使用讀寫分離Mysql數(shù)據(jù)庫(kù)的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2020-11-11idea 打包maven項(xiàng)目忽略test文件的操作
這篇文章主要介紹了idea 打包maven項(xiàng)目忽略test文件的操作,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來(lái)看看吧2021-02-02springboot2.2.2集成dubbo的實(shí)現(xiàn)方法
這篇文章主要介紹了springboot2.2.2集成dubbo的實(shí)現(xiàn)方法,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2020-01-01Spring中屬性注入的幾種方式以及復(fù)雜屬性的注入詳解
這篇文章主要介紹了Spring中屬性注入的幾種方式以及復(fù)雜屬性的注入詳解,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2017-04-04Java Springboot websocket使用案例詳解
這篇文章主要介紹了Java Springboot websocket使用案例詳解,本篇文章通過簡(jiǎn)要的案例,講解了該項(xiàng)技術(shù)的了解與使用,以下就是詳細(xì)內(nèi)容,需要的朋友可以參考下2021-09-09