经验首页 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
当前位置:技术经验 » Java相关 » Java » 查看文章
详解如何用Java实现对m3u8直播流抽帧
来源:jb51  时间:2023/3/8 10:58:55  对本文有异议

什么是抽帧

抽帧(frame extraction)是指从视频流中提取一些特定的帧,通常是关键帧或者随机帧,以供后续处理。对于m3u8直播流,可以使用Java中的FFmpeg库来实现抽帧功能。

什么是 FFmpeg

FFmpeg是一套可以用来记录、转换数字音频、视频,并能将其转化为流的开源计算机程序。采用LGPL或GPL许可证。它提供了录制、转换以及流化音视频的完整解决方案。

什么是 JavaCV

JavaCV 是一款基于JavaCPP 调用方式,由多种开源计算机视觉库组成的包装库,封装了包含FFmpeg、OpenCV、tensorflow、caffe、tesseract、libdc1394、OpenKinect、videoInput和ARToolKitPlus等在内的计算机视觉领域的常用库和实用程序类。

最简单的抽帧

使用 Java 中的 FFmpeg 库实现的最简单的抽帧。

  1. <dependency>
  2. <groupId>org.bytedeco</groupId>
  3. <artifactId>javacv</artifactId>
  4. <version>1.4.1</version>
  5. </dependency>
  1. import org.bytedeco.javacv.*;
  2. import java.io.IOException;
  3.  
  4. public class FrameExtractor {
  5. public static void main(String[] args) throws IOException, FrameGrabber.Exception, FrameRecorder.Exception {
  6. FFmpegFrameGrabber grabber = new FFmpegFrameGrabber("直播流地址xxx.m3u8");
  7. grabber.setOption("rtsp_transport", "tcp");
  8. grabber.start();
  9.  
  10. Frame frame;
  11. Java2DFrameConverter converter = new Java2DFrameConverter();
  12. int i = 0;
  13.  
  14. // grabber.grabImage() 获取帧图片,不包含音频
  15. // grabber.grab() 包含音频
  16. while ((frame = grabber.grabImage()) != null) {
  17. // 在这里处理抽取到的帧
  18. // 例如,将帧保存为图像文件
  19. converter.convert(frame).createGraphics().dispose();
  20. String outputFilename = "frame_" + i + ".jpg";
  21. File f = new File(outputFilename);
  22. if(!f.exists())f.mkdirs();
  23. ImageIO.write(converter.convert(frame), "jpg", f);
  24. i++;
  25. }
  26. grabber.stop();
  27. }
  28. }

抽帧算法

什么是帧率:每秒刷新几次就是几帧。例如25帧就是每秒展示25张图片。

指定每几秒抽取几帧。这里的核心思想是,平均数累加。

假设对帧率为25的视频。要实现每3秒抽3帧。

设:帧率=fps;时间=t;t时间内抽取总帧数=x;

avg=(fps.t)/x;

只需找出 1*avg,2*avg,...,x*avg分别对应的值就找到了需要抽取的帧。

最后只需要使用一个变量对帧率计数。在指定的帧率进行抽取操作就可以了。

代码:

  1. public class FrameExtractor {
  2. public static void main(String[] args) throws IOException, FrameGrabber.Exception, FrameRecorder.Exception {
  3. // 读取流
  4. FFmpegFrameGrabber grabber = new FFmpegFrameGrabber("http:.m3u8");
  5. grabber.setOption("rtsp_transport", "tcp");
  6. grabber.start();
  7.  
  8. Frame frame;
  9. Java2DFrameConverter converter = new Java2DFrameConverter();
  10.  
  11. // 控制读取帧数
  12. int frameRate = (int) grabber.getFrameRate();
  13. int targetFrameRateNum[] = {10,10}; //(每10秒读10帧) 目标帧率数量,每几秒钟读取几帧
  14. SortedSet<Integer> targetFrameRate = new TreeSet<>(); // 需要抽取的目标帧率
  15. // 计算需要抽取的目标帧
  16. int calFrameRate = frameRate * targetFrameRateNum[0];
  17. int partSize = calFrameRate / targetFrameRateNum[1];
  18. int remainder = calFrameRate % targetFrameRateNum[1];
  19. int current = 1;
  20. for (int i = 0; i < targetFrameRateNum[1]; i++) {
  21. // 避免出现帧数多一个
  22. if (current <= calFrameRate){
  23. targetFrameRate.add(current);
  24. }
  25. current += partSize;
  26. if (i < remainder) {
  27. current++;
  28. }
  29. }
  30.  
  31. // 计数器
  32. int frameCount = 0;
  33. int i = 0;
  34. while ((frame = grabber.grabImage()) != null) {
  35. // 每读取一帧,增加计数器
  36. frameCount++;
  37. // 如果计数器达到目标帧率,则进行处理
  38. if (targetFrameRate.contains(frameCount)) {
  39. // 处理抽取到的帧
  40.  
  41. }
  42. // 重置计数器
  43. if (calFrameRate == frameCount){
  44. frameCount = 0;
  45. }
  46. }
  47.  
  48. grabber.stop();
  49. }
  50. }

到此这篇关于详解如何用Java实现对m3u8直播流抽帧的文章就介绍到这了,更多相关Java m3u8直播流抽帧内容请搜索w3xue以前的文章或继续浏览下面的相关文章希望大家以后多多支持w3xue!

 友情链接:直通硅谷  点职佳  北美留学生论坛

本站QQ群:前端 618073944 | Java 606181507 | Python 626812652 | C/C++ 612253063 | 微信 634508462 | 苹果 692586424 | C#/.net 182808419 | PHP 305140648 | 运维 608723728

W3xue 的所有内容仅供测试,对任何法律问题及风险不承担任何责任。通过使用本站内容随之而来的风险与本站无关。
关于我们  |  意见建议  |  捐助我们  |  报错有奖  |  广告合作、友情链接(目前9元/月)请联系QQ:27243702 沸活量
皖ICP备17017327号-2 皖公网安备34020702000426号