ffmpeg实现视频播放 ----------- Javacv

什么是Javacv和FFmpeg？
Javacv是一个专门为Java开发人员提供的计算机视觉库，它基于FFmpeg和Opencv库，提供了许多用于处理图
像、视频和音频的功能。FFmpeg是一个开源的音视频处理工具集，它提供了用于编码、解码、转换和播放音视频
文件的库和工具。

实现视频播放的步骤
要实现音视频同步播放，我们需要完成以下几个步骤
 1.加载音视频文件
 2.解码音视频流
 3.同步音视频播放
 4.染音视频数据

运行项目需要先导入pom依赖：

        1.5.5
    
    
        
            org.springframework.boot
            spring-boot-starter
        
 
        
            org.projectlombok
            lombok
            true
        
        
            org.springframework.boot
            spring-boot-starter-test
            test
        
 
        
            org.bytedeco
            javacv
            ${javacpp.version}
        
        
            org.bytedeco
            javacv-platform
            ${javacpp.version}
        
 
 
    

1.加载音视频文件
首先，我们需要加载音视频文件。使用Javacv的FFmpegFrameGrabber类可以轻松地加载音视频文件。

​
String filePath = "path/to/video.mp4";
FFmpegFrameGrabber grabber = new FFmpegFrameGrabber(filePath);
grabber.start();
 
​

 2.解码音视频流
加载音视频文件后，我们需要解码音视频流。使用Javacv的Frame类可以轻松地解码音视频流。

​
Frame frame = nu11;
while ((frame = grabber.grabFrame()) != nul1) {
      //处理解码后的音视频数据
}
 
​

 3.同步音视频播放
在解码音视频流之后，我们需要确保音频和视频能够同步播放。通常情况下，音频和视频的时间截是不一致的，我们可以通过比较音频和视频的时间戳来判断两者之间的差异，并进行相应的调整。

​
        long audioPts = frame.timestamp;
        long videoPts = //从视频中获取时间
        long ptsDiff = audioPts - videoPts;
        if (ptsDiff > 0) {
            //音频时间较大，视频播放较慢，需要进行快进处理
        } else if (ptsDiff < 0) {
            //视频时间戳较大，音频播放较慢，需要进行快进处理
        } else {
            //音频和视频时间戳一致，正常播放
        }
 
​

 4.染音视频数据
最后，我们需要将解码后的音视频数据染到屏幕上。使用Javacv的CanvasFrame类可以创建一个窗口，并将音频和视频数据染到窗口上。

​
        CanvasFrame canvasFrame = new CanvasFrame("Video Player");
        canvasFrame.setcanvasSize(grabber.getImageWidth,grabber.getImageHeight());
        while((frame = grabber.grabFrame()) != nul1) {
            canvasFrame.showImage(frame);
        }
 
​

  完整示例代码
下面是一个完整的示例代码，演示如何使用Javacv和FFmpeg实现音视频同步播放：

import org.bytedeco.javacv.CanvasFrame;
import org.bytedeco.javacv.FFmpegFrameGrabber;
import org.bytedeco.javacv.Frame;
import org.bytedeco.javacv.FrameGrabber;
 
 
public class VideoPlayer {
 
    public static void main(String[] args) {
        String filePath = "d:/test/yq.mp4";
        FFmpegFrameGrabber grabber = new FFmpegFrameGrabber(filePath);
        try {
            grabber.start();
            CanvasFrame canvasFrame = new CanvasFrame("video Player");
            canvasFrame.setCanvasSize(grabber.getImageWidth(), grabber.getImageHeight());
            Frame frame = null;
            while ((frame = grabber.grabFrame()) != null) {
                canvasFrame.showImage(frame);
            }
            canvasFrame.dispose();
            grabber.stop();
        } catch (FrameGrabber.Exception e) {
            e.printStackTrace();
        }
    }
 
}

运行效果：

                              感谢大家的阅读，觉得有所帮助的朋友点点关注点点赞！