javacv案例：ffmpeg进行视频处理和opencv调用本地视频头视频处理

  |   2,009 浏览

项目依赖

<!-- javacv依赖 -->
<dependency>
	<groupId>org.bytedeco</groupId>
	<artifactId>javacv</artifactId>
	<version>1.4.3</version>
</dependency>
<!-- ffmpeg依赖 -->
<dependency>
	<groupId>org.bytedeco.javacpp-presets</groupId>
	<artifactId>ffmpeg-platform</artifactId>
	<version>4.0.2-1.4.3</version>
</dependency>
<!-- opencv依赖 -->
<dependency>
	<groupId>org.bytedeco.javacpp-presets</groupId>
	<artifactId>opencv-platform</artifactId>
	<version>3.4.3-1.4.3</version>
</dependency>

main方法使用opencv调用本地视频头示例

public static void main(String[] args) throws Exception{
	//调用摄像头
	OpenCVFrameGrabber grabber = new OpenCVFrameGrabber(0);
	grabber.start();   //开始获取摄像头数据
	CanvasFrame canvas = new CanvasFrame("摄像头");//新建一个窗口
	canvas.setDefaultCloseOperation(JFrame.EXIT_ON_CLOSE);
	canvas.setAlwaysOnTop(true);
	while(true){
		if(!canvas.isDisplayable()){//窗口是否关闭
			grabber.stop();//停止抓取
			System.exit(2);//退出
			break;
		}    
		canvas.showImage(grabber.grab());//获取摄像头图像并放到窗口上显示
		Thread.sleep(200);//50毫秒刷新一次图像
	}
}

main方法使用ffmpeg截取视频指定帧的图像示例代码

/**
该示例代码应用场景为，解决苹果手机在公众号H5页面中上传视频后，无法预览视频第1帧的问题。
思路就是前端无法实现，那就后台上传视频成功后额外处理视频截取第1帧的图像保存起来。
前端渲染时直接加载第1帧图像url，点击后再加载视视频url进行播放。
**/
public static void main(String[] args) throws Exception{
	//获取指定视频
	FFmpegFrameGrabber fFmpegFrameGrabber = new FFmpegFrameGrabber("D:\\test\\video\\3.mp4");
	//Frame对象
	Frame frame = null;
	//视频帧数累计数
	int frameIndex = 0;
	fFmpegFrameGrabber.start();
	//获取视频总帧数
	int totalIndex = fFmpegFrameGrabber.getLengthInFrames();
	while (frameIndex <= totalIndex) {
		frame = fFmpegFrameGrabber.grabImage();
		//获取视频的第1帧图像并写入到本地磁盘
		if (frame != null && frameIndex == 1) {
			// 文件绝对路径+名字
			String fileName = "D:\\test\\img\\" + UUID.randomUUID().toString() + "_" + String.valueOf(frameIndex) + ".jpg";
			// 文件储存对象
			File outPut = new File(fileName);
			BufferedImage frameToBufferedImage = FrameToBufferedImage(frame);
			ImageIO.write(frameToBufferedImage, "jpg", outPut);
			break;
		}
		frameIndex++;
	}
	fFmpegFrameGrabber.stop();
	fFmpegFrameGrabber.close();
}

FAQ

1、maven依赖后，会导致整个项目工程打包发布后的体积变得十分巨大
原因是ffmpeg和opencv两个依赖默认会把android，ios，linux，macos，windows以及各自不同cpu芯片下，86/64等所有版本的Jar会全部依赖进来，项目打包后体积剧增500M+
解决方法也比较简单，只需要根据我们生产环境真实平台环境，选取其中1个Jar包就可以了。下面以Linux 64位操作系统为例，maven配置如下：

<!-- javacv依赖 -->
<dependency>
	  <groupId>org.bytedeco</groupId>
	  <artifactId>javacv</artifactId>
	  <version>1.4.3</version>
</dependency>
<!-- 引入ffmpeg依赖时单独把linux 64位的ffmpeg依赖引入即可 -->
<dependency>
	  <groupId>org.bytedeco.javacpp-presets</groupId>
	  <artifactId>ffmpeg</artifactId>
	  <version>4.0.2-1.4.3</version>
	  <classifier>linux-x86_64</classifier>
</dependency>
<!-- 引入ffmpeg依赖时单独把linux 64位的opencv依赖引入即可 -->
<dependency>
	  <groupId>org.bytedeco.javacpp-presets</groupId>
	  <artifactId>opencv</artifactId>
	  <version>3.4.3-1.4.3</version>
	  <classifier>linux-x86_64</classifier>
</dependency>

2、使用ffmpeg进行视频处理，截取第1帧时图像，如果项目在生产环境是部署在docker容器中时，由于我们docker容器一般使用的是精简的Linux系统，所以有可能会导致按帧截取图像时报错：Could not initialize class org.bytedeco.javacpp.avutil 但我们在分析问题时发现这个类是存在的，此时的原因是linux环境缺少安装ffmpeg软件包。如果docker容器是基于frolvlad构建的。那么我们只需要进入容器执行以下步骤即可：

apk update
apk search ffmpeg
apk add ffmpeg=3.4-r1
apk search musl
apk add musl=1.1.24-r9
//执行ffmpeg安装完成后，重启docker容器即可

评论

发表评论

validate