`
rys5851968
  • 浏览: 155700 次
社区版块
存档分类
最新评论

Android开发:实时处理摄像头预览帧视频------浅析PreviewCallback,onPreviewFrame,AsyncTask的综合应用

 
阅读更多

很多时候,android摄像头模块不仅预览,拍照这么简单,而是需要在预览视频的时候,能够做出一些检测,比如最常见的人脸检测。在未按下拍照按钮前,就检测出人脸然后矩形框标示出来,再按拍照。那么如何获得预览帧视频么?

只需要在Activity里继承PreviewCallback这个接口就行了。示例如下:

public class RectPhoto extends Activity implements SurfaceHolder.Callback, PreviewCallback{}。(注意这个SurfaceHolder.Callback是用来预览摄像头视频,参见我的前贴)。

继承这个方法后,会自动重载这个函数:public void onPreviewFrame(byte[] data, Camera camera) {}这个函数里的data就是实时预览帧视频。一旦程序调用PreviewCallback接口,就会自动调用onPreviewFrame这个函数。调用PreviewCallback的方法有三种,可以参考这里,总共有三种方式调用这个回调。所谓回调就是当条件满足时,自动触发调用这个函数。分别是:.setPreviewCallback, setOneShotPreviewCallback, setPreviewCallbackWithBuffer, 我一般是使用第二种方式。

这里解释下,如果Activity继承了PreviewCallback这个接口,只需 Camera.setOneShotPreviewCallback(this);就可以了。程序会自动调用主类Activity里的onPreviewFrame函数。如果Camera.setOneShotPreviewCallback()这个函数是在主类Activity里的内部类如class A里面,里面的参数应写为Camera.setOneShotPreviewCallback(YourActivity.this)。当然这里,也可以定义一个变量,如Camera.PreviewCallback mPreviewCallback,在调用的时候用Camera.setOneShotPreviewCallback(mPreviewCallback)来完成。相信很多人都熟悉这点,就不罗嗦了。

按理说只要在onPreviewFrame()这个函数里写你的处理程序就可以了。当通常不这么做,因为处理实时预览帧视频的算法可能比较复杂,这就需要借助AsyncTask开启一个线程在后台处理数据。这里假设我们定义一个FaceTask来进行人脸检测,可以这样写:

/*自定义的FaceTask类,开启一个线程分析数据*/
private class FaceTask extends AsyncTask<Void, Void, Void>{

private byte[] mData;
//构造函数
PalmTask(byte[] data){
this.mData = data;
}

@Override
protected Void doInBackground(Void... params) {
// TODO Auto-generated method stub
Size size = myCamera.getParameters().getPreviewSize(); //获取预览大小
final int w = size.width; //宽度
final int h = size.height;
final YuvImage image = new YuvImage(mData, ImageFormat.NV21, w, h, null);
ByteArrayOutputStream os = new ByteArrayOutputStream(mData.length);
if(!image.compressToJpeg(new Rect(0, 0, w, h), 100, os)){
return null;
}
byte[] tmp = os.toByteArray();
Bitmap bmp = BitmapFactory.decodeByteArray(tmp, 0,tmp.length);
doSomethingNeeded(bmp); //自己定义的实时分析预览帧视频的算法

return null;
}

}

注意上面的bmp就是Bitmap格式的实时预览帧数据。doSomethingNeeded(bmp) 就是你要对预览帧视频进行的处理,可以是检测人脸或其他,如分析有无火灾。或者是进行传输。 另外,这里是通过YuvImage和ImageFormat.NV21来解析数据的。在华为u9200上,android4.0.3的系统运行良好。不同手机上支持的格式可能有所不同。网上也有自己写算法进行转化的,需要的可以自己找,但这里如果支持这个格式就不用自己写转换算法了。
onPreviewFrame()里可以这样写:

/*获取预览帧视频*/
public void onPreviewFrame(byte[] data, Camera camera) {
// TODO Auto-generated method stub
if(null != mFaceTask){
switch(mFaceTask.getStatus()){
case RUNNING:
return;
case PENDING:
mFaceTask.cancel(false);
break;
}
}
mFaceTask = new PalmTask(data);
mFaceTask.execute((Void)null);

}

上面的mFaceTask是一个全局变量。通过onPreviewFrame,AsyncTask的综合应用,让复杂的处理算法执行在后台,也就是doInBackground这里,是不是比较绿色?

接下来就是什么时候触发onPreviewFrame()这个函数里,可以是按一个按键触发一次,就在按键的监听里写上 myCamera.setOneShotPreviewCallback(RectPhoto.this);便会自动触发一次。有人说想先聚焦,然后再分析预览帧。就在onAutofocus里的回调写。如下:

//自动聚焦变量回调
myAutoFocusCallback = new AutoFocusCallback() {

public void onAutoFocus(boolean success, Camera camera) {
// TODO Auto-generated method stub
if(success)//success表示对焦成功
{
Log.i(tag, "myAutoFocusCallback: success...");
myCamera.setOneShotPreviewCallback(RectPhoto.this);


}
else
{
//未对焦成功

Log.i(tag, "myAutoFocusCallback: 失败了...");

//这里也可以加上myCamera.autoFocus(myAutoFocusCallback),如果聚焦失败就再次启动聚焦。
}


}
};

大多数时候,希望程序自动每隔多长时间,自动进行一次检测预览帧。这也好办,实施如下:

	class ScanThread implements Runnable{

		public void run() {
			// TODO Auto-generated method stub
			while(!Thread.currentThread().isInterrupted()){
				try {
					if(null != myCamera && isPreview)
					{
//myCamera.autoFocus(myAutoFocusCallback);
						myCamera.setOneShotPreviewCallback(RectPhoto.this);
						Log.i(tag, "setOneShotPreview...");
					}
					Thread.sleep(1500);
				} catch (InterruptedException e) {
					// TODO Auto-generated catch block
					e.printStackTrace();
					Thread.currentThread().interrupt();
				}
			}
			
		}
		
	}
在onCreate里new Thread(new ScanThread()).start()开启扫描线程。如果想手动触发中止这种扫描活动,可以在ScanThread里的while循环里设置标志位,具体可看我以前的博文


最后提醒的是,如果程序中加入了previewCallback,在surfaceDestroy释放camera的时候,最好执行myCamera.setOneShotPreviewCallback(null); 或者myCamera.setPreviewCallback(null);中止这种回调,然后再释放camera更安全。否则可能会报错。

欢迎android爱好者加群248217350,备注:yanzi

-----------------------------------------------------------------本文系原创,转载请注明作者:yanzi1225627


分享到:
评论

相关推荐

    android调用摄像头实时预览

    在Android平台上,调用摄像头进行实时预览是开发过程中常见的需求,特别是在开发摄影、视频聊天或者AR应用时。本文将详细讲解如何在320*320像素、mdpi屏幕分辨率下设置摄像头预览。 首先,理解Android的屏幕密度...

    【Android】使用GLSurfaceView+Canera预览+保存帧Bitmap

    在Android平台上,开发一款涉及到摄像头预览和图像处理的应用时,`GLSurfaceView`和`Camera`的结合使用是常见的技术方案。`GLSurfaceView`是Android提供的一个用于渲染OpenGL ES图形的视图组件,而`Camera`则负责...

    Android camera实时预览 实时处理,人脸识别示例

    在Android平台上,开发一款应用实现相机的实时预览和人脸识别功能是一项常见的需求。本文将深入探讨如何使用Android camera API来实现实时预览,并结合面部识别技术,为用户提供一个简单的面部认证示例。 首先,...

    opencv-4.9.0-android

    - 实时视频分析:在Android摄像头流上进行实时图像处理。 2. **Android平台上的集成与应用**: - 使用NDK(Native Development Kit)编译OpenCV库,将C++代码打包成.so动态库文件。 - Android Studio中配置...

    Android摄像头采集视频

    在Android平台上,摄像头功能是移动应用开发中不可或缺的一部分,它允许用户捕获图像和录制视频。本文将深入探讨如何在Android应用中实现摄像头采集视频的功能,包括视频的存储和捕获照片。 首先,我们需要理解...

    Android自定义相机,切换前后摄像头,照相机拍照

    在Android开发中,自定义相机是一项常见的需求,它允许开发者根据特定的应用场景和用户体验来定制相机功能。本文将深入探讨如何在Android应用中实现自定义相机,并特别关注切换前后摄像头以及进行拍照的功能。 首先...

    Android 开发 API人脸检测实例教程-IT计算机-毕业设计.zip

    在Android开发领域,人脸检测是一项重要的技术,广泛应用于相机应用、安全系统以及社交网络等场景。本教程将基于Android API来实现一个简单的人脸检测功能,帮助开发者理解如何在实际项目中集成这一特性。 首先,...

    Android 带闪光灯的二维码源码.zip

    在Android平台上开发应用程序时,有时候我们需要集成二维码扫描功能,特别是在光线较暗的环境下,启用闪光灯辅助扫描就显得尤为重要。这个"Android带闪光灯的二维码源码.zip"压缩包提供了一个实现这一功能的示例代码...

    CameraPreviewSample,Android摄像头预览示例代码.zip

    通常,会创建一个`ShutterCallback`来处理快门声音,一个`PictureCallback`来处理拍照后的JPEG图像数据,以及一个`PreviewCallback`来处理预览帧的数据。当用户触发拍照操作时,`Camera`对象的`takePicture()`方法会...

    Android应用源码之Camera.zip

    这份源码可以帮助开发者了解Android Camera API的使用,从而开发出符合需求的自定义相机应用,无论是简单的拍照功能还是复杂的视频录制,甚至实时滤镜和图像处理。通过深入学习和实践,开发者可以更好地掌握Android...

    OpenGLES 在 android 上显示摄像头滤镜效果

    你需要创建一个Camera对象,设置预览尺寸,然后注册一个PreviewCallback,接收摄像头捕获的每一帧YUV数据。 步骤3:转换YUV数据到RGB 由于OpenGLES默认处理RGB数据,我们需要将摄像头的YUV数据转换为RGB。可以使用...

    Android视频实时采集和播放实例

    在Android平台上,视频实时采集和播放是移动应用开发中的重要组成部分,尤其对于那些涉及多媒体、社交或者直播的应用来说。这个实例将带你深入了解如何利用Android API来处理这一过程。以下是关于这个话题的详细知识...

    Android Camera开发(一)之基础知识

    在Android平台上,Camera开发是移动应用开发者经常遇到的一项任务,尤其对于那些需要处理图像或视频的应用。本篇文章将深入探讨Android Camera开发的基础知识,帮助开发者理解如何有效地利用Android的相机功能。 ...

    Android FaceDetector实现人脸检测功能

    2. Android FaceDetector 的实现方式:Android FaceDetector 的实现方式是通过使用 Camera 和 TextureView 来预览图像,然后对每一帧图像进行检测是否有人脸存在。 3. Camera 的使用:Camera 是 Android 系统中用于...

    android GlSurfaceView 显示摄像头.rar

    总结来说,通过`GLSurfaceView`显示摄像头画面,我们需要创建一个自定义的`Renderer`,设置好OpenGL环境,处理摄像头的开启、预览设置和帧捕获,以及在`onDrawFrame()`中将摄像头数据渲染到屏幕上。这涉及到Android...

    android调用摄像头拍摄一段视频并上传到服务器

    在Android平台上,调用摄像头拍摄视频并将其上传到服务器是一项常见的功能,特别是在开发移动应用时。这个Demo提供了完整的客户端和服务端源码,帮助开发者理解这一过程。以下将详细阐述涉及的知识点。 首先,我们...

    android之MyCamera

    - **处理拍照事件**:当用户点击拍照按钮时,调用`takePicture()`方法进行拍照,并提供一个ShutterCallback、PictureCallback(用于JPEG格式)和PreviewCallback(用于预览帧)来处理拍照过程的不同阶段。...

    android 二维码

    - 实现Camera.PreviewCallback接口,处理相机预览帧数据。在onPreviewFrame方法中,调用Zxing的解码函数,如`com.google.zxing.client.android.decode.DecodeThread.decode()`,将预览帧数据转换为二维码内容。 4....

    android一个采集图像 并可以把预览回调传回数据做处理

    在Android平台上,开发一款应用程序来采集图像并进行实时处理是一项常见的任务,特别是在摄像头应用或图像分析项目中。本文将深入探讨如何实现这个功能,重点在于理解Android的相机API以及如何设置预览回调来处理...

    PreviewCallback纠正图像方向

    总结起来,"PreviewCallback纠正图像方向"是Android相机应用开发中的关键技术点,需要理解Exif信息、PreviewCallback的工作原理,以及如何处理图像旋转。同时,有效地转换byte[]到Bitmap是内存管理和性能优化的关键...

Global site tag (gtag.js) - Google Analytics