`
muyu114
  • 浏览: 134836 次
  • 性别: Icon_minigender_1
  • 来自: 深圳
文章分类
社区版块
存档分类
最新评论

Android 关于获取摄像头帧数据

 
阅读更多

第一部分:

由于Android下摄像头预览数据只能 ImageFormat.NV21 格式的,所以解码时要经过一翻周折.

Camera mCamera = Camera.open();
Camera.Parameters p = mCamera.getParameters();
p.setPreviewFormat(ImageFormat.NV21);
/*这是唯一值,也可以不设置。有些同学可能设置成 PixelFormat 下面的一个值,其实是不对的,具体的可以看官方文档*/
mCamera.setParameters(p);
mCamera.startPreview();

  

下面是解码核心部分:

	@Override
	public void onPreviewFrame(byte[] data, Camera camera) {		
		Size size = camera.getParameters().getPreviewSize();		
		try{
			YuvImage image = new YuvImage(data, ImageFormat.NV21, size.width, size.height, null);
			if(image!=null){
				ByteArrayOutputStream stream = new ByteArrayOutputStream();
				image.compressToJpeg(new Rect(0, 0, size.width, size.height), 80, stream);
				Bitmap bmp = BitmapFactory.decodeByteArray(stream.toByteArray(), 0, stream.size());

   				stream.close();
			}
		}catch(Exception ex){
			Log.e("Sys","Error:"+ex.getMessage());
		}
	}

代码很简单。就是把YUV数据转成 Bitmap 就行了,系统提供 YuvImage 类。


第二部分:

原理是利用手机的摄像头取景,然后解码视频流

拆分成位图,然后对位图进行处理和识别

要在android手机里面捕获视频流

当然,手机必须得有摄像头

然后嘛,第一步是在AndroidManifest.xml加入如下权限声明

<permission android:name="android.permission.CAMERA"></permission>
<uses-permission android:name="android.permission.CAMERA" />
<uses-feature android:name="android.hardware.camera" />
<uses-feature android:name="android.hardware.camera.autofocus" />

摄像头的预览和捕获只能通过surfaceview..

而且他的工作模式必须是SurfaceHolder.SURFACE_TYPE_PUSH_BUFFERS

不然不能在surfaceview里面显示出预览的图像

然后在surfaceCreated方法里面加入我们的摄像头初始化

public void surfaceCreated(SurfaceHolder arg0) {
    //启动相机服务
     mCamera = Camera.open();
    Log.i("Camera", "surface open");
    try {
        //设置预览  这个holder是 SurfaceView的getHolder()方法得到的
        mCamera.setPreviewDisplay(holder);
         Camera.Parameters parameters = mCamera.getParameters();
        //设置图片格式
         parameters.setPictureFormat(PixelFormat.JPEG);
        //设置预览的帧数,受硬件影响.
        parameters.setPreviewFrameRate(10);
        //设置尺寸
        parameters.setPreviewSize(preV.getWidth(), preV.getHeight());
        mCamera.setParameters(parameters);
        //设置回调的类
        mCamera.setPreviewCallback(new ViewCallback(preV, this));
        //开始预览
         mCamera.startPreview();
    } catch (Exception e) {
        //释放相机
         mCamera.release();
        mCamera = null;
        return;
    }
}

然后看看我们的ViewCallback类

在这个类里面要实现PreviewCallback

主要是里面的 public void onPreviewFrame(byte[] data, Camera arg1) {}

data就是返回的数据流了, 不过麻烦的是这个流并不是rgb编码的,是YUV420SP编码的,

Camera.Parameters 里面有个setPreviewFormat() 这个虽然可以设置 但是具体能不能编码成JPEG是受你的手机影响的

老老实实得解码吧...网上关于YUV420SP编码的内容相当相当少..

    static public void decodeYUV420SP(byte[] rgbBuf, byte[] yuv420sp, int width, int height) {
    	final int frameSize = width * height;
		if (rgbBuf == null)
			throw new NullPointerException("buffer 'rgbBuf' is null");
		if (rgbBuf.length < frameSize * 3)
			throw new IllegalArgumentException("buffer 'rgbBuf' size "
					+ rgbBuf.length + " < minimum " + frameSize * 3);

		if (yuv420sp == null)
			throw new NullPointerException("buffer 'yuv420sp' is null");

		if (yuv420sp.length < frameSize * 3 / 2)
			throw new IllegalArgumentException("buffer 'yuv420sp' size " + yuv420sp.length
					+ " < minimum " + frameSize * 3 / 2);

    	int i = 0, y = 0;
    	int uvp = 0, u = 0, v = 0;
    	int y1192 = 0, r = 0, g = 0, b = 0;

    	for (int j = 0, yp = 0; j < height; j++) {
    		uvp = frameSize + (j >> 1) * width;
    		u = 0;
    		v = 0;
    		for (i = 0; i < width; i++, yp++) {
    			y = (0xff & ((int) yuv420sp[yp])) - 16;
    			if (y < 0) y = 0;
    			if ((i & 1) == 0) {
    				v = (0xff & yuv420sp[uvp++]) - 128;
    				u = (0xff & yuv420sp[uvp++]) - 128;
    			}

    			y1192 = 1192 * y;
    			r = (y1192 + 1634 * v);
    			g = (y1192 - 833 * v - 400 * u);
    			b = (y1192 + 2066 * u);

    			if (r < 0) r = 0; else if (r > 262143) r = 262143;
    			if (g < 0) g = 0; else if (g > 262143) g = 262143;
    			if (b < 0) b = 0; else if (b > 262143) b = 262143;

    			rgbBuf[yp * 3] = (byte)(r >> 10);
    			rgbBuf[yp * 3 + 1] = (byte)(g >> 10);
    			rgbBuf[yp * 3 + 2] = (byte)(b >> 10);
    		}
    	}
    }

具体怎么实现的我就不是很清楚了..好像是灰度在前面 然后把蓝色和青色混合成一个变量跟在后面..

但是呢.这个方法效率很低..特别是些cpu差的机器

可以数数..每次都是横向*纵向 算法复杂度挺高的..

然后我把他压缩了10倍..就是每隔10个点取一次,效率瞬间就上来了.

现在运行你的程序, 你可能会发现摄像头的样子很奇怪。

其实是因为屏幕方向的问题

把你的屏幕设置为永久横向即可

this.setRequestedOrientation(ActivityInfo.SCREEN_ORIENTATION_LANDSCAPE);
//覆盖屏幕 不显示通知栏
this.requestWindowFeature(Window.FEATURE_NO_TITLE);
getWindow().setFlags(WindowManager.LayoutParams.TYPE_STATUS_BAR, WindowManager.LayoutPar

分享到:
评论
1 楼 ihopethatwell 2012-07-24  
楼主,你这个是如何调用视屏帧界面?能否表述详细?

相关推荐

    打开Android相机,实时获取帧数据

    自己封装的一个工具jar包,可以打开Android的相机进行预览,并且展示预览的控件也自定义了,api调用规则非常简单,有个缺点不能更换前后摄像头,不过可以自行的选择打开前置还是后置。

    h5获取摄像头数据,并实时预览

    "h5获取摄像头数据,并实时预览"这个话题是关于如何利用H5的媒体API来访问用户设备的摄像头,捕获视频流并实现实时预览。这个功能不仅适用于网页,而且在小程序和内嵌于WebView的应用中也非常常见。以下是对这一技术...

    Android PC机摄像头摄像数据在Android手机上同步显示的源-IT计算机-毕业设计.zip

    该资源是一个针对Android开发的学习项目,具体是实现将PC机的摄像头数据实时同步到Android手机上的功能。这个项目对于理解Android应用开发、网络通信以及多媒体处理等知识点具有很高的价值,尤其适合计算机专业的...

    Android PC机摄像头摄像数据在Android手机上同步显示的源.zip

    OpenCV提供了丰富的接口用于获取摄像头数据,并可以进行预处理,如图像裁剪、旋转、色彩空间转换等。 2. **数据编码与传输**:捕获的视频流需要编码成适合网络传输的格式,如H.264或MPEG-4。这个过程可能需要使用...

    AndroidUSb外接摄像头驱动

    - 流处理:将摄像头数据转换为可以显示或处理的格式,可能需要解码和帧同步。 7. **挑战与注意事项**: - 兼容性:不同品牌的USB摄像头可能遵循不同的UVC子类和协议,可能导致兼容性问题。 - 性能优化:处理视频...

    Android采集摄像头图像--MediaCodec编码

    本篇文章将深入探讨如何利用Android的MediaCodec API来从摄像头采集图像并进行硬件编码,以及如何通过FFmpeg实现软件编码。我们还将讨论`MainActivity.java`文件中可能涉及的关键代码段。 首先,Android的...

    android usb摄像头 支持yuyv mjpeg格式

    在Android平台上,USB摄像头的使用是一项重要功能,尤其对于开发者来说,能够支持不同的视频格式如YUYV和MJPEG是至关重要的。本文将详细探讨如何在Android设备上实现USB摄像头的支持,以及这两种视频格式的工作原理...

    Android SurfaceView 实现实时显示摄像头视频

    // 获取摄像头 Camera.Parameters parameters = camera.getParameters(); // 获取参数 // 设置参数,如预览尺寸、格式等 camera.setDisplayOrientation(90); // 旋转预览图像 camera.setPreviewDisplay(holder); //...

    Android使用MediaCodec将摄像头采集的视频编码为h264

    1. 首先,需要获取摄像头采集的视频流数据,可以使用Android的Camera API来实现。 2. 然后,需要将视频流数据传递给MediaCodec,MediaCodec会将其编码为h264格式。 3. 在编码过程中,可以使用MediaCodec提供的各种...

    Android实时预览摄像头、绘制浮层

    在Android开发中,实时预览摄像头并进行图像处理是一项常见的需求,例如用于人脸识别、滤镜效果等场景。本文将深入探讨如何使用SurfaceView来实现这一功能,并通过在每一帧上绘制浮层展示处理结果。 首先,`...

    Android摄像头RTMP推流

    在Android上集成FFmpeg,可以实现从摄像头捕获视频数据,再通过RTMP协议推送到流媒体服务器,从而实现视频直播。 首先,你需要将FFmpeg库编译为适用于Android的版本。这通常涉及交叉编译过程,需要设置Android NDK...

    Android Camera2采集摄像头原始数据

    本文还提供了 CamCap 程序的实现细节,包括获取摄像头数据,手动绘制图像,随时开启/关闭预览,随时保存当前摄像头图像等功能。这些功能都可以帮助开发者更好地控制摄像头和数据处理。 本文提供了 Android Camera2 ...

    Android驱动USB摄像头源码

    这个应用可能包含了初始化USB设备、选择摄像头、打开数据流、处理视频帧以及显示图像等功能的代码。分析和理解这个示例应用的源码,可以帮助开发者快速理解和实现自己的USB摄像头应用。 综上所述,"Android驱动USB...

    android TextureVIew实现摄像头预览和拍照

    要实现摄像头预览,我们需要先获取摄像头权限。在AndroidManifest.xml中添加以下权限: ```xml &lt;uses-permission android:name="android.permission.CAMERA" /&gt; ``` 然后,创建一个TextureView实例并将其绑定到...

    Android上使用OpenCV打开摄像头源码

    总的来说,使用OpenCV在Android上处理摄像头数据涉及到库的集成、初始化、创建预览视图以及处理每一帧的图像。这需要对Android开发和OpenCV的基本概念有深入的理解。通过不断地实践和学习,你将能够熟练地在Android...

    硬编码,使用SurfaceView和Camera取帧并保存本地.h264和上传Socket实时视频

    在这里,我们将摄像头捕获的每一帧转换为H264编码的数据,以减少视频文件的大小,同时保持良好的画质。实现这一过程通常需要使用MediaCodec,它是Android提供的硬件加速编码和解码的API。我们需要配置MediaCodec为...

    摄像头双开获取当前帧CameraDemo.rar

    4. **预览并获取当前帧**:获取当前帧数据通常涉及使用Surface或SurfaceView进行预览,同时通过回调函数(如Camera2中的ImageReader)捕获每一帧的YUV或JPEG数据。这需要处理图像缓冲区管理,确保同步和高效的数据...

    android wifi网络摄像头源代码

    - **Camera初始化**:获取摄像头权限,选择合适的摄像头(前后置),设置分辨率、帧率等参数。 - **预览流处理**:通过SurfaceHolder回调,将摄像头预览流显示在界面上。这部分可能涉及到OpenGL ES进行图像处理,...

    Android PC机摄像头摄像数据在Android手机上同步显示的源.rar

    在Android中,使用SurfaceView来显示摄像头数据是常见的做法,因为它能提供低延迟的帧渲染,这对于实时视频流很重要。 3. **网络通信**: 为了让Android手机接收PC摄像头的数据,我们需要实现网络通信。可能使用的...

    Camera2GetPreview:在 Android Camera2 中获取和处理预览帧的示例工程

    本项目“Camera2GetPreview”旨在通过实例来展示如何在Android应用中使用Camera2 API获取并处理相机的预览帧。 一、Camera2 API基础 Camera2 API由多个组件构成,包括CameraManager、CameraDevice、CaptureRequest...

Global site tag (gtag.js) - Google Analytics