第一部分:
由于Android下摄像头预览数据只能 ImageFormat.NV21 格式的,所以解码时要经过一翻周折.
Camera mCamera = Camera.open();
Camera.Parameters p = mCamera.getParameters();
p.setPreviewFormat(ImageFormat.NV21);
/*这是唯一值,也可以不设置。有些同学可能设置成 PixelFormat 下面的一个值,其实是不对的,具体的可以看官方文档*/
mCamera.setParameters(p);
mCamera.startPreview();
下面是解码核心部分:
@Override
public void onPreviewFrame(byte[] data, Camera camera) {
Size size = camera.getParameters().getPreviewSize();
try{
YuvImage image = new YuvImage(data, ImageFormat.NV21, size.width, size.height, null);
if(image!=null){
ByteArrayOutputStream stream = new ByteArrayOutputStream();
image.compressToJpeg(new Rect(0, 0, size.width, size.height), 80, stream);
Bitmap bmp = BitmapFactory.decodeByteArray(stream.toByteArray(), 0, stream.size());
stream.close();
}
}catch(Exception ex){
Log.e("Sys","Error:"+ex.getMessage());
}
}
代码很简单。就是把YUV数据转成 Bitmap 就行了,系统提供 YuvImage 类。
第二部分:
原理是利用手机的摄像头取景,然后解码视频流
拆分成位图,然后对位图进行处理和识别
要在android手机里面捕获视频流
当然,手机必须得有摄像头
然后嘛,第一步是在AndroidManifest.xml加入如下权限声明
<permission android:name="android.permission.CAMERA"></permission>
<uses-permission android:name="android.permission.CAMERA" />
<uses-feature android:name="android.hardware.camera" />
<uses-feature android:name="android.hardware.camera.autofocus" />
摄像头的预览和捕获只能通过surfaceview..
而且他的工作模式必须是SurfaceHolder.SURFACE_TYPE_PUSH_BUFFERS
不然不能在surfaceview里面显示出预览的图像
然后在surfaceCreated方法里面加入我们的摄像头初始化
public void surfaceCreated(SurfaceHolder arg0) {
//启动相机服务
mCamera = Camera.open();
Log.i("Camera", "surface open");
try {
//设置预览 这个holder是 SurfaceView的getHolder()方法得到的
mCamera.setPreviewDisplay(holder);
Camera.Parameters parameters = mCamera.getParameters();
//设置图片格式
parameters.setPictureFormat(PixelFormat.JPEG);
//设置预览的帧数,受硬件影响.
parameters.setPreviewFrameRate(10);
//设置尺寸
parameters.setPreviewSize(preV.getWidth(), preV.getHeight());
mCamera.setParameters(parameters);
//设置回调的类
mCamera.setPreviewCallback(new ViewCallback(preV, this));
//开始预览
mCamera.startPreview();
} catch (Exception e) {
//释放相机
mCamera.release();
mCamera = null;
return;
}
}
然后看看我们的ViewCallback类
在这个类里面要实现PreviewCallback
主要是里面的 public void onPreviewFrame(byte[] data, Camera arg1) {}
data就是返回的数据流了, 不过麻烦的是这个流并不是rgb编码的,是YUV420SP编码的,
Camera.Parameters 里面有个setPreviewFormat() 这个虽然可以设置 但是具体能不能编码成JPEG是受你的手机影响的
老老实实得解码吧...网上关于YUV420SP编码的内容相当相当少..
static public void decodeYUV420SP(byte[] rgbBuf, byte[] yuv420sp, int width, int height) {
final int frameSize = width * height;
if (rgbBuf == null)
throw new NullPointerException("buffer 'rgbBuf' is null");
if (rgbBuf.length < frameSize * 3)
throw new IllegalArgumentException("buffer 'rgbBuf' size "
+ rgbBuf.length + " < minimum " + frameSize * 3);
if (yuv420sp == null)
throw new NullPointerException("buffer 'yuv420sp' is null");
if (yuv420sp.length < frameSize * 3 / 2)
throw new IllegalArgumentException("buffer 'yuv420sp' size " + yuv420sp.length
+ " < minimum " + frameSize * 3 / 2);
int i = 0, y = 0;
int uvp = 0, u = 0, v = 0;
int y1192 = 0, r = 0, g = 0, b = 0;
for (int j = 0, yp = 0; j < height; j++) {
uvp = frameSize + (j >> 1) * width;
u = 0;
v = 0;
for (i = 0; i < width; i++, yp++) {
y = (0xff & ((int) yuv420sp[yp])) - 16;
if (y < 0) y = 0;
if ((i & 1) == 0) {
v = (0xff & yuv420sp[uvp++]) - 128;
u = (0xff & yuv420sp[uvp++]) - 128;
}
y1192 = 1192 * y;
r = (y1192 + 1634 * v);
g = (y1192 - 833 * v - 400 * u);
b = (y1192 + 2066 * u);
if (r < 0) r = 0; else if (r > 262143) r = 262143;
if (g < 0) g = 0; else if (g > 262143) g = 262143;
if (b < 0) b = 0; else if (b > 262143) b = 262143;
rgbBuf[yp * 3] = (byte)(r >> 10);
rgbBuf[yp * 3 + 1] = (byte)(g >> 10);
rgbBuf[yp * 3 + 2] = (byte)(b >> 10);
}
}
}
具体怎么实现的我就不是很清楚了..好像是灰度在前面 然后把蓝色和青色混合成一个变量跟在后面..
但是呢.这个方法效率很低..特别是些cpu差的机器
可以数数..每次都是横向*纵向 算法复杂度挺高的..
然后我把他压缩了10倍..就是每隔10个点取一次,效率瞬间就上来了.
现在运行你的程序, 你可能会发现摄像头的样子很奇怪。
其实是因为屏幕方向的问题
把你的屏幕设置为永久横向即可
this.setRequestedOrientation(ActivityInfo.SCREEN_ORIENTATION_LANDSCAPE);
//覆盖屏幕 不显示通知栏
this.requestWindowFeature(Window.FEATURE_NO_TITLE);
getWindow().setFlags(WindowManager.LayoutParams.TYPE_STATUS_BAR, WindowManager.LayoutPar
分享到:
相关推荐
自己封装的一个工具jar包,可以打开Android的相机进行预览,并且展示预览的控件也自定义了,api调用规则非常简单,有个缺点不能更换前后摄像头,不过可以自行的选择打开前置还是后置。
"h5获取摄像头数据,并实时预览"这个话题是关于如何利用H5的媒体API来访问用户设备的摄像头,捕获视频流并实现实时预览。这个功能不仅适用于网页,而且在小程序和内嵌于WebView的应用中也非常常见。以下是对这一技术...
该资源是一个针对Android开发的学习项目,具体是实现将PC机的摄像头数据实时同步到Android手机上的功能。这个项目对于理解Android应用开发、网络通信以及多媒体处理等知识点具有很高的价值,尤其适合计算机专业的...
OpenCV提供了丰富的接口用于获取摄像头数据,并可以进行预处理,如图像裁剪、旋转、色彩空间转换等。 2. **数据编码与传输**:捕获的视频流需要编码成适合网络传输的格式,如H.264或MPEG-4。这个过程可能需要使用...
- 流处理:将摄像头数据转换为可以显示或处理的格式,可能需要解码和帧同步。 7. **挑战与注意事项**: - 兼容性:不同品牌的USB摄像头可能遵循不同的UVC子类和协议,可能导致兼容性问题。 - 性能优化:处理视频...
本篇文章将深入探讨如何利用Android的MediaCodec API来从摄像头采集图像并进行硬件编码,以及如何通过FFmpeg实现软件编码。我们还将讨论`MainActivity.java`文件中可能涉及的关键代码段。 首先,Android的...
在Android平台上,USB摄像头的使用是一项重要功能,尤其对于开发者来说,能够支持不同的视频格式如YUYV和MJPEG是至关重要的。本文将详细探讨如何在Android设备上实现USB摄像头的支持,以及这两种视频格式的工作原理...
// 获取摄像头 Camera.Parameters parameters = camera.getParameters(); // 获取参数 // 设置参数,如预览尺寸、格式等 camera.setDisplayOrientation(90); // 旋转预览图像 camera.setPreviewDisplay(holder); //...
1. 首先,需要获取摄像头采集的视频流数据,可以使用Android的Camera API来实现。 2. 然后,需要将视频流数据传递给MediaCodec,MediaCodec会将其编码为h264格式。 3. 在编码过程中,可以使用MediaCodec提供的各种...
在Android开发中,实时预览摄像头并进行图像处理是一项常见的需求,例如用于人脸识别、滤镜效果等场景。本文将深入探讨如何使用SurfaceView来实现这一功能,并通过在每一帧上绘制浮层展示处理结果。 首先,`...
在Android上集成FFmpeg,可以实现从摄像头捕获视频数据,再通过RTMP协议推送到流媒体服务器,从而实现视频直播。 首先,你需要将FFmpeg库编译为适用于Android的版本。这通常涉及交叉编译过程,需要设置Android NDK...
本文还提供了 CamCap 程序的实现细节,包括获取摄像头数据,手动绘制图像,随时开启/关闭预览,随时保存当前摄像头图像等功能。这些功能都可以帮助开发者更好地控制摄像头和数据处理。 本文提供了 Android Camera2 ...
这个应用可能包含了初始化USB设备、选择摄像头、打开数据流、处理视频帧以及显示图像等功能的代码。分析和理解这个示例应用的源码,可以帮助开发者快速理解和实现自己的USB摄像头应用。 综上所述,"Android驱动USB...
要实现摄像头预览,我们需要先获取摄像头权限。在AndroidManifest.xml中添加以下权限: ```xml <uses-permission android:name="android.permission.CAMERA" /> ``` 然后,创建一个TextureView实例并将其绑定到...
总的来说,使用OpenCV在Android上处理摄像头数据涉及到库的集成、初始化、创建预览视图以及处理每一帧的图像。这需要对Android开发和OpenCV的基本概念有深入的理解。通过不断地实践和学习,你将能够熟练地在Android...
在这里,我们将摄像头捕获的每一帧转换为H264编码的数据,以减少视频文件的大小,同时保持良好的画质。实现这一过程通常需要使用MediaCodec,它是Android提供的硬件加速编码和解码的API。我们需要配置MediaCodec为...
4. **预览并获取当前帧**:获取当前帧数据通常涉及使用Surface或SurfaceView进行预览,同时通过回调函数(如Camera2中的ImageReader)捕获每一帧的YUV或JPEG数据。这需要处理图像缓冲区管理,确保同步和高效的数据...
- **Camera初始化**:获取摄像头权限,选择合适的摄像头(前后置),设置分辨率、帧率等参数。 - **预览流处理**:通过SurfaceHolder回调,将摄像头预览流显示在界面上。这部分可能涉及到OpenGL ES进行图像处理,...
在Android中,使用SurfaceView来显示摄像头数据是常见的做法,因为它能提供低延迟的帧渲染,这对于实时视频流很重要。 3. **网络通信**: 为了让Android手机接收PC摄像头的数据,我们需要实现网络通信。可能使用的...
本项目“Camera2GetPreview”旨在通过实例来展示如何在Android应用中使用Camera2 API获取并处理相机的预览帧。 一、Camera2 API基础 Camera2 API由多个组件构成,包括CameraManager、CameraDevice、CaptureRequest...