绪论

对于Android移动端的相机调用及数据读取，OpenCV是把原来C++的部分与本地AndroidSDK进行了整合，通过桥接的方式调用Android手机摄像头，最重要的一个类是JavaCameraView，它是OpenCV中调用Android手机摄像头的接口类，支持以代码和XMLView配置的方式使用，可以在Android设备中使用摄像头完成前置与后置摄像头的预览与拍照功能，下面就对这些内容逐一加以说明，并完成代码演示。

因为在Android中使用SD卡、相机卡等本地硬件资源的时候会涉及授权问题，而且Android的低版本与高版本的授权方式有点不一样。这里首先需要说明一下Android在不同版本上的相机授权差别，Android在低版本中是通过向AndroidManifests.xml中添加文本的方式来完成授权的，添加内容如下：

这种方式在Android 6.0以下的版本上使用没有问题，但是在Android 6.0以上的版本中（包括6.0）就会出现问题，原因是Android系统的授权方式改变升级了，所以需要在onCreat中添加如下的代码进行授权：

打开res/layout下面的activity_main.xml布局文件，往布局中添加一个OpenCV的视觉组件JavaCameraView：

打开src目录下面的MainActivity，由于我们的目标是在应用中通过OpenCV的Java API实现打开相机全屏显示，并获取预览框，所以MainActivity需要实现CvCameraViewListener2接口，可以实现三个方法，分别是：onCameraViewStarted、onCameraViewStopped和onCameraFrame，关键的图像处理写在onCameraFrame函数中：

调用API 声明一个JavaCameraView对象，用于存放activity_main.xml中的JavaCameraView组件，并在OnCreate中实现绑定和添加事件监听：

修改public Mat onCameraFrame(CvCameraViewFrame inputFrame)回调函数的内容了，这个函数在相机刷新每一帧都会调用一次，而且每次的输入参数就是当前相机视图信息，我们直接获取其中的RGBA信息作为Mat数据返回给显示组件即可：

以上操作中，我们在OnCreate函数中已经获取到mCVCamera对象，只有调用mCVCamera.enableView()之后，预览组件才会显示每一帧的Mat图像，但是在显示之前我们必须先确保OpenCV的库文件已经加载完成，所以调用此方法需要进行异步处理：

所以只有当mLoaderCallback收到LoaderCallbackInterface.SUCCESS消息的时候，才会打开预览显示，那么这个消息是从哪里发出来的呢，这就需要我们重写Activity的onRusume方法了，因为每次当前Activity激活都会调用此方法，所以可以在此处检测OpenCV的库文件是否加载完毕：

二、横屏与竖屏切换

假设不想让软件在横竖屏之间切换，最简单的办法就是在项目的AndroidManifest.xml中找到你所指定的activity中加上android:screenOrientation属性。

android:screenOrientation设定该活动的方向，该值可以是任何一个下面的字符串：

Android的Camera相关应用开发中，有一个必须搞清楚的知识点，就是Camera的预览方向和拍照方向：

Camera的拍照方向：当你点击拍照按钮，得到的图片方向不一定与画面中预览的方向一致，这是因为拍摄的照片是将图像Sensor采集到的数据直接存储到SDCard上的，因此，Camera的拍照方向与上述的Camera的图像Sensor方向一致。 由此可见，如果横向拿手机拍照，由于正好与Camera的拍照方向一致，因此得到的照片是“正确”的；而竖着拿手机拍照的话，Camera的图像Sensor依然以上面描述的角度在采集图像并存储到SDCard上，所以得到的图片就是右图这样的，因为竖着拿手机正好与图像Sensor的方向相差了90度。由此，大家应该明白了为什么我们用手机拍出的照片经常需要旋转90度才能看到“正确”的画面了吧？

① 首先在onCameraFrame方法中将每帧图像顺时针旋转90°以后再显示，代码如下：

这里我们根据是否是前置摄像头，对帧所对应的矩阵进行旋转，其中后置摄像头需要将矩阵顺时针旋转90°得到竖向的图像，而前置摄像头则需要逆时针旋转90°，同时进行一次镜像翻转才能得到想要的图像。 PS：由于矩阵的乘法不满足交换律，所以此处前置摄像头的旋转与翻转顺序不可更改！！

② 当运行上述代码的时候就会发现PORTRAIT显示模式运行的时候，JavaCameraView没有实现相机预览显示功能，原因是其继承的基类CameraBridgeViewBase的deliverAndDrawFrame方法中有一个缓存图像对象，它的大小与onCameraFrame方法中旋转之后的frame大小不一致，导致无法填充缓冲区，实现绘制，这个时候可以在deliverAndDrawFrame方法中进行手动修改。

请在455行的AllocateCache方法中将 mFrameHeight, mFrameWidth对调成如下：

【注：如果是横屏显示，则不能对调。】

三、前后置摄像头切换

对于大多数的Android移动设备来说都有前置与后置摄像头，JavaCameraView通过setCameraIndex方法根据所输入摄像头的索引值来决定是开启前置还是后置摄像头，具体如下。

在View定义的XML文件中添加如下两个RadioButton对象作为开启前置或者后置摄像头的选项，相关的XML定义如下：

当横屏显示的时候，若使用的是前置摄像头，则需要在返回之前完成图像的镜像变换，否则图像会呈镜像显示。最后在选择前后摄像头、横屏与竖屏相互切换的时候，我们应该在destory方法中禁用JavaCameraView对象，然后在resume方法中再次启用它，不然就会导致切换之后显示不正确。

在onCameraFrame方法中加入

记得修改第455行中的AllocateCache()方法 在onCameraFrame方法中加入

四、拍照和读取相册

参考