「OpenGL」未来视觉1-Android摄像头采集基础

相信很多人都用过相机功能，也开发过简单调度相机功能，但是相机采集功能。是图像信号输入的重要来源。

SurfaceView和View的不同之处：

 

SurfaceView和View对比

相机图像采样，需要维持一个比较稳定的帧数来维持图像实时性，需要频繁刷新，创建一个子线程来进行画面更新，会被占用主线程效率好很多，而且双缓冲机制可以在画面从前台刷新到后台时才占用主线程操作，所以选用SurfaceView作绘制是最好的。
而GLSurfaceView是SurfaceView的一个子类，专用于openGL绘制，其运行效率远高于SurfaceView是因为使用了GPU参与绘制。
这一节介绍Android摄像头采样，还是采用了SurfaceView来做采样
1.需要申请相机权限。

 <uses-permission android:name="android.permission.CAMERA" /> 

2.打开摄像头，先检查摄像和前置摄像头，然后通过摄像头Id，来返回摄像头对象。

 fun openCamera(cameraId:Int):Camera?{ if (!haveFeature(PackageManager.FEATURE_CAMERA)){ Log.e(TAG,"no camera!") return null } if (cameraId == Camera.CameraInfo.CAMERA_FACING_FRONT && !haveFeature(PackageManager.FEATURE_CAMERA_FRONT)){ Log.e(TAG,"no front camera!") return null } val camera = Camera.open(cameraId) if (camera == null){ Log.e(TAG, "openCamera failed") return null } return camera } 

3.设置画面比例

/** * 获取最大的图片大小 */ fun getLargePictureSize(camera: Camera?): Camera.Size? { if (camera != null) { //获取可选比例 val sizes = camera.parameters.supportedPictureSizes var temp: Camera.Size = sizes[0] for (i in 1 until sizes.size) { val scale = sizes[i].height.toFloat() / sizes[i].width if (temp.width < sizes[i].width && scale < 0.6f && scale > 0.5f) temp = sizes[i] } return temp } return null } /** * 获取最大的预览大小 */ fun getLargePreviewSize(camera: Camera?): Camera.Size? { if (camera != null) { //获取可选比例 val sizes = camera.parameters.supportedPreviewSizes var temp: Camera.Size = sizes[0] for (i in 1 until sizes.size) { if (temp.width < sizes[i].width) temp = sizes[i] } return temp } return null } /** * 相机采样参数大小 */ fun setOptimalSize(camera:Camera,aspectRatio:Float,maxWidth:Int,maxHeight:Int){ val parameters= camera.parameters //使用自动对焦 if (parameters.supportedFocusModes.contains( Camera.Parameters.FOCUS_MODE_CONTINUOUS_PICTURE)) { parameters.focusMode = Camera.Parameters.FOCUS_MODE_CONTINUOUS_PICTURE } val size = getLargePreviewSize(camera) size?.let { //设置相机预览大小 parameters.setPreviewSize(it.width,it.height) Log.d(TAG, "input max: (" + maxWidth + ", " + maxHeight + "), output size: (" + it.width + ", " + it.height + ")") } val pictureSize = getLargePictureSize(camera) pictureSize?.let { //图片参数 parameters.setPictureSize(it.width,it.height) Log.d(TAG, "picture max: (" + maxWidth + ", " + maxHeight + "), output size: (" + it.width + ", " + it.height + ")") } camera.parameters = parameters } 

3.设置相机图像角度

fun setDisplayOritation(activity: Activity, camera: Camera, cameraId: Int) { //获取window的角度 val rotation = activity.windowManager.defaultDisplay.rotation var degress = 0 when (rotation) { Surface.ROTATION_0 -> degress = 0 Surface.ROTATION_90 -> degress = 90 Surface.ROTATION_180 -> degress = 180 Surface.ROTATION_270 -> degress = 270 } val info = Camera.CameraInfo() Camera.getCameraInfo(cameraId, info) var result: Int //前置摄像头 if (info.facing == Camera.CameraInfo.CAMERA_FACING_FRONT) { result = (info.orientation + degress) % 360 result = (360 - result) % 360 // compensate the mirror } else {//后置摄像头 result = (info.orientation - degress + 360) % 360 // back-facing } Log.d(TAG, "window rotation: $degress, camera oritation: $result") camera.setDisplayOrientation(result) } 

4.设置完摄像头参数后，需要设置一个SurfaceHolder.CallBack。
有三个必须的方法

 //创建时调用 override fun surfaceCreated(holder: SurfaceHolder?) { } //当surface发生任何结构性的变化时（格式或者大小），该方法就会被立即调用。 override fun surfaceChanged(holder: SurfaceHolder?, format: Int, width: Int, height: Int) { } //被移除时调用 override fun surfaceDestroyed(holder: SurfaceHolder?) {} 

这里创建相机的调用surfaceCreated，之后会立刻调用一次surfaceChanged
这里在surfaceChanged上调用openGL的init操作

 fun initOpenGL(surface: Surface, width: Int, height: Int){ //新开一个之后一个线程的线程池 mExecutor.execute { //获取纹理id val textureId = OpenGLJniLib.magicBaseInit(surface,width,height,BaseApplication.context.assets) if (textureId < 0){ Log.e(TAG, "surfaceCreated init OpenGL ES failed!") return@execute } //需要使用surfaceTexture来做纹理装载 mSurfaceTexture = SurfaceTexture(textureId) //添加纹理变化回调 mSurfaceTexture?.setOnFrameAvailableListener { drawOpenGL() } try { //把摄像头采样关联到纹理 mCamera?.setPreviewTexture(mSurfaceTexture) //开始摄像头采样 doStartPreview() }catch (e:IOException){ Log.e(TAG,e.localizedMessage) releaseOpenGL() } } } 

5.开始预览，并开始自动对焦。

 fun doStartPreview(){ mCamera?.startPreview() cameraFocus(width/2.0f,height/2.0f) } 

6.opengl绘制，先要强制更新纹理图像，再更新获取纹理矩阵，然后让opengl绘制

 fun drawOpenGL(){ mExecutor.execute { mSurfaceTexture?.updateTexImage() mSurfaceTexture?.getTransformMatrix(mMatrix) OpenGLJniLib.magicBaseDraw(mMatrix) } } 

7.在destroySurfaceView的是否释放资源

 fun releaseOpenGL(){ mExecutor.execute { mSurfaceTexture?.release() mSurfaceTexture=null OpenGLJniLib.magicBaseRelease() } } 

介绍了Camera采样配置和，surfaceTexture纹理获取了和加载，下一节，将会介绍native层的opengl绘制代码。

Android摄像头采集基础介绍就到这。这里做一个小小推广。有需要Android系统技术进阶资料可加群；964557053 免费领取