android6.0源码分析之cameraapi2.0下的capture流程分析

古冥 古冥     2023-02-26     199

关键词:

前面对Camera2的初始化以及预览的相关流程进行了详细分析,本文将会对Camera2的capture(拍照)流程进行分析。

Camera2相关文章的目录如下:
android6.0源码分析之Camera API2.0简介
android6.0源码分析之Camera2 HAL分析
android6.0源码分析之Camera API2.0下的初始化流程分析
android6.0源码分析之Camera API2.0下的Preview(预览)流程分析
android6.0源码分析之Camera API2.0下的Capture流程分析
android6.0源码分析之Camera API2.0下的video流程分析
Camera API2.0的应用


前面分析preview的时候,当预览成功后,会使能ShutterButton,即可以进行拍照,定位到ShutterButton的监听事件为onShutterButtonClick方法:

//CaptureModule.java
@Override
public void onShutterButtonClick() 
    //Camera未打开
    if (mCamera == null) 
        return;
    

    int countDownDuration = mSettingsManager.getInteger(SettingsManager
        .SCOPE_GLOBAL,Keys.KEY_COUNTDOWN_DURATION);
    if (countDownDuration > 0) 
        // 开始倒计时
        mAppController.getCameraAppUI().transitionToCancel();
        mAppController.getCameraAppUI().hideModeOptions();
        mUI.setCountdownFinishedListener(this);
        mUI.startCountdown(countDownDuration);
        // Will take picture later via listener callback.
     else 
        //即刻拍照
        takePictureNow();
    

首先,读取Camera的配置,判断配置是否需要延时拍照,此处分析不需延时的情况,即调用takePictureNow方法:

//CaptureModule.java
private void takePictureNow() 
    if (mCamera == null) 
        Log.i(TAG, "Not taking picture since Camera is closed.");
        return;
    
    //创建Capture会话并开启会话
    CaptureSession session = createAndStartCaptureSession();
    //获取Camera的方向
    int orientation = mAppController.getOrientationManager()
        .getDeviceOrientation().getDegrees();
    //初始化图片参数
    PhotoCaptureParameters params = new PhotoCaptureParameters(
            session.getTitle(), orientation, session.getLocation(),
            mContext.getExternalCacheDir(), this, mPictureSaverCallback,
            mHeadingSensor.getCurrentHeading(), mZoomValue, 0);
    //装配Session
    decorateSessionAtCaptureTime(session);
    //拍照
    mCamera.takePicture(params, session);

它首先调用createAndStartCaptureSession来创建一个CaptureSession并且启动会话,这里并且会进行初始参数的设置,譬如设置CaptureModule(此处实参为this)为图片处理的回调(后面再分析):

//CaptureModule.java
private CaptureSession createAndStartCaptureSession() 
    //获取会话时间
    long sessionTime = getSessionTime();
    //当前位置
    Location location = mLocationManager.getCurrentLocation();
    //设置picture name
    String title = CameraUtil.instance().createJpegName(sessionTime);
    //创建会话
    CaptureSession session = getServices().getCaptureSessionManager()
           .createNewSession(title, sessionTime, location);
    //开启会话
    session.startEmpty(new CaptureStats(mHdrPlusEnabled),new Size(
        (int) mPreviewArea.width(), (int) mPreviewArea.height()));
    return session;

首先,获取会话的相关参数,包括会话时间,拍照的照片名字以及位置信息等,然后调用Session管理来创建CaptureSession,最后将此CaptureSession启动。到这里,会话就创建并启动了,所以接着分析上面的拍照流程,它会调用OneCameraImpl的takePicture方法来进行拍照:

//OneCameraImpl.java
@Override
public void takePicture(final PhotoCaptureParameters params, final CaptureSession session) 
    ...
    // 除非拍照已经返回,否则就广播一个未准备好状态的广播,即等待本次拍照结束
    broadcastReadyState(false);
    //创建一个线程
    mTakePictureRunnable = new Runnable() 
        @Override
        public void run() 
            //拍照
            takePictureNow(params, session);
        
    ;
    //设置回调,此回调后面将分析,它其实就是CaptureModule,它实现了PictureCallback
    mLastPictureCallback = params.callback;
    mTakePictureStartMillis = SystemClock.uptimeMillis();

    //如果需要自动聚焦
    if (mLastResultAFState == AutoFocusState.ACTIVE_SCAN) 
        mTakePictureWhenLensIsStopped = true;
     else 
        //拍照
        takePictureNow(params, session);
    

在拍照里,首先广播一个未准备好的状态广播,然后进行拍照的回调设置,并且判断是否有自动聚焦,如果是则将mTakePictureWhenLensIsStopped 设为ture,即即刻拍照被停止了,否则则调用OneCameraImpl的takePictureNow方法来发起拍照请求:

//OneCameraImpl.java
public void takePictureNow(PhotoCaptureParameters params, CaptureSession 
        session) 
    long dt = SystemClock.uptimeMillis() - mTakePictureStartMillis;
    try 
        // 构造JPEG图片拍照的请求
        CaptureRequest.Builder builder = mDevice.createCaptureRequest(
            CameraDevice.TEMPLATE_STILL_CAPTURE);
        builder.setTag(RequestTag.CAPTURE);
        addBaselineCaptureKeysToRequest(builder);

        // Enable lens-shading correction for even better DNGs.
        if (sCaptureImageFormat == ImageFormat.RAW_SENSOR) 
            builder.set(CaptureRequest.STATISTICS_LENS_SHADING_MAP_MODE,
                CaptureRequest.STATISTICS_LENS_SHADING_MAP_MODE_ON);
         else if (sCaptureImageFormat == ImageFormat.JPEG) 
            builder.set(CaptureRequest.JPEG_QUALITY, JPEG_QUALITY);
                .getJpegRotation(params.orientation, mCharacteristics));
        
        //用于preview的控件
        builder.addTarget(mPreviewSurface);
        //用于图片显示的控件
        builder.addTarget(mCaptureImageReader.getSurface());
        CaptureRequest request = builder.build();

        if (DEBUG_WRITE_CAPTURE_DATA) 
            final String debugDataDir = makeDebugDir(params.debugDataFolder,
                        "normal_capture_debug");
            Log.i(TAG, "Writing capture data to: " + debugDataDir);
            CaptureDataSerializer.toFile("Normal Capture", request, 
                new File(debugDataDir,"capture.txt"));
        
        //拍照,mCaptureCallback为回调
        mCaptureSession.capture(request, mCaptureCallback, mCameraHandler);
     catch (CameraAccessException e) 
        Log.e(TAG, "Could not access camera for still image capture.");
        broadcastReadyState(true);
        params.callback.onPictureTakingFailed();
        return;
    
    synchronized (mCaptureQueue) 
        mCaptureQueue.add(new InFlightCapture(params, session));
    

与preview类似,都是通过CaptureRequest来与Camera进行通信的,通过session的capture来进行拍照,并设置拍照的回调函数为mCaptureCallback:

//CameraCaptureSessionImpl.java
@Override
public synchronized int capture(CaptureRequest request,CaptureCallback callback,Handler handler)throws CameraAccessException
    ...
    handler = checkHandler(handler,callback);
    return addPendingSequence(mDeviceImpl.capture(request,createCaptureCallbackProxy(
        handler,callback),mDeviceHandler));

代码与preview中的类似,都是将请求加入到待处理的请求集,现在看CaptureCallback回调:

//OneCameraImpl.java
private final CameraCaptureSession.CaptureCallback mCaptureCallback = new CameraCaptureSession.CaptureCallback()
    @Override
    public void onCaptureStarted(CameraCaptureSession session,CaptureRequest request,long 
            timestamp,long frameNumber)
     //与preview类似
        if(request.getTag() == RequestTag.CAPTURE&&mLastPictureCallback!=null)
            mLastPictureCallback.onQuickExpose();
        
    
    ...
    @Override
    public void onCaptureCompleted(CameraCaptureSession session,CaptureRequest request
            ,TotalCaptureResult result)
        autofocusStateChangeDispatcher(result);
        if(result.get(CaptureResult.CONTROL_AF_STATE) == null)
       //检查自动聚焦的状态
            AutoFocusHelper.checkControlAfState(result);
        
        ...
        if(request.getTag() == RequestTag.CAPTURE)
            synchronized(mCaptureQueue)
                if(mCaptureQueue.getFirst().setCaptureResult(result).isCaptureComplete())
                    capture = mCaptureQueue.removeFirst();
                
            
            if(capture != null)
         //拍照结束
                OneCameraImpl.this.onCaptureCompleted(capture);
            
        
        super.onCaptureCompleted(session,request,result);
    
    ...

这是Native层在处理请求时,会调用相应的回调,如capture开始时,会回调onCaptureStarted,具体的在preview中有过分析,当拍照结束时,会回调onCaptureCompleted方法,其中会根据CaptureResult来检查自动聚焦的状态,并通过TAG判断其是Capture动作时,再来看它是否是队列中的第一个请求,如果是,则将请求移除,因为请求已经处理成功,最后再调用OneCameraImpl的onCaptureCompleted方法来进行处理:

//OneCameraImpl.java
private void onCaptureCompleted(InFlightCapture capture)
    if(isCaptureImageFormat == ImageFormat.RAW_SENSOR)
        ...
        File dngFile = new File(RAW_DIRECTORY,capture.session.getTitle()+".dng");
        writeDngBytesAndClose(capture.image,capture.totalCaptureResult,mCharacteristics,dngFile);
    else
        //解析result中的图片数据
        byte[] imageBytes = acquireJpegBytesAndClose(capture.image);
        //保存Jpeg图片
        saveJpegPicture(imageBytes,capture.parameters,capture.session,capture.totalCaptureResult);
    
    broadcastReadyState(true);
    //调用回调
    capture.parameters.callback.onPictureTaken(capture.session);

如代码所示,首先,对result中的图片数据进行了解析,然后调用saveJpegPicture方法将解析得到的图片数据进行保存,最后再调用里面的回调(即CaptureModule,前面在初始化Parameters时说明了,它实现了PictureCallbak接口)的onPictureTaken方法,所以,接下来先分析saveJpegPicture方法:

//OneCameraImpl.java
private void saveJpegPicture(byte[] jpegData,final PhotoCaptureParameters captureParams,CaptureSession session,CaptureResult result)
    ...
    ListenableFuture<Optional<Uri>> futureUri = session.saveAndFinish(jpegData,width,
            height,rotation,exif);
    Futures.addCallback(futureUri,new FutureCallback<Optional<Uri>>()
        @Override
        public void onSuccess(Optional<Uri> uriOptional)
            captureParams.callback.onPictureSaved(mOptional.orNull());
        

        @Override
        public void onFailure(Throwable throwable)
            captureParams.callback.onPictureSaved(null);
        
    );

它最后会回调onPictureSaved方法来对图片进行保存,所以需要分析CaptureModule的onPictureSaved方法:

//CaptureModule.java
@Override
public void onPictureSaved(Uri uri)
    mAppController.notifyNewMedia(uri);

mAppController的实现为CameraActivity,所以分析notifyNewMedia方法:

//CameraActivity.java
@Override
public void notifyNewMedia(Uri uri)
    ...
    if(FilmstripItemUtils.isMimeTypeVideo(mimeType))
    //如果拍摄的是video
        sendBroadcast(new Intent(CameraUtil.ACTION_NEW_VIDEO,uri));
        newData = mVideoItemFactory.queryContentUri(uri);
        ...
    else if(FilmstripItemUtils.isMimeTypeImage(mimeType))
    //如果是拍摄图片
        CameraUtil.broadcastNewPicture(mAppContext,uri);
        newData = mPhotoItemFactory.queryCotentUri(uri);
        ...
    else
        return;
    
    new AsyncTask<FilmstripItem,Void,FilmstripItem>()
        @Override
        protected FilmstripItem doInBackground(FilmstripItem... Params)
            FilmstripItem data = params[0];
            MetadataLoader.loadMetadata(getAndroidContet(),data);
            return data;
        
        ...
    

由代码可知,这里有两种数据的处理,一种是video,另一种是image。而我们这里分析的是capture图片数据,所以首先会根据在回调函数传入的参数Uri和PhotoItemFactory来查询到相应的拍照数据,然后再开启一个异步的Task来对此数据进行处理,即通过MetadataLoader的loadMetadata来加载数据,并返回。至此,capture的流程就基本分析结束了,下面将给出capture流程的整个过程中的时序图:


cameraapi2.0的应用

android6.0源码分析之CameraAPI2.0简介android6.0源码分析之Camera2HAL分析android6.0源码分析之CameraAPI2.0下的初始化流程分析android6.0源码分析之CameraAPI2.0下的Preview(预览)流程分析android6.0源码分析之CameraAPI2.0下的Capture流程分析android6.0源码分... 查看详情

cameraapi2.0的应用

android6.0源码分析之CameraAPI2.0简介android6.0源码分析之Camera2HAL分析android6.0源码分析之CameraAPI2.0下的初始化流程分析android6.0源码分析之CameraAPI2.0下的Preview(预览)流程分析android6.0源码分析之CameraAPI2.0下的Capture流程分析android6.0源码分... 查看详情

android6.0源码分析之cameraapi2.0下的preview(预览)流程分析

本文将基于android6.0的源码,对CameraAPI2.0下Camera的preview的流程进行分析。在文章android6.0源码分析之CameraAPI2.0下的初始化流程分析中,已经对Camera2内置应用的Open即初始化流程进行了详细的分析,而在open过程中,定... 查看详情

android6.0源码分析之cameraapi2.0下的preview(预览)流程分析

本文将基于android6.0的源码,对CameraAPI2.0下Camera的preview的流程进行分析。在文章android6.0源码分析之CameraAPI2.0下的初始化流程分析中,已经对Camera2内置应用的Open即初始化流程进行了详细的分析,而在open过程中,定... 查看详情

android6.0源码分析之cameraapi2.0下的capture流程分析

...析。Camera2相关文章的目录如下:android6.0源码分析之CameraAPI2.0简介android6.0源码分析之Camera2HAL分析android6.0源码分析之CameraAPI2.0下的初始化流程分析android6.0源码分析之 查看详情

android6.0源码分析之cameraapi2.0下的capture流程分析

...析。Camera2相关文章的目录如下:android6.0源码分析之CameraAPI2.0简介android6.0源码分析之Camera2HAL分析android6.0源码分析之CameraAPI2.0下的初始化流程分析android6.0源码分析之CameraAPI2.0下的Preview(预览)流程分析android6.0源码分析之CameraAPI... 查看详情

android6.0源码分析之cameraapi2.0下的初始化流程分析

在文章android源码分析之CameraAPI2.0简介中,对CameraAPI2.0的框架以及代码做了简单介绍,本文将基于android6.0源码,分析CameraAPI2.0下的Camera2内置应用中,对Camera的初始化的流程分析,主要涉及CameraHAL3.0,Java层... 查看详情

android6.0源码分析之camera2hal分析

在上一篇文章对CameraAPI2.0的框架进行了简单的介绍,其中CameraHAL屏蔽了底层的实现细节,并且为上层提供了相应的接口,具体的HAL的原理,个人觉得老罗的文章Android硬件抽象层(HAL)概要介绍和学习计划... 查看详情

android6.0源码分析之cameraapi2.0简介

前面几篇主要分析的是androidCameraAPI1.0的架构以及初始化流程,而google在android5.0(Lollipop)开始对Camera的架构进行了调整,为了适应HAL3,新添加实现了CameraDeviceClient,而CameraAPI1.0已经被deprecated(即可能在更新的版本里... 查看详情

android6.0源码分析之camera2hal分析

在上一篇文章对CameraAPI2.0的框架进行了简单的介绍,其中CameraHAL屏蔽了底层的实现细节,并且为上层提供了相应的接口,具体的HAL的原理,个人觉得老罗的文章Android硬件抽象层(HAL)概要介绍和学习计划... 查看详情

android6.0源码分析之蓝牙框架简介

待续 查看详情

android6.0源码分析之蓝牙框架简介

待续 查看详情

android6.0源码分析之ams服务源码分析

activitymanagerservice服务源码分析1、ActivityManagerService概述ActivityManagerService(以下简称AMS)作为android中最核心的服务,主要负责系统的四大组件的启动、切换、调度以及应用进程的管理和调度等工作。它类似于操作系统中的进程管... 查看详情

android6.0源码分析之zygote进程分析

在android6.0源码分析之Runtime的初始化一文中,对Zygote进程的初期的Runtime初始化过程进行了分析,在Runtime启动结束后,会对Zygote进程进行初始化,其它Java进程都需要从Zygote进程来fork,而Zygote的初始化是从ZygoteIn... 查看详情

android6.0源码分析之录音功能(代码片段)

从现在开始一周时间研究录音,下周出来一个完整的博客,监督,激励!!!2017-02-09--------2017-02-17------------------------------------------------------------------------------------------------ 查看详情

android6.0源码分析之activity启动过程

Activity最为android开发者最熟悉的组件,由ActivityManagerService服务进行调度管理,而ActivityManagerService的启动过程在activitymanagerservice服务源码分析一文中进行了详细分析,本文基于其对Activity的启动过程进行分析,同... 查看详情

android6.0源码分析之runtime的初始化

android源码分析之Runtime的初始化android运行时作为android架构的一部分,起着非常重要的作用,它和核心库(CoreLibraries)组成了Android运行时库层。本文将依据android源码对AndroidRuntime(android运行时)的建立过程进行分析。1、Android... 查看详情

android6.0源码分析之蓝牙显示接收到的文件(代码片段)

在蓝牙界面有个menu:显示接收到的文件。本文分析显示接收到的文件chapterone---显示接收到的文件/android/packages/apps/Settings/src/com/android/settings/bluetooth/文件夹下的BluetoothSettings.java开始分析caseMENU_ID_SHOW_RECEIVED:MetricsLogger.a 查看详情