Android開發:實時處理攝像頭預覽幀視頻——淺析PreviewCallback,onPreviewFrame,AsyncTask的綜合應用

很多時候,android攝像頭模塊不僅預覽,拍照這麼簡單,而是需要在預覽視頻的時候,能夠做出一些檢測,比如最常見的人臉檢測。在未按下拍照按鈕前,就檢測出人臉然後矩形框標示出來,再按拍照。那麼如何獲得預覽幀視頻麼?

隻需要在Activity裡繼承PreviewCallback這個接口就行瞭。示例如下:

public class RectPhoto extends Activity implements SurfaceHolder.Callback, PreviewCallback{}。(註意這個SurfaceHolder.Callback是用來預覽攝像頭視頻,參見我的前貼)。

繼承這個方法後,會自動重載這個函數:public void onPreviewFrame(byte[] data, Camera camera) {}這個函數裡的data就是實時預覽幀視頻。一旦程序調用PreviewCallback接口,就會自動調用onPreviewFrame這個函數。調用PreviewCallback的方法有三種,可以參考這裡,總共有三種方式調用這個回調。所謂回調就是當條件滿足時,自動觸發調用這個函數。分別是:.setPreviewCallback, setOneShotPreviewCallback, setPreviewCallbackWithBuffer, 我一般是使用第二種方式。

       這裡解釋下,如果Activity繼承瞭PreviewCallback這個接口,隻需                Camera.setOneShotPreviewCallback(this);就可以瞭。程序會自動調用主類Activity裡的onPreviewFrame函數。如果Camera.setOneShotPreviewCallback()這個函數是在主類Activity裡的內部類如class A裡面,裡面的參數應寫為Camera.setOneShotPreviewCallback(YourActivity.this)。當然這裡,也可以定義一個變量,如Camera.PreviewCallback mPreviewCallback,在調用的時候用Camera.setOneShotPreviewCallback(mPreviewCallback)來完成。相信很多人都熟悉這點,就不羅嗦瞭。

      按理說隻要在onPreviewFrame()這個函數裡寫你的處理程序就可以瞭。當通常不這麼做,因為處理實時預覽幀視頻的算法可能比較復雜,這就需要借助AsyncTask開啟一個線程在後臺處理數據。這裡假設我們定義一個FaceTask來進行人臉檢測,可以這樣寫:

    /*自定義的FaceTask類,開啟一個線程分析數據*/

    private class FaceTask extends AsyncTask<Void, Void, Void>{

 

        private byte[] mData;

        //構造函數

        PalmTask(byte[] data){

            this.mData = data;

        }

        

        @Override

        protected Void doInBackground(Void… params) {

            // TODO Auto-generated method stub

            Size size = myCamera.getParameters().getPreviewSize(); //獲取預覽大小

            final int w = size.width;  //寬度

            final int h = size.height;

            final YuvImage image = new YuvImage(mData, ImageFormat.NV21, w, h, null);

            ByteArrayOutputStream os = new ByteArrayOutputStream(mData.length);

            if(!image.compressToJpeg(new Rect(0, 0, w, h), 100, os)){

                return null;

            }

            byte[] tmp = os.toByteArray();

            Bitmap bmp = BitmapFactory.decodeByteArray(tmp, 0,tmp.length); 

            doSomethingNeeded(bmp);   //自己定義的實時分析預覽幀視頻的算法

          return null;

        }

        

    }   

註意上面的bmp就是Bitmap格式的實時預覽幀數據。doSomethingNeeded(bmp) 就是你要對預覽幀視頻進行的處理,可以是檢測人臉或其他,如分析有無火災。或者是進行傳輸。  另外,這裡是通過YuvImage和ImageFormat.NV21來解析數據的。在華為u9200上,android4.0.3的系統運行良好。不同手機上支持的格式可能有所不同。網上也有自己寫算法進行轉化的,需要的可以自己找,但這裡如果支持這個格式就不用自己寫轉換算法瞭。 

     onPreviewFrame()裡可以這樣寫:

     /*獲取預覽幀視頻*/

    public void onPreviewFrame(byte[] data, Camera camera) {

        // TODO Auto-generated method stub

        if(null != mFaceTask){

            switch(mFaceTask.getStatus()){

            case RUNNING:

                return;

            case PENDING:

                mFaceTask.cancel(false);

                break;

            }

        }

        mFaceTask = new PalmTask(data);

        mFaceTask.execute((Void)null);

        

    }

    上面的mFaceTask是一個全局變量。通過onPreviewFrame,AsyncTask的綜合應用,讓復雜的處理算法執行在後臺,也就是doInBackground這裡,是不是比較綠色?

     接下來就是什麼時候觸發onPreviewFrame()這個函數裡,可以是按一個按鍵觸發一次,就在按鍵的監聽裡寫上       myCamera.setOneShotPreviewCallback(RectPhoto.this);便會自動觸發一次。有人說想先聚焦,然後再分析預覽幀。就在onAutofocus裡的回調寫。如下:

        //自動聚焦變量回調

        myAutoFocusCallback = new AutoFocusCallback() {

 

            public void onAutoFocus(boolean success, Camera camera) {

                // TODO Auto-generated method stub

                if(success)//success表示對焦成功

                {

                    Log.i(tag, "myAutoFocusCallback: success…");

                    myCamera.setOneShotPreviewCallback(RectPhoto.this);

                    

 

                }

                else

                {

                    //未對焦成功

                    Log.i(tag, "myAutoFocusCallback: 失敗瞭…");

                  //這裡也可以加上myCamera.autoFocus(myAutoFocusCallback),如果聚焦失敗就再次啟動聚焦。

                }

 

 

            }

        };

     大多數時候,希望程序自動每隔多長時間,自動進行一次檢測預覽幀。這也好辦,實施如下:

[java] 

<span xmlns="https://www.w3.org/1999/xhtml" style="">    class ScanThread implements Runnable{  

  

        public void run() {  

            // TODO Auto-generated method stub  

            while(!Thread.currentThread().isInterrupted()){  

                try {  

                    if(null != myCamera && isPreview)  

                    {      

//myCamera.autoFocus(myAutoFocusCallback);  

                        myCamera.setOneShotPreviewCallback(RectPhoto.this);  

                        Log.i(tag, "setOneShotPreview…");  

                    }  www.aiwalls.com

                    Thread.sleep(1500);  

                } catch (InterruptedException e) {  

                    // TODO Auto-generated catch block  

                    e.printStackTrace();  

                    Thread.currentThread().interrupt();  

                }  

            }  

              

        }  

          

    }</span>  

在onCreate裡new Thread(new ScanThread()).start()開啟掃描線程。如果想手動觸發中止這種掃描活動,可以在ScanThread裡的while循環裡設置標志位,具體可看我以前的博文。

 

    最後提醒的是,如果程序中加入瞭previewCallback,在surfaceDestroy釋放camera的時候,最好執行myCamera.setOneShotPreviewCallback(null); 或者myCamera.setPreviewCallback(null);中止這種回調,然後再釋放camera更安全。否則可能會報錯。

發佈留言

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *