多媒體編程

文本、圖片、音頻、視頻

圖片

圖片在計算機中的大小
圖片的總大小 = 圖片的總像素 * 每個像素佔用的大小
單色位圖：只能表示2種顏色
- 使用兩個數字：0和1
- 使用一個長度爲1的二進制數字就可以表示了
- 每個像素佔用1/8個字節
16色位圖：能表示16種顏色
- 需要16個數字：0-15，0000 - 1111
- 使用一個長度爲4的二進制數組就可以表示了
- 每個像素佔用1/2個字節
256色位圖：能表示256種顏色
- 需要256個數字：0 - 255,0000 0000 - 1111 1111
- 使用一個長度爲8的二進制數字
- 每個像素佔用1個字節
24位位圖：
- 每個像素佔用24位，也就是3個字節，所在叫24位位圖
- R：0-255,需要一個長度爲8的二進制數字，佔用1個字節
- G：0-255,需要一個長度爲8的二進制數字，佔用1個字節
- B：0-255,需要一個長度爲8的二進制數字，佔用1個字節

加載大圖片

計算機把圖片所有像素信息全部解析出來，保存至內存
Android保存圖片像素信息，是用ARGB保存
手機屏幕320*480，總像素：153600
圖片寬高2400*3200，總像素7680000
2400 / 320 = 7
3200 / 480 = 6

創建圖片副本

在內存中創建一個圖片的拷貝

保存圖片

SD每次準備的時候，系統其實是遍歷sd卡所有文件，系統會把所有的多媒體文件，都在MediaStore數據庫中生成一個索引，數據庫中保存了文件的文件名、路徑、大小、長度和藝術家
圖庫、音樂、視頻程序每次啓動時，其實不會去遍歷sd卡尋找多媒體文件，而是直接從MediaStore數據庫中讀取多媒體文件，通過庫中的索引找到對應的多媒體文件後，把文件顯示在界面

SurfaceView

雙緩衝技術
重量級組件
只要不可見，就不會創建，可見時，纔會創建
只要不可見，就會銷燬

FFMPEG

開源免費的音視頻編解碼器

Vitamio

封裝了FFMPEG的視頻播放框架
對外提供的api全部都是javaApi

多媒體概念

文字、圖片、音頻、視頻

計算機圖片大小的計算

圖片大小 = 圖片的總像素 * 每個像素佔用的大小

單色圖：每個像素佔用1/8個字節
16色圖：每個像素佔用1/2個字節
256色圖：每個像素佔用1個字節
24位圖：每個像素佔用3個字節

加載大圖片到內存

Android系統以ARGB表示每個像素，所以每個像素佔用4個字節，很容易內存溢出

對圖片進行縮放

獲取屏幕寬高

Display dp = getWindowManager().getDefaultDisplay();
int screenWidth = dp.getWidth();
int screenHeight = dp.getHeight();

獲取圖片寬高

Options opts = new Options();
//請求圖片屬性但不申請內存
opts.inJustDecodeBounds = true;
BitmapFactory.decodeFile("sdcard/dog.jpg", opts);
int imageWidth = opts.outWidth;
int imageHeight = opts.outHeight;

圖片的寬高除以屏幕寬高，算出寬和高的縮放比例，取較大值作爲圖片的縮放比例

int scale = 1;
int scaleX = imageWidth / screenWidth;
int scaleY = imageHeight / screenHeight;
if(scaleX >= scaleY && scaleX > 1){
    scale = scaleX;
}
else if(scaleY > scaleX && scaleY > 1){
    scale = scaleY;
}

按縮放比例加載圖片

//設置縮放比例
opts.inSampleSize = scale;
//爲圖片申請內存
opts.inJustDecodeBounds = false;
Bitmap bm = BitmapFactory.decodeFile("sdcard/dog.jpg", opts);
iv.setImageBitmap(bm);

在內存中創建圖片的副本

直接加載的bitmap對象是隻讀的，無法修改，要修改圖片只能在內存中創建出一個一模一樣的bitmap副本，然後修改副本

    //加載原圖
    Bitmap srcBm = BitmapFactory.decodeFile("sdcard/photo3.jpg");
    iv_src.setImageBitmap(srcBm);

    //創建與原圖大小一致的空白bitmap
    Bitmap copyBm = Bitmap.createBitmap(srcBm.getWidth(), srcBm.getHeight(), srcBm.getConfig());
    //定義畫筆
    Paint paint = new Paint();
    //把紙鋪在畫版上
    Canvas canvas = new Canvas(copyBm);
    //把srcBm的內容繪製在copyBm上
    canvas.drawBitmap(srcBm, new Matrix(), paint);

    iv_copy.setImageBitmap(copyBm);

對圖片進行特效處理

首先定義一個矩陣對象
```
Matrix mt = new Matrix();
```

縮放效果

//x軸縮放1倍，y軸縮放0.5倍
mt.setScale(1, 0.5f);

旋轉效果

//以copyBm.getWidth() / 2, copyBm.getHeight() / 2點爲軸點，順時旋轉30度
mt.setRotate(30, copyBm.getWidth() / 2, copyBm.getHeight() / 2);

平移

//x軸座標+10，y軸座標+20
mt.setTranslate(10, 20);

鏡面

//把X座標都變成負數
mt.setScale(-1, 1);
//圖片整體向右移
mt.postTranslate(copyBm.getWidth(), 0);

倒影

//把Y座標都變成負數
mt.setScale(1, -1);
//圖片整體向下移
mt.postTranslate(0, copyBm.getHeight());

畫畫板

記錄用戶觸摸事件的XY座標，繪製直線 * 給ImageView設置觸摸偵聽，得到用戶的觸摸事件，並獲知用戶觸摸ImageView的座標

    iv.setOnTouchListener(new OnTouchListener() {

        @Override
        public boolean onTouch(View v, MotionEvent event) {
            // TODO Auto-generated method stub
            switch (event.getAction()) {
            //觸摸屏幕
            case MotionEvent.ACTION_DOWN:
                //得到觸摸屏幕時手指的座標
                startX = (int) event.getX();
                startY = (int) event.getY();
                break;
            //在屏幕上滑動
            case MotionEvent.ACTION_MOVE:
                //用戶滑動手指，座標不斷的改變，獲取最新座標
                int newX = (int) event.getX();
                int newY = (int) event.getY();
                //用上次onTouch方法得到的座標和本次得到的座標繪製直線
                canvas.drawLine(startX, startY, newX, newY, paint);
                iv.setImageBitmap(copyBm);
                startX = newX;
                startY = newY;
                break;

            }
            return true;
        }
    });

刷子效果，加粗畫筆
```
paint.setStrokeWidth(8);
```
調色板，改變畫筆顏色
```
paint.setColor(Color.GREEN);
```

保存圖片至SD卡

FileOutputStream fos = null;
try {
    fos = new FileOutputStream(new File("sdcard/dazuo.png"));
} catch (FileNotFoundException e) {
    // TODO Auto-generated catch block
    e.printStackTrace();
}
//保存圖片
copyBm.compress(CompressFormat.PNG, 100, fos);

系統每次收到SD卡就緒廣播時，都會去遍歷sd卡的所有文件和文件夾，把遍歷到的所有多媒體文件都在MediaStore數據庫保存一個索引，這個索引包含多媒體文件的文件名、路徑、大小
圖庫每次打開時，並不會去遍歷sd卡獲取圖片，而是通過內容提供者從MediaStore數據庫中獲取圖片的信息，然後讀取該圖片

系統開機或者點擊加載sd卡按鈕時，系統會發送sd卡就緒廣播，我們也可以手動發送就緒廣播

Intent intent = new Intent();
intent.setAction(Intent.ACTION_MEDIA_MOUNTED);
intent.setData(Uri.fromFile(Environment.getExternalStorageDirectory()));
sendBroadcast(intent);

撕衣服

原理：把穿內衣和穿外衣的照片重疊顯示，內衣照在下面，用戶滑動屏幕時，觸摸的是外衣照，把手指經過的像素都置爲透明，內衣照就顯示出來了

 iv.setOnTouchListener(new OnTouchListener() {

    @Override
    public boolean onTouch(View v, MotionEvent event) {
        switch (event.getAction()) {
        case MotionEvent.ACTION_MOVE:
            int newX = (int) event.getX();
            int newY = (int) event.getY();
            //把指定的像素變成透明
            copyBm.setPixel(newX, newY, Color.TRANSPARENT);
            iv.setImageBitmap(copyBm);
            break;

        }
        return true;
    }
});

每次只設置一個像素點太慢，以觸摸的像素爲圓心，半徑爲5畫圓，圓內的像素全部置爲透明

for (int i = -5; i < 6; i++) {
    for (int j = -5; j < 6; j++) {
        if(Math.sqrt(i * i + j * j) <= 5)
            copyBm.setPixel(newX + i, newY + j, Color.TRANSPARENT);
    }
}

音樂播放器

播放服務

播放音頻的代碼應該運行在服務中，定義一個播放服務MusicService

服務裏定義play、stop、pause、continuePlay等方法

    private void play() {
        // TODO Auto-generated method stub
        player.reset();
        try {
            player.setDataSource("sdcard/bzj.mp3");
            player.prepare();
        } catch (Exception e) {
            // TODO Auto-generated catch block
            e.printStackTrace();
        } 
        player.start();

    }
    private void pause() {
        player.pause();
    }
    private void stop() {
        player.stop();
    }
    private void continuePlay() {
        player.start();
    }

把這幾個方法抽取成一個接口MusicInterface
定義一箇中間人類，繼承Binder，實現MusicInterface

先start啓動MusicService，再bind

Intent intent = new Intent(this, MusicService.class);
startService(intent);
bindService(intent, conn, BIND_AUTO_CREATE);

根據播放進度設置進度條

獲取當前的播放時間和當前音頻的最長時間

int currentPosition = player.getCurrentPosition();
int duration = player.getDuration();

播放進度需要不停的獲取，不停的刷新進度條，使用計時器每500毫秒獲取一次播放進度

發消息至Handler，把播放進度放進Message對象中，在Handler中更新SeekBar的進度

Timer timer = new Timer();
timer.schedule(new TimerTask() {

    @Override
    public void run() {
        int currentPosition = player.getCurrentPosition();
        int duration = player.getDuration();
        Message msg = Message.obtain();
        //把播放進度存入Message中
        Bundle data = new Bundle();
        data.putInt("currentPosition", currentPosition);
        data.putInt("duration", duration);
        msg.setData(data);
        MainActivity.handler.sendMessage(msg);
    }
}, 5, 500);

在Activity中定義Handler

static Handler handler = new Handler(){
    public void handleMessage(android.os.Message msg) {
        //取出消息攜帶的數據
        Bundle data = msg.getData();
        int currentPosition = data.getInt("currentPosition");
        int duration = data.getInt("duration");

        //設置播放進度
        sb.setMax(duration);
        sb.setProgress(currentPosition);
    };
};

拖動進度條改變播放進度

     //給sb設置一個拖動偵聽
     sb.setOnSeekBarChangeListener(new OnSeekBarChangeListener() {
        //停止拖動時調用
        @Override
        public void onStopTrackingTouch(SeekBar seekBar) {
            // TODO Auto-generated method stub
            int progress = seekBar.getProgress();
            mi.seekTo(progress);
        }
        //開始拖動時調用           
        @Override
        public void onStartTrackingTouch(SeekBar seekBar) {
            // TODO Auto-generated method stub

        }
        //拖動的時候不斷調用         
        @Override
        public void onProgressChanged(SeekBar seekBar, int progress,
                boolean fromUser) {
            // TODO Auto-generated method stub

        }
    });

視頻播放器

SurfaceView

對畫面的實時更新要求較高
雙緩衝技術：內存中有兩個畫布，A畫布顯示至屏幕，B畫布在內存中繪製下一幀畫面，繪製完畢後B顯示至屏幕，A在內存中繼續繪製下一幀畫面

播放視頻也是用MediaPlayer，不過跟音頻不同，要設置顯示在哪個SurfaceView

SurfaceView sv = (SurfaceView) findViewById(R.id.sv);
SurfaceHolder sh = sv.getHolder();

MediaPlayer player = new MediaPlayer();
player.reset();
try {
    player.setDataSource("sdcard/2.3gp");
    player.setDisplay(sh);
    player.prepare();
} catch (Exception e) {
    e.printStackTrace();
}
player.start();

SurfaceView是重量級組件，可見時纔會創建

給SurfaceHolder設置CallBack，類似於偵聽，可以知道SurfaceView的狀態

sh.addCallback(new Callback() {
    //SurfaceView銷燬時調用
    @Override
    public void surfaceDestroyed(SurfaceHolder holder) {
        // TODO Auto-generated method stub

    }
    //SurfaceView創建時調用
    @Override
    public void surfaceCreated(SurfaceHolder holder) {
        // TODO Auto-generated method stub

    }

    @Override
    public void surfaceChanged(SurfaceHolder holder, int format, int width,
            int height) {
        // TODO Auto-generated method stub

    }
});

SurfaceView一旦不可見，就會被銷燬，一旦可見，就會被創建，銷燬時停止播放，再次創建時再開始播放

攝像頭

啓動系統提供的拍照程序

//隱式啓動系統提供的拍照Activity
Intent intent = new Intent(MediaStore.ACTION_IMAGE_CAPTURE);
//設置照片的保存路徑
File file = new File(Environment.getExternalStorageDirectory(), "haha.jpg"); 
intent.putExtra(MediaStore.EXTRA_OUTPUT, Uri.fromFile(file)); 
startActivityForResult(intent, 0);

啓動系統提供的攝像程序

Intent intent = new Intent(MediaStore.ACTION_VIDEO_CAPTURE);

File file = new File(Environment.getExternalStorageDirectory(), "haha.3gp"); 
intent.putExtra(MediaStore.EXTRA_OUTPUT, Uri.fromFile(file)); 
//設置保存視頻文件的質量
intent.putExtra(MediaStore.EXTRA_VIDEO_QUALITY, 1);
startActivityForResult(intent, 0);

Li_Pine

發佈了61 篇原創文章 · 獲贊 40 · 訪問量 6萬+

私信關注

多媒體編程

多媒體編程

圖片

加載大圖片

創建圖片副本

保存圖片

SurfaceView

FFMPEG

Vitamio

多媒體概念

計算機圖片大小的計算

加載大圖片到內存

對圖片進行縮放

在內存中創建圖片的副本

對圖片進行特效處理

畫畫板

撕衣服

音樂播放器

播放服務

根據播放進度設置進度條

拖動進度條改變播放進度

視頻播放器

SurfaceView

攝像頭

開源高性能結構化日誌模塊NanoLog

【簡寫Mybatis-02】註冊機的實現以及SqlSession處理

手繪二維碼

.NET藉助虛擬網卡實現一個簡單異地組網工具

JSP頁面間的參數傳遞

JSP狀態管理（四）

JavaBeans的使用

JSP的內置對象（三）appliaction、page、pageContext、config、Exception

Netty簡介與入門

Mac下配置sublime實現LaTeX

https://yachay.unat.edu.pe/blog/index.php?comment_area=format_blog&comment_component=blog&comment_co

linux以太網驅動總結