日本免费高清视频-国产福利视频导航-黄色在线播放国产-天天操天天操天天操天天操|www.shdianci.com

學無先后，達者為師

網站首頁 編程語言 正文

Android音視頻開發之MediaExtactor使用教程_Android

作者：JulyYu ? 更新時間： 2022-06-24 編程語言

前言

在之前學習如何使用MediaPlayer后，了解到Android系統提供開發者播放多媒體全家桶能力，但對于開發者希望DIY自由度更高的播放器能力也是可以利用Android內部提供組件包自行實現一個播放器的。舉例實現一個視頻播放這個流程，它大致流程是【多媒體文件解析提取視頻文件】-> 【視頻流解碼】-> 【解碼數據播放渲染到Render】。首要需要實現的是多媒體中需要文件提取工作，這就需要使用到Android提供MediaExtactor類來實現提取媒體信息能力。

MediaExtactor

MediaExtactor在Android音視頻開發中負責提取音視頻信息和數據流的功能，可以通過該類實現從多媒體文件中剝離得到音頻和視頻的能力。

使用MediaExtactor

在一個音視頻文件多可能會包含多個數據流（音頻數據、視頻數據等一般情況是一個視頻組合多個音頻）

  • 因此需要MediaExtactor加載音視頻文件獲取到所有數據軌道
  • 通過遍歷獲取到想要操作的軌道
  • 然后指定該軌道是MediaExtactor所有解析的數據流
  • 通過MediaExtactor獲取到該軌道MediaFormat

加載音視頻文件代碼

加載音視頻文件過程可傳遞Uri、path、URL等。在確認希望需要解析的數據軌道后調用selectTrack就能鎖定當前MediaExtactor要使用的軌道在之后數據解碼中去使用。

// 加載資源
MediaExtractor extractor = new MediaExtractor();
extractor.setDataSource(path);
// 遍歷獲取視頻軌道
int trackIndex = getTrackIndex(extractor, "audio/");
// 選定軌道
extractor.selectTrack(trackIndex);

獲取軌道代碼

加載文件之后可以通過MediaExtactor的getTrackCount方法獲取到所有數據軌道。然后可以通過getTrackFormat獲取到軌道信息，通過MediaFormat.KEY_MIME得到軌道格式比對期望所有獲取到的軌道，比如比對"audio/"就是希望獲取到音頻軌道數據。

// 獲取指定軌道的方法
private static int getTrackIndex(MediaExtractor extractor, String mediaType) {
    int trackIndex = -1;
    for (int i = 0; i < extractor.getTrackCount(); i++) {
        MediaFormat mediaFormat = extractor.getTrackFormat(i);
        String mime = mediaFormat.getString(MediaFormat.KEY_MIME);
        if (mime.startsWith(mediaType)) {
            trackIndex = i;
            break;
        }
    }
    return trackIndex;
}

提取軌道數據信息

在選定希望獲取到的軌道后就可以獲取到當前選擇軌道的基本信息，例如視頻尺寸大小、格式、時長、碼率等一些音視頻相關基礎信息方便只有做解碼時選用合適的解碼器以及其他必要信息確認。

音頻軌道基礎信息獲取

MediaFormatInfo mediaFormatInfo = new MediaFormatInfo();
mediaFormatInfo.mediaFormat = mediaFormat;
mediaFormatInfo.audioChannels = mediaFormat.getInteger(MediaFormat.KEY_CHANNEL_COUNT);
mediaFormatInfo.audioSampleRate = mediaFormat.getInteger(MediaFormat.KEY_SAMPLE_RATE);
mediaFormatInfo.maxInputSize = mediaFormat.getInteger(MediaFormat.KEY_MAX_INPUT_SIZE);
mediaFormatInfo.mime = mediaFormat.getString(MediaFormat.KEY_MIME);

視頻軌道基礎信息獲取

MediaFormatInfo mediaFormatInfo = new MediaFormatInfo();
mediaFormatInfo.mediaFormat = mediaFormat;
mediaFormatInfo.videoHeight = mediaFormat.getInteger(MediaFormat.KEY_HEIGHT);
mediaFormatInfo.videoWidth = mediaFormat.getInteger(MediaFormat.KEY_WIDTH);
mediaFormatInfo.timeDuration = mediaFormat.getLong(MediaFormat.KEY_DURATION);
mediaFormatInfo.mime = mediaFormat.getString(MediaFormat.KEY_MIME);

但如果你選取的軌道是視頻軌道但操作錯誤提取了音頻相關信息可能會出現錯誤崩潰的情況（例如KEY_IS_ADTS 只有音頻軌道才能提取），因此盡量保證提取參數是否正確做好代碼保護機制。

一些源碼細節分析

MediaExtactor作為提取器，其底層代碼邏輯也是調用JNI來實現的，它只是上層API提供出能力而已。 在源碼細節中可以看到MediaExtactor同樣是加載media_jniso庫，這和MediaPlayer是一樣的邏輯。

public MediaExtractor() {
    native_setup();
}
private native final void native_setup();
static {
    System.loadLibrary("media_jni");
    native_init();
}

同時setDataSoure方法調用底層native接口和MediaPlayer也是同樣的方法名和入參。

private native final void nativeSetDataSource(
        @NonNull IBinder httpServiceBinder,
        @NonNull String path,
        @Nullable String[] keys,
        @Nullable String[] values) throws IOException;

這基本也能夠了解MediaExtactor和MediaPlayer在底層實現上應該屬于同一套邏輯和功能。只不過MediaExtactor可以理解為MediaPlayer其中一小部分功能提供提取能力而MediaPlayer是封裝成型的工具類只需要加載音視頻資源文件播放即可，中間提取軌道和解析過程直接就在底層幫開發者實現了。

原文鏈接：https://juejin.cn/post/7090477876813758471

欄目分類
最近更新