FFmpeg android 可播放本地端video sample code

FFmpeg是一个强大的开源跨平台多媒体框架，用于处理音频和视频文件。在Android平台上，FFmpeg可以被集成到应用中，实现本地视频的播放功能。本文将深入探讨如何使用FFmpeg Android来播放本地视频，以及相关的sample code。 我们需要了解FFmpeg在Android中的集成过程。这通常涉及到以下步骤： 1. **添加FFmpeg库**: 将FFmpeg的库文件（如armeabi、armeabi-v7a、arm64-v8a等）放入项目的jniLibs目录下。这可以通过下载预编译的库或者自己编译源码完成。 2. **配置CMake**: 在项目的`build.gradle`文件中，添加CMake配置，指定本地库路径并链接FFmpeg库。 ```groovy android { ... defaultConfig { ... externalNativeBuild { cmake { cppFlags "-frtti -fexceptions" arguments "-DANDROID_ABI=${abi}", "-DFFMPEG_LIBRARIES_PATH=src/main/jniLibs/${abi}" } } } externalNativeBuild { cmake { path "CMakeLists.txt" } } } ``` 3. **创建CMakeLists.txt**: 在项目根目录下创建此文件，包含FFmpeg库的编译和链接指令。 ```cmake cmake_minimum_required(VERSION 3.4.1) add_library( # Sets the name of the library. native-lib # Sets the library as a shared library. SHARED # Provides a relative path to your source file(s). src/main/cpp/native-lib.cpp ) find_library( # Sets the name of the path variable. log-lib # Specifies the name of the NDK library that # you want CMake to locate. log ) include_directories(/path/to/ffmpeg/include) add_library(ffmpeg SHARED IMPORTED) set_target_properties(ffmpeg PROPERTIES IMPORTED_LOCATION /path/to/ffmpeg/lib/${ANDROID_ABI}/libffmpeg.so) target_link_libraries( # Specifies the target library. native-lib # Links the target library to the log library # included in the NDK. ${log-lib} ffmpeg ) ``` 接下来，我们将讨论如何使用Java或Kotlin代码来播放本地视频： 1. **初始化FFmpeg**: 在`MainActivity`中，加载FFmpeg库并初始化。 ```java static { System.loadLibrary("ffmpeg"); } public class MainActivity extends AppCompatActivity { ... } ``` 2. **解析视频文件**: 使用FFmpeg的命令行工具，如`ffmpeg -i <input_video_path>`，解析本地视频文件信息。 ```java private String[] ffmpegCommand = {"-i", "/path/to/video.mp4"}; public native void executeFFmpegCommand(String[] command); ``` 3. **创建MediaExtractor和MediaCodec**: 根据FFmpeg解析出的视频信息，创建`MediaExtractor`对象来读取视频流，并找到合适的`MediaCodec`来解码视频。 ```java MediaExtractor mediaExtractor = new MediaExtractor(); mediaExtractor.setDataSource(inputVideoPath); MediaFormat videoFormat = null; for (int i = 0; i < mediaExtractor.getTrackCount(); i++) { MediaFormat format = mediaExtractor.getTrackFormat(i); if (format.getString(MediaFormat.KEY_MIME).startsWith("video/")) { videoFormat = format; break; } } mediaExtractor.selectTrack(i); MediaCodec mediaCodec = MediaCodec.createDecoderByType(videoFormat.getString(MediaFormat.KEY_MIME)); mediaCodec.configure(videoFormat, null, null, 0); ``` 4. **解码视频**: 循环读取`MediaExtractor`的数据，输入到`MediaCodec`进行解码，并将解码后的数据推送到Surface上显示。 ```java mediaCodec.start(); ByteBuffer[] inputBuffers = mediaCodec.getInputBuffers(); ByteBuffer[] outputBuffers = mediaCodec.getOutputBuffers(); while (true) { int bufferIndex = mediaCodec.dequeueInputBuffer(10000); if (bufferIndex >= 0) { ByteBuffer buffer = inputBuffers[bufferIndex]; int sampleSize = mediaExtractor.readSampleData(buffer, 0); if (sampleSize < 0) { mediaCodec.queueInputBuffer(bufferIndex, 0, 0, 0, MediaCodec.BUFFER_FLAG_END_OF_STREAM); break; } else { mediaCodec.queueInputBuffer(bufferIndex, 0, sampleSize, mediaExtractor.getSampleTime(), 0); } mediaExtractor.advance(); } MediaCodec.BufferInfo bufferInfo = new MediaCodec.BufferInfo(); int outputBufferIndex = mediaCodec.dequeueOutputBuffer(bufferInfo, 10000); switch (outputBufferIndex) { case MediaCodec.INFO_OUTPUT_BUFFERS_CHANGED: outputBuffers = mediaCodec.getOutputBuffers(); break; case MediaCodec.INFO_OUTPUT_FORMAT_CHANGED: // Handle new format here break; case MediaCodec.INFO_TRY_AGAIN_LATER: break; default: ByteBuffer outputBuffer = outputBuffers[outputBufferIndex]; // Render the decoded frame on a Surface break; } mediaCodec.releaseOutputBuffer(outputBufferIndex, true); } mediaCodec.stop(); mediaCodec.release(); mediaExtractor.release(); ``` 5. **处理音轨**：如果视频包含音频轨道，你需要同样处理音频解码。使用`MediaExtractor`找到音频格式，创建对应的`MediaCodec`，然后进行解码和播放。 6. **同步视频和音频**：确保视频和音频的播放是同步的，可能需要使用一个SurfaceTexture和AudioTrack对象来协调。 7. **错误处理**：在整个过程中，需要对可能出现的错误进行处理，例如文件不存在、解码失败等。 以上就是一个基本的FFmpeg Android本地视频播放流程。请注意，这只是一个简化的示例，实际项目中可能需要更复杂的逻辑来处理不同设备的兼容性问题、多线程同步、内存管理等问题。在实际开发时，还可以考虑使用第三方库如ExoPlayer，它已经集成了FFmpeg功能，提供了更完善的API和更好的性能。