应用介绍

第一章 多媒体概念介绍 多媒体概念介绍 多媒体概念介绍 多媒体概念介绍 ................................ ................................ ................................ ................................ .......................... 6

1.1 视频格式 视频格式 视频格式 ................................ ................................ ................................ ................................ ................................ ...... 6

1.1.1 常见格式 常见格式 ................................ ................................ ................................ ................................ ........................... 6

1.2 音频格式 音频格式 音频格式 ................................ ................................ ................................ ................................ ................................ ...... 8

1.2.1 常见格式 常见格式 ................................ ................................ ................................ ................................ ........................... 9

1.2.2 比较 ................................ ................................ ................................ ................................ ................................ . 14

1.3 字幕格式 字幕格式 字幕格式 ................................ ................................ ................................ ................................ ................................ .... 14

1.3.1 外挂字幕与内嵌的阐述 外挂字幕与内嵌的阐述 外挂字幕与内嵌的阐述 外挂字幕与内嵌的阐述 外挂字幕与内嵌的阐述 外挂字幕与内嵌的阐述 ................................ ................................ ................................ ......................... 14

1.3.2 外挂字幕视频与内嵌的画面比较 外挂字幕视频与内嵌的画面比较 外挂字幕视频与内嵌的画面比较 外挂字幕视频与内嵌的画面比较 外挂字幕视频与内嵌的画面比较 外挂字幕视频与内嵌的画面比较 外挂字幕视频与内嵌的画面比较 外挂字幕视频与内嵌的画面比较 外挂字幕视频与内嵌的画面比较 ................................ ................................ ................................ . 15

1.3.3 外挂字幕的三种格式 外挂字幕的三种格式 外挂字幕的三种格式 外挂字幕的三种格式 外挂字幕的三种格式 ................................ ................................ ................................ ................................ ..... 15

1.4 采集录制和播放渲染 采集录制和播放渲染 采集录制和播放渲染 采集录制和播放渲染 采集录制和播放渲染 ................................ ................................ ................................ ................................ ................ 15

1.4.1 视频采集 视频采集 ................................ ................................ ................................ ................................ ......................... 15

1.4.2 视频录制 视频录制 ................................ ................................ ................................ ................................ ......................... 16

1.4.3 视频渲染 视频渲染 ................................ ................................ ................................ ................................ ......................... 16

1.5 编解码器 编解码器 编解码器 ................................ ................................ ................................ ................................ ................................ .... 18

1.6 容器和协议 容器和协议 容器和协议 ................................ ................................ ................................ ................................ ................................ 18

1.6.1 容器格式 和编码容器格式 和编码容器格式 和编码容器格式 和编码容器格式 和编码................................ ................................ ................................ ................................ ..... 18

1.6.2 协议 ................................ ................................ ................................ ................................ ................................ . 24

1.6.2.1 1.6.2.1 视频协议 视频协议 视频协议 ................................ ................................ ................................ ................................ ..................... 25

1.6.2.2 1.6.2.2 音频协议 音频协议 音频协议 . ................................ ................................ ................................ ................................ .................... 25

1.6.2.3 1.6.2.3 上层通讯协议 上层通讯协议 上层通讯协议 上层通讯协议 ................................ ................................ ................................ ................................ ............. 25

1.7 常用概念介绍 常用概念介绍 常用概念介绍 常用概念介绍 ................................ ................................ ................................ ................................ ............................ 26

1.7.1 硬解 ................................ ................................ ................................ ................................ ................................ . 26

1.7.2 IBP 1.7.2 IBP1.7.2 IBP帧 ................................ ................................ ................................ ................................ .............................. 26

1.7.3 DTS 1.7.3 DTS1.7.3 DTS1.7.3 DTS和 PTSPTSPTS ................................ ................................ ................................ ................................ ..................... 30

1.7.4 分辨率 分辨率 ................................ ................................ ................................ ................................ ............................ 30

1.7.5 码率 ................................ ................................ ................................ ................................ ................................ 30

1.7.6 帧率 ................................ ................................ ................................ ................................ ................................ 30

1.7.7 RGB 1.7.7 RGB1.7.7 RGB1.7.7 RGB和 YUVYUVYUV ................................ ................................ ................................ ................................ .................. 30

1.7.8 实时 和非实时 和非实时 和非................................ ................................ ................................ ................................ ................ 30

1.7.9 复合视频和 复合视频和 复合视频和 s-videovideovideo ................................ ................................ ................................ ................................ ....... 31

1.7.10 硬件加速 硬件加速 ................................ ................................ ................................ ................................ ...................... 31

1.7.11 FFmpeg Device 1.7.11 FFmpeg Device1.7.11 FFmpeg Device 1.7.11 FFmpeg Device1.7.11 FFmpeg Device1.7.11 FFmpeg Device 1.7.11 FFmpeg Device 1.7.11 FFmpeg Device1.7.11 FFmpeg Device ................................ ................................ ................................ ................................ .............. 31

第二章 FFmpegFFmpegFFmpegFFmpeg 框架 ................................ ................................ ................................ ................................ .............................. 32

2.1 FFmpeg 2.1 FFmpeg2.1 FFmpeg2.1 FFmpeg 概述 ................................ ................................ ................................ ................................ .............................. 32

2.1.1 简介 ................................ ................................ ................................ ................................ ................................ . 32

2.1.2 功能 ................................ ................................ ................................ ................................ ................................ . 32

2.1.3 模块组成 模块组成 ................................ ................................ ................................ ................................ ......................... 33

2.1.4 命令集 命令集 ................................ ................................ ................................ ................................ ............................. 33

2.2 媒体播放器三大底层框架 媒体播放器三大底层框架 媒体播放器三大底层框架 媒体播放器三大底层框架 媒体播放器三大底层框架 媒体播放器三大底层框架 ................................