1.因为音视频编解码涉及知识点很多，图像处理的基础知识要有，如BMP位图，颜色表示模式YUV等，傅立叶变换，余弦变换，JEPG图像编码。然后要认真地看明白音视频编码的基本原理，包括编码预测，运动补偿，运动估计...最好要能复述整个过程。 然后可以看源码，先架构，再一个功能块一个功能块，一个函数一个函，一句一句地理解。最后也很关键，那就是做一些习题。
2.流媒体的学习跟上边的步骤一样。先看明白RTP/RTCP/RTSP协议文档，理解各个字段具体含义。如果你很明白的话，尝试写一个流媒体服务也就不难。再看开源源码。然后运用开源工程架构流媒体服务。
原文：http://www.cnblogs.com/skyofbitbit/p/4638022.html