php解码speex技巧_音视频开拓开拓小白若何成为音视频专家

文章目录 [+]

“我是一名应届毕业生，该如何快速地发展起来” “我只懂 C/C++，是学 Android 开拓有出息，还是 iOS 开拓有出息？” “我是一名 Android/iOS 开拓，已经可以独立完成一个完全的 App 开拓上线，该如何连续提升？” “我想从事音视频开拓，该如何入门？如何进阶？”

很高兴看到大家有这样的问题，由于这也从侧面反响了你是一个积极向上，想不断努力来提升自己的人。

php解码speex技巧_音视频开拓开拓小白若何成为音视频专家

我们就先从一个大略的问题聊起，“到底 Android 开拓有出息还是 iOS 开拓有出息？”

（图片来自网络侵删）

实在这个问题跟 “PHP 是不是天下上最好的措辞一样”，只会引发辩论，却没有什么实际代价，在我看来，无论是 Windows、Linux、Android 还是 iOS 开拓，都没有什么利害之分，它们实在都有着很多的共同点，那便是：

都是基于操作系统供应的 API 完成特定需求的实现

当然，也有些不同的地方，比如：

1. 系统的 API 和特性不同2. 编程措辞不同，Windows/Linux 以 C/C++ 为主，Android 以 Java 为主，iOS 以 Object C 为主等等

但无论什么平台，他们的学习曲线实在是类似的，都要经历差不多如下的环节：

1. 学习对应平台的编程措辞，如：C/C++，Java，Object C，Javascript 等2. 熟习对应平台供应的 API，如：UI 库，网络，文件，数据库，图片处理，多媒体处理等等3. 节制平台干系的特性、框架和事理，如：Windows 的 WINSOCK，ODBC，WPF 等，Unix 的设计哲学，Android 的四大组件，iOS 的 MVC 模式等等4. 通过详细的项目，熟习和练手，达到可完成任意功能的开拓

当你已经走到第 4 步了后，每每就会觉得碰着了瓶颈，产生如文章开头的问题，下一步何去何从？

实在我一贯有一个不雅观点，便是：

“基于平台的 API 做运用开拓，并不是一个可以走得多远的方向，真正有代价的地方在于与详细的业务方向结合”，比如：+ 网络安全+ 音视频+ 智能硬件+ 深度学习+ 大数据+ 其他（比如：金融、通信等）

在详细的业务领域，你可以逐步沉淀下来，用自己的努力和韶光换来对领域知识的深入理解和积累，逐渐从一个开拓小白走向最懂这个行业的专家。

本日呢，我就紧张跟大家分享下，如果你对音视频这个领域感兴趣，该当如何入门和提高？

2. 音视频开拓包括哪些内容

虽然一篇文章无法把音视频开拓的知识点都先容清楚，但是大概的学习路线还是可以梳理一下的，我们先看看下面这张图：

实在说白了，音视频开拓，便是要节制图像、音频、视频的根本知识，并且学会如何对它们进行采集、渲染、处理、传输等一系列的开拓和运用。

采集：它办理的是，数据从哪里来的问题渲染：它办理的是，数据怎么展现的问题处理：它办理的是，数据怎么加工的问题传输：它办理的是，数据怎么共享的问题

每一个门类，都可以深挖，衍生出一个又一个充满技能寻衅的话题，比如：如何更高效地渲染画面、如何提高音视频的压缩比，如何优化弱网下的音视频数据传输等等。

实在，音视频开拓的技能积累，也没有那么难，带着问题去 Google，带着任务去实践，统统都不是问题，我们就从上面说的 4 个方向，逐个探索一下，有哪些知识点，是要我们去理解和节制的。

2.1 采集

采集，它办理的是，数据从哪里来的问题，那么，数据究竟从哪里来的呢？

实在无论在哪个平台，图像、视频最初都是来自摄像头，而音频最初都是来自麦克风，因此，做音视频采集，就要节制如下的技能知识：

1. 系统的摄像头采集接口是什么，怎么用？比如：Windows：DirectShowLinux：V4L2Android：CameraiOS：AVCaptureSession2. 系统的摄像头采集的参数怎么配置，都是什么含义？比如：分辨率、帧率、预览方向、对焦、闪光灯等3. 系统的摄像头输出的图像/视频数据，是什么格式，不同格式有什么差异？比如：图片：JPEG，视频数据：NV21，NV12，I420 等4. 系统的麦克风采集接口是什么，怎么用？比如：Windows：DirectShowLinux：ALSA & OSSAndroid：AudioRecordiOS：Audio Unit5. 系统的麦克风采集参数怎么配置，都是什么含义？比如：采样率，通道号，位宽等6. 系统的麦克风输出的音频数据，是什么格式？比如：PCM

2.2 渲染

渲染，它办理的是，数据怎么展现的问题，那么，数据究竟怎么展现呢？

实在无论在哪个平台，图像、视频终极都是要绘制到视图上面，而音频终极都是要输出到扬声器，因此，做音视频渲染，就要节制如下的技能知识：

1. 系统供应了哪些 API 可以绘制一张图片或者一帧 YUV 图像数据的？比如：Windows：DirectDraw, Direct3D, GDI，OpenGL 等Linux： GDI， OpenGL 等Android：ImageView，SurfaceView，TextureView，OpenGL 等iOS： CoreGraphics，OpenGL 等2. 系统供应了哪些 API 可以播放一个 mp3 或者 pcm 数据？比如：Windows：DirectSound 等Linux：ALSA & OSS 等Android：AudioTrack 等iOS： AudioQueue 等

2.3 处理

处理，它办理的是，数据怎么加工的问题，那么，数据究竟可以怎么加工呢？

首先，我们看看图像/音视频的数据可以做哪些加工？

实在无论在哪个平台，图像和音视频的加工，除了系统的 API，大多数都会依赖一些跨平台的第三方库的，通过节制这些第三方库的事理和利用方法，基本上就可以知足日常音视频处理事情了，这些库包括但不限于：

1. 图像处理：OpenGL，OpenCV，libyuv，ffmpeg 等2.视频编解码：x264，OpenH264，ffmpeg 等3.音频处理：speexdsp，ffmpeg 等4.音频编解码：libfaac，opus，speex，ffmpeg 等

因此，学习和节制这些第三方库的利用，非常有必要。

2.4 传输

传输，它办理的是，数据怎么共享的问题，那么，数据究竟怎么共享呢？

共享，最主要的一点，便是协议。

互联网之以是能够如此发达地发展，将全体天下都紧密联系在一起，实在是离不开 W3C 这个委员会的巨大贡献的，由于无论什么数据，要想在不同的国家、不同设备之间互联互通，离不开 “标准”，有了 “标准”，大家就能相互读懂对方。

因此，研究音视频传输，实在便是在研究协议，详细有哪些协议呢？

1. 音视频在传输前，怎么打包的，如：FLV，ts，mpeg4 等2. 直播推流，有哪些常见的协议，如：RTMP，RSTP 等3. 直播拉流，有哪些常见的协议，如：RTMP，HLS，HDL，RTSP 等4. 基于 UDP 的协议有哪些？如：RTP/RTCP，QUIC 等