編碼類相關(guān)
通過VideoEngineImpl分別繼承 ViEBaseImpl,ViECodecImpl,ViECaptureImpl,ViERenderImpl等來實現(xiàn)所有繼承的類。
編碼部分在ViECodecImpl分支,調(diào)用ViEEncoder的實例,ViEEncoder類中調(diào)用VideoCodingModule實例,VideoCodingModule調(diào)用VideoSender實例,而VideoSender調(diào)用VCMGenericEncoder實例,VCMGenericEncoder調(diào)用VideoEncoder實例。
而VideoEncoder實例為H264Encoder實例、VP9Encoder實例、VP8Encoder實例中的一個,這些類又分別對應(yīng)自己的實現(xiàn)類,在其中實現(xiàn)具體的編碼器。

在VideoEngine類中
VideoEngine* VideoEngine::Create() {
return new VideoEngineImpl(new Config(), true /* owns_config */);
}
所以,創(chuàng)建視頻相關(guān)所有對象的方法如下:
_videoEngine = VideoEngine::Create();
_vieBase = ViEBase::GetInterface(_videoEngine);
_vieCapture = ViECapture::GetInterface(_videoEngine);
_vieRTPRTCP = ViERTP_RTCP::GetInterface(_videoEngine);
_vieRender = ViERender::GetInterface(_videoEngine);
_vieCodec = ViECodec::GetInterface(_videoEngine);
_vieNetwork = ViENetwork::GetInterface(_videoEngine);
_vieFile=ViEFile::GetInterface(_videoEngine);
_vieImageProc = ViEImageProcess::GetInterface(_videoEngine);
采集到編碼
VideoCaptureAndroid.java 的 onPreviewFrame(),調(diào)用ProvideCameraFrame()。
video_capture_android.cc文件中int32_t VideoCaptureAndroid::OnIncomingFrame(),調(diào)用int32_t VideoCaptureAndroid::OnIncomingFrame(),調(diào)用IncomingFrame()。
video_capture_impl.cc 文件中 int32_t VideoCaptureImpl::IncomingFrame(),調(diào)用int32_t VideoCaptureImpl::DeliverCapturedFrame(),調(diào)用void ViECapturer::OnIncomingCapturedFrame()。
bool ViECapturer::ViECaptureProcess()函數(shù)中處理capture_event_,當(dāng)有新的幀來時,則觸發(fā)事件。
調(diào)用void ViECapturer::DeliverI420Frame(),做一些色彩等方面的前處理。
調(diào)用void ViEFrameProviderBase::DeliverFrame(),這里分別對應(yīng)render和encoder,即將視頻幀分別給到渲染和編碼器。
對于編碼器:調(diào)用void ViEEncoder::DeliverFrame(),會做丟幀和重采樣的處理,后面調(diào)用流程從上圖中可以清晰看清楚。
對于渲染:調(diào)用void ViERenderer::DeliverFrame(),后面與ViEEncoder及以后類似。
onPreviewFrame()
->int32_t VideoCaptureAndroid::OnIncomingFrame()
->int32_t VideoCaptureAndroid::OnIncomingFrame()
-> int32_t VideoCaptureImpl::IncomingFrame()
->int32_t VideoCaptureImpl::DeliverCapturedFrame()
->void ViECapturer::OnIncomingCapturedFrame()
|||||
->bool ViECapturer::ViECaptureProcess()
->void ViECapturer::DeliverI420Frame()
->void ViEFrameProviderBase::DeliverFrame()
->void ViEEncoder::DeliverFrame()或者void ViERenderer::DeliverFrame()
對于ViEEncoder::DeliverFrame()之后:
int32_t AddVideoFrame()
->int32_t VideoSender::AddVideoFrame //有丟幀處理
->int32_t VCMGenericEncoder::Encode()
->int H264EncoderImpl::Encode()
類似音頻相關(guān)介紹: