互動直播之WebRTC服務器Kurento實戰(zhàn)

【轉(zhuǎn)載請注明出處】:http://www.itdecent.cn/p/b625b7c0c2a4

1. Kurento

Kurento的主要組件是Kurento媒體服務器(KMS),負責媒體傳輸,處理,記錄和播放。KMS建立在出色的GStreamer多媒體庫之上,并提供以下功能:

  • 網(wǎng)絡流協(xié)議,包括HTTP,RTPWebRTC
  • 支持媒體混合和媒體路由/調(diào)度的組通信(MCU和SFU功能)。
  • 對實現(xiàn)計算機視覺和增強現(xiàn)實算法的過濾器的通用支持。
  • 媒體存儲支持WebMMP4的寫入操作以及GStreamer支持的所有格式的播放。
  • GStreamer支持的任何編解碼器之間的自動媒體轉(zhuǎn)碼,包括VP8,H.264,H.263,AMR,OPUS,Speex,G.711等。
image.png

Kurento設計原則

Kurento的設計基于以下主要原則:

  • 分開的媒體和信令平面
    信號媒體是兩個獨立的平面,以便應用程序可以分別處理多媒體處理的那些方面。
  • 媒體和應用服務的分配
    Kurento Media Server和應用程序可以在不同的機器之間并置,升級或分布。
    一個應用程序可以調(diào)用多個Kurento Media Server的服務。相反的情況也適用,即Kurento Media Server可以滿足多個應用程序的請求。
  • 適用于云
    Kurento適合集成到云環(huán)境中以充當PaaS(平臺即服務)組件。
  • 媒體管道
    通過媒體管道鏈接媒體元素是一種挑戰(zhàn)多媒體處理復雜性的直觀方法。
  • 應用開發(fā)
    開發(fā)人員無需了解內(nèi)部Kurento Media Server的復雜性:所有應用程序都可以以開發(fā)人員喜歡的任何技術(shù)或框架部署,從客戶端到服務器。從瀏覽器到云服務。
  • 端到端通信能力
    Kurento提供端到端通信功能,因此開發(fā)人員無需處理在客戶端設備上傳輸,編碼/解碼和呈現(xiàn)媒體的復雜性。
  • 完全可處理的媒體流
    Kurento不僅支持交互式人際通信(例如具有對話呼叫推送/接收功能的Skype),而且還支持人機(例如通過實時流傳輸?shù)囊曨l點播)和人機(例如遠程視頻錄制) ,多傳感器數(shù)據(jù)交換)通信。
  • 媒體的模塊化處理
    通過媒體元素管道實現(xiàn)的模塊化允許通過“面向圖形”的語言定義應用程序的媒體處理功能,其中應用程序開發(fā)人員可以通過鏈接適當?shù)墓δ軄韯?chuàng)建所需的邏輯。
  • 可審核的處理
    Kurento能夠為QoS監(jiān)視,計費和審計生成豐富而詳細的信息。
  • 無縫IMS集成
    Kurento旨在支持無縫集成到電話運營商的IMS基礎(chǔ)架構(gòu)中。
  • 透明媒體適配層
    Kurento提供了透明的媒體適配層,以使在屏幕大小,功耗,傳輸速率等方面具有不同要求的不同設備之間的融合成為可能。

Kurento模塊體系

Kurento被設計為可插入框架,Kurento中的每個插件都稱為一個模塊,可以使用新的自定義模塊擴展Kurento Media Server。更多信息,請閱讀Kurento模塊部分。

Kurento模塊體系結(jié)構(gòu)
擴展的Kurento工具箱

Kurento模塊分為三類:

  • 主要模塊
    與Kurento Media Server開箱即用合并:

    • kms-core:Kurento Media Server的主要組件。
    • kms-elements:Kurento Media Elements的實現(xiàn)(WebRtcEndpoint,PlayerEndpoint等)
    • kms-filters:Kurento過濾器的實現(xiàn)(FaceOverlayFilter,ZBarFilter等)
  • 內(nèi)置模塊
    Kurento團隊開發(fā)的額外模塊,用于增強Kurento Media Server的基本功能。到目前為止,有四個內(nèi)置模塊,分別是:

    • kms-pointerdetector:基于顏色跟蹤檢測視頻流中指針的過濾器。
    • kms-chroma:過濾器,它在頂層使用顏色范圍并使之透明,從而在后面顯示另一個圖像。
    • kms-crowddetector:用于檢測視頻流中人聚集的過濾器。
    • kms-platedetector:用于檢測視頻流中的車牌的過濾器。
  • 定制模塊
    Kurento Media Server的擴展,提供了新的媒體功能。

2. 安裝 EPEL 鏡像源

yum update
# RHEL/CentOS 7:
yum install https://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpm 
# RHEL/CentOS 8:
yum install https://dl.fedoraproject.org/pub/epel/epel-release-latest-8.noarch.rpm 

3. 安裝docker

# 卸載舊版本(如果安裝過舊版本的話)
yum remove docker  docker-common docker-selinux docker-engine
# 安裝需要的軟件包
yum install -y yum-utils device-mapper-persistent-data lvm2
#設置docker源
yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo
# 可使用阿里云docker源
yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
#安裝docker
yum install docker-ce docker-ce-cli containerd.io
#啟動 docker
systemctl start docker
#開機自啟
systemctl enable docker

4. 安裝kurento

#安裝最新版kurento
docker pull kurento/kurento-media-server:latest
#啟動鏡像
docker run --name kms -d -p 8888:8888  kurento/kurento-media-server:latest

#查看KMS日志
docker logs kms
#實時查看:
docker logs -f kms

Kurento媒體服務器的端口(KMS)過程中默認監(jiān)聽8888客戶端WebSocket連接。

容器運行后,您可以使用docker logs命令獲取其日志輸出:
docker logs --follow kms >"kms-$(date '+%Y%m%dT%H%M%S').log" 2>&1

要檢查KMS是否已啟動并正在偵聽連接,請使用以下命令:

curl \
    --include \
    --header "Connection: Upgrade" \
    --header "Upgrade: websocket" \
    --header "Host: 127.0.0.1:8888" \
    --header "Origin: 127.0.0.1" \
    http://127.0.0.1:8888/kurento

您應該得到類似于以下內(nèi)容的響應:

HTTP/1.1 500 Internal Server Error
Server: WebSocket++/0.7.0

忽略“ Server Error ”消息:這是預期的,它實際上證明KMS已啟動并正在偵聽連接。

5. 安裝coturn

#安裝依賴
yum install -y openssl-devel libevent-devel git

#clone 源碼
git clone https://github.com/coturn/coturn.git 
cd coturn 
./configure 
make 
sudo make install

# 啟動turnserver
nohup turnserver -L 0.0.0.0 -a -u kurento:kurento123pwd -v -f -r zhaolong.org &
#然后查看相應的端口號3478是否存在進程
sudo lsof -i:3478
image.png

這樣就說明已經(jīng)可以啟動了,接下來我們先停掉turnserver,重新配置。
turnserver 默認加載配置文件是etc/turnserver.conf或/usr/local/etc/turnserver.conf。

cp /usr/local/etc/turnserver.conf.default /usr/local/etc/turnserver.conf
openssl req -x509 -newkey rsa:2048 -keyout /usr/local/etc/turn_server_pkey.pem -out /usr/local/etc/turn_server_cert.pem -days 99999 -nodes

turnserver 默認使用的是SQLite數(shù)據(jù)庫,如果是需要使用MySQL或者PostgreSQL,需要先初始化數(shù)據(jù)庫,sql位置在/usr/local/share/turnserver/schema.sql。

修改的turnserver.conf內(nèi)容:

# 設置轉(zhuǎn)發(fā)的ip(局域網(wǎng)ip),如果不設置,他會自己選擇默認的
relay-ip=xx.xx.xx.xx

# 轉(zhuǎn)發(fā)的外網(wǎng)ip(本機外網(wǎng)ip),用于NAT 地址映射
external-ip=xx.xx.xx.xx

# 轉(zhuǎn)發(fā)的線程數(shù),其實默認不設置最好
relay-threads=5

#UDP 最小端口和最大端口
min-port=40000
max-port=60000

# WebRTC 的消息里會用到
fingerprint

# WebRTC 認證需要
lt-cred-mech

#中繼服務器的監(jiān)聽器IP地址
listening-ip=0.0.0.0

#靜態(tài)賬號
user=kurento:kurento

# 統(tǒng)計狀態(tài)信息的redis db
redis-statsdb="ip=xx.xx.xxx.xx dbname=3 password=xxxx port=6379 connect_timeout=30"

# 用戶登錄域
realm=zhaolong.org

# 證書
cert=/usr/local/etc/turn_server_cert.pem

# 證書key
pkey=/usr/local/etc/turn_server_pkey.pem
 
# 輸出log 
log-file=stdout

mobility

默認的turnserver日志沒有時間,可以借助于工具包:moreutils。 這個工具包的一個 ts 工具就是可以讓輸出的內(nèi)容加上時間格式。
注意:服務器內(nèi)置也有一個 ts 命令,但是這個不是我們要的,而是 openssl 的一個指令。

yum install moreutils
# 安裝完之后
$ man ts

然后接下來試著輸出:

echo -e "foo\nbar\nbaz" | ts '[%Y-%m-%d %H:%M:%S]'

這樣就會自動帶上時間格式了。重新啟動turnserver

nohup turnserver -c /usr/local/etc/turnserver.conf -v | ts '[%Y-%m-%d %H:%M:%S]'  >> /var/tmp/turn.log 2>&1 &

記得開放使用的端口:


image.png

可以用這個網(wǎng)址去測試stun和turn的有效性:
https://webrtc.github.io/samples/src/content/peerconnection/trickle-ice/

測試stun
測試stun的時候不需要輸入賬號密碼,只需要輸入stun:

image.png

測試turn
需要輸入turn地址,以turn:開頭,以及賬號密碼

image.png

5. 配置kurento服務器

進入kurento的鏡像編輯kurento的配置文件:

#進入鏡像
docker exec -it kms /bin/bash
#安裝vim
apt-get update
apt-get install vim
#進入配置文件夾
cd /etc/kurento/modules/kurento/
#編輯配置文件
vim WebRtcEndpoint.conf.ini

修改stun 和turn 信息

stunServerAddress=xx.xx.xx.xx
stunServerPort=pp
turnURL=username:userpwd@xx.xx.xx.xx:pp?transport=tcp

重啟kurento容器

#查看當前啟動的容器
docker ps 
docker restart  {kurento容器ID}

6. kurento-hello-world

git clone https://github.com/Kurento/kurento-tutorial-java.git
cd kurento-tutorial-java/kurento-hello-world
vim src/main/resources/static/js/index.js

在函數(shù)function uiStart()里,增加一個叫iceservers的變量,格式如下:

 var iceservers={
    "iceServers":[
        {
          urls:"stun:xx.xx.xx.xx:3478"
        },
        {
          urls:["turn:xx.xx.xx.xx:3478"]
            username:"xxxx",
            credential: "xxxx"
        }
    ]
  }

再修改底下的options變量:

 const options = {
    localVideo: uiLocalVideo,
    remoteVideo: uiRemoteVideo,
    mediaConstraints: { audio: true, video: true },
    onicecandidate: (candidate) => sendMessage({
      id: 'ADD_ICE_CANDIDATE',
      candidate: candidate,
    }),
      configuration: iceservers //修改在這里,增加了一個configuration的key
  };

啟動項目

mvn -U clean spring-boot:run -Dkms.url=ws://xx.xx.xx.xx:8888/kurento

啟動完之后用谷歌或者火狐瀏覽器打開demo頁面https://localhost:8443/
點擊start啟動

image.png

至此,最簡單的HelloWorld已經(jīng)完成。

【轉(zhuǎn)載請注明出處】: http://www.itdecent.cn/p/b625b7c0c2a4

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

友情鏈接更多精彩內(nèi)容