WebRTC配信とハードウェアエンコーダ
Download as PPTX, PDF2 likes3,958 views
Streaming Conference #1 で発表させていただきました https://streaming-lab.connpass.com/event/78549 頑張って完成させます！
WebRTC配信とハードウェアエンコーダ
- 2. 自己紹介 tnoho • とのほ • プログラミングと電子工作が趣味 • WebRTC界隈にはよく出没します • 通信屋で働くサラリーマン
- 3. WebRTCとは Web Real Time Communication の略 ブラウザだけでビデオチャットを行う技術 特徴 • ブラウザ同士でP2P通信するため配信サーバ不要 • 通信はデフォルトで暗号化 • ほとんどのブラウザが対応
- 4. WebRTCとHLS WebRTC • ブラウザから映像/音声を送受信できる。画面も可！ • 低遅延 (0.2秒くらい) • 専用の配信サーバが必要、大規模配信には向かない HLS • ファイルなのでCDNで超大規模配信が可能 • ブラウザでは受信のみ • 大きな遅延が発生するためリアルタイム配信には向かない
- 5. ImageFlux Live すごくね ピクシブさん と さくらインターネットさん の大規模配信 WebRTCとHLSのメリットを高い技術で組み合わせている • WebRTCなのでブラウザから映像/音声を送信できる • HLSなので大規模配信できる • ハードウェアエンコードなど頑張って低遅延にしている 受信者 ImageFlux Live WebRTC HTTPTS fileRTP Transcode WebRTC Gateway RTP Endpoint 配信者
- 6. ハードウェアエンコーダ (HW Enc) 重いエンコード処理をHWにやらせて効率を上げる手法 • VP9とかAV1とか重めのコーデックが来る未来を考えると要投資 • ただし、NVIDIAさんのサーバ向けGPUは高い スマートフォン向けのSoCはだいたい HW Enc が載っている H.264だとRaspberry Piにも載ってる！ そうだ、Raspberry Piで真似しよう！
- 8. RaspberryPi VideoCore VI OpenMAX IL 考えてた構成図 WebRTC Native Client (NaCl) に肉付けしてHLSを生成する 受信者 WebRTC HTTP 配信者 WebRTC NaCl VPX Decoder TS filePipe H.264 HW Decoder H.264 HW Encoder I420WebRTC Endpoint VPX H264 H264 VGAくらいが たぶん限界 720pくらいまでなら …VP8いけるかな？ MMALやる元気ないので チキンにOpenMAX経由
- 9. RaspberryPi Zero WebRTC NaCl 間に合うと思ってたの！ デモ ノウハウも デコーダも トランスコーダも ソースコードは持ってた… 時間はなかった VideoCore VI 受信者 IVF file WebRTC H264I420 FeedBack H.264 HW Encoder Capture WebRTC Endpoint
- 10. Thank You!