WebRTCクライアント
Webリアルタイムコミュニケーション(WebRTC)は、ブラウザおよびネイティブアプリでのリアルタイム、ピアツーピア通信のための標準とAPIのセットです。
KtorのWebRTCクライアントは、マルチプラットフォームプロジェクトでリアルタイムのピアツーピア通信を可能にします。WebRTCを使用すると、次のような機能を構築できます。
- ビデオ通話と音声通話
- マルチプレイヤーゲーム
- 共同作業アプリケーション(ホワイトボード、エディタなど)
- クライアント間の低遅延データ交換
依存関係の追加
WebRtcClientを使用するには、ビルドスクリプトにktor-client-webrtcアーティファクトを含める必要があります。
クライアントの作成
WebRtcClientを作成する際は、ターゲットプラットフォームに基づいてエンジンを選択します。
- JS/Wasm:
JsWebRtc– ブラウザのRTCPeerConnectionとメディアデバイスを使用します。 - Android:
AndroidWebRtc–PeerConnectionFactoryとAndroidメディアAPIを使用します。
その後、HttpClientと同様にプラットフォーム固有の設定を提供できます。ICEが正しく機能するには、STUN/TURNサーバーが必要です。coturnのような既存のソリューションを使用できます。
val jsClient = WebRtcClient(JsWebRtc) {
defaultConnectionConfig = {
iceServers = listOf(WebRtc.IceServer("stun:stun.l.google.com:19302"))
}
}val androidClient = WebRtcClient(AndroidWebRtc) {
context = appContext // Required: provide Android context
defaultConnectionConfig = {
iceServers = listOf(WebRtc.IceServer("stun:stun.l.google.com:19302"))
}
}接続を作成し、SDPをネゴシエートする
WebRtcClientを作成したら、次のステップはピア接続を作成することです。ピア接続は、2つのクライアント間のリアルタイム通信を管理するコアオブジェクトです。
接続を確立するために、WebRTCはSession Description Protocol (SDP)を使用します。これには3つのステップがあります。
- 一方のピア(発信者)がオファーを作成します。
- もう一方のピア(着信者)がアンサーで応答します。
- 両方のピアが互いの記述を適用してセットアップを完了します。
// Caller creates a connection and an offer
val caller = jsClient.createPeerConnection()
val offer = caller.createOffer()
caller.setLocalDescription(offer)
// オファーのSDPを、シグナリングメカニズムを介してリモートピアに送信します
// Callee receives the offer and creates an answer
val callee = jsClient.createPeerConnection()
callee.setRemoteDescription(
WebRtc.SessionDescription(WebRtc.SessionDescriptionType.OFFER, remoteOfferSdp)
)
val answer = callee.createAnswer()
callee.setLocalDescription(answer)
// アンサーのSDPをシグナリングを介して発信者に送り返します
// Caller applies the answer
caller.setRemoteDescription(
WebRtc.SessionDescription(WebRtc.SessionDescriptionType.ANSWER, remoteAnswerSdp)
)ICE候補の交換
SDPネゴシエーションが完了しても、ピアはネットワークを介して接続する方法を発見する必要があります。Interactive Connectivity Establishment (ICE)により、ピアは互いへのネットワークパスを見つけることができます。
- 各ピアは自身のICE候補を収集します。
- これらの候補は、選択したシグナリングチャネルを介して他のピアに送信する必要があります。
- 両方のピアが互いの候補を追加すると、接続が成功します。
// ローカル候補を収集して送信する
scope.launch {
caller.iceCandidates.collect { candidate ->
// candidate.candidate, candidate.sdpMid, candidate.sdpMLineIndex をリモートピアに送信する
}
}
// リモート候補を受信して追加する
callee.addIceCandidate(WebRtc.IceCandidate(candidateString, sdpMid, sdpMLineIndex))
// オプションで、すべての候補が収集されるまで待機する
callee.awaitIceGatheringComplete()Ktorはシグナリングを提供しません。オファー、アンサー、ICE候補を交換するには、WebSockets、HTTP、または別のトランスポートを使用してください。
データチャネルの使用
WebRTCはデータチャネルをサポートしており、ピア間で任意のメッセージを交換できます。これはチャット、マルチプレイヤーゲーム、共同作業ツール、またはクライアント間の低遅延メッセージングに役立ちます。
チャネルの作成
片側でチャネルを作成するには、.createDataChannel()メソッドを使用します。
val channel = caller.createDataChannel("chat")その後、反対側でデータチャネルイベントをリッスンできます。
scope.launch {
callee.dataChannelEvents.collect { event ->
when (event) {
is DataChannelEvent.Open -> println("Channel opened: ${event.channel}")
is DataChannelEvent.Closed -> println("Channel closed")
else -> {}
}
}
}メッセージの送受信
チャネルは、Kotlin開発者になじみのあるChannelのようなAPIを使用します。
// メッセージを送信する
scope.launch { channel.send("hello") }
// メッセージを受信する
scope.launch { println("received: " + channel.receiveText()) }メディアトラックの追加と監視
データチャネルに加えて、WebRTCはオーディオおよびビデオのメディアトラックをサポートしています。これにより、ビデオ通話や画面共有などのアプリケーションを構築できます。
ローカルトラックの作成
ローカルデバイス(マイク、カメラ)からオーディオまたはビデオトラックをリクエストできます。
val audio = rtcClient.createAudioTrack {
echoCancellation = true
}
val video = rtcClient.createVideoTrack {
width = 1280
height = 720
}
val pc = jsClient.createPeerConnection()
pc.addTrack(audio)
pc.addTrack(video)Web上では、これはnavigator.mediaDevices.getUserMediaを使用します。Android上では、Camera2 APIを使用し、マイク/カメラのパーミッションを手動でリクエストする必要があります。iOS上では、AVFoundation APIを使用し、同様にパーミッションを手動でリクエストする必要があります。クライアントは、指定された制約に従って最適なメディアデバイスを見つけようとします。見つからない場合はWebRtcMedia.DeviceExceptionをスローします。
WebRtcClient、WebRtcPeerConnection、WebRtcMedia.Trackおよびその他のインターフェースはAutoCloseableです。不要になったときにリソースを解放するため、必ずclose()メソッドを呼び出してください。
リモートトラックの受信
リモートメディアトラックをリッスンすることもできます。
scope.launch {
pc.trackEvents.collect { event ->
when (event) {
is TrackEvent.Add -> println("Remote track added: ${event.track.id}")
is TrackEvent.Remove -> println("Remote track removed: ${event.track.id}")
}
}
}制限事項
WebRTCクライアントは実験段階であり、以下の制限事項があります。
- シグナリングは含まれていません。独自のシグナリング(例えば、WebSocketsまたはHTTPを使用)を実装する必要があります。
- サポートされているプラットフォームはJavaScript/WasmとAndroidです。iOS、JVMデスクトップ、およびKotlin/Nativeのサポートは将来のリリースで計画されています。
- パーミッションはアプリケーションで処理する必要があります。ブラウザはマイクとカメラへのアクセスをユーザーに促しますが、Androidはランタイムパーミッションのリクエストが必要です。
- 基本的なオーディオおよびビデオトラックのみがサポートされています。画面共有、デバイス選択、サイマルキャスト、高度なRTP機能はまだ利用できません。
- 接続統計は利用可能ですが、プラットフォームによって異なり、統一されたスキーマには従っていません。
