Unity + gRPCでCloud Speech-to-Textを利用する
Cloud Speech-to-Textストリーミング入力をUnityで実現
概要
Cloud Speech-to-Textのストリーミング入力を利用するための行ったことの説明
問題点
- 1.Grpc.Core
Unityでも動くらしいがサポートが切れている。 - 2.grpc-dotnet
サポートの切れたGrpc.Coreの替わりになるピュアC#の実装になっている。
C#でgRPCを実現するならこれでよいのだがUnity がサポートしている .NET のバージョンでは HTTP/2 の標準実装が利用できない。
解決策
CysharpさんがYetAnotherHttpHandlerというUnityで使えるHttp/2の通信実装を公開してくれている。（ありがとうございます。）
この、パッケージは HttpClient の通信レイヤーを差し替えられる様に作られている。
そのためgrpc-dotnetを組み合わせてgRPCを使ったGCPと通信ができるようにする。
必要なパッケージの追加
Cloud Speech-to-Textの利用するのに必要なパッケージを追加する
1. NuGet for Unityの追加
Google.Cloud.SpeechのパッケージなどNuGetで提供されているパッケージが必要になる。
NuGet for Unityを導入する。
UPMで https://github.com/GlitchEnzo/NuGetForUnity.git?path=/src/NuGetForUnity を追加すればプロジェクトにNuGet for Unityが追加される。
2. NuGetから必要なパッケージを追加
- Grpc.Net.Client
- Grpc.Tools
- System.IO.Pipelines
- Google.Cloud.Speech.V2
grpc-dotnet + YetAnotherHttpHandler でCloud Speech-to-Textを実現するために必要となるこれらのパッケージプロジェクトに追加する。
3. YetAnotherHttpHandlerの追加
UPMで https://github.com/Cysharp/YetAnotherHttpHandler.git?path=src/YetAnotherHttpHandler を追加すればプロジェクトにYetAnotherHttpHandlerが追加される。
サンプルプロジェクト
注意点
Unityでない環境であれば Google.Cloud.Speech.V2 が提供するデフォルトの使い方をすれば良い。
ただ、Unityで利用する場合は通信のレイヤーを差し替えてやる必要があるため以下の実装が必要になる。
通信レイヤーの差し替え
デフォルトであれば SpeechClientBuilder のインスタンスを作成して builder.Build とするだけで良いが、通信レイヤーの差し替えるために認証のインスタンスとHttpClientのインスタンスを作成してこれらをセットにしたチャネルをSpeechClientBuilderに差し替える。
これで Google.Cloud.Speech.V2 は内部で行う通信を YetAnotherHttpHandlerに依存してくれるのでUnity上でgRPCができるようになる。
Discussion