<h1 id="%E3%81%AF%E3%81%98%E3%82%81%E3%81%AB">
<a class="header-anchor-link" href="#%E3%81%AF%E3%81%98%E3%82%81%E3%81%AB" aria-hidden="true"></a> はじめに</h1>
こんにちは！VoicyでAndroidエンジニアをしているおぎです。 
現在は主にVoicyのリスナー向けアプリの開発を担当しています。 
今回は生放送などのアーカイブ投稿時に冒頭の無音部分などを自動で編集できたら便利ではと思い、Android端末でFFmpegを利用し無音部分を切り取る方法について記事にしました。
<h1 id="ffmpegkit">
<a class="header-anchor-link" href="#ffmpegkit" aria-hidden="true"></a> FFmpegKit</h1>
モバイル開発でのFFmpeg利用にはMobileFFmpegライブラリが有名かと思いますが、こちらは2022年11月にリポジトリがアーカイブとなりました。今後はメンテナンスが継続されている<a href="https://arthenica.github.io/ffmpeg-kit/" target="_blank" rel="nofollow noopener noreferrer">FFmpegKit</a>ライブラリを利用するのが良さそうです。 
FFmpegKitはAndroidやiOSに加え、FlutterやReact Nativeのサポートも統合されています。 
ライセンスはLGPL-3.0で公開されています。 
<iframe id="zenn-embedded__18355995933aa" src="https://embed.zenn.studio/card#zenn-embedded__18355995933aa" data-content="https%3A%2F%2Fgithub.com%2Farthenica%2Fffmpeg-kit" frameborder="0" scrolling="no" loading="lazy"></iframe><a href="https://github.com/arthenica/ffmpeg-kit" style="display:none" target="_blank" rel="nofollow noopener noreferrer">https://github.com/arthenica/ffmpeg-kit</a>
<h2 id="ffmpegkit%E3%82%92android%E3%83%97%E3%83%AD%E3%82%B8%E3%82%A7%E3%82%AF%E3%83%88%E3%81%AB%E5%B0%8E%E5%85%A5">
<a class="header-anchor-link" href="#ffmpegkit%E3%82%92android%E3%83%97%E3%83%AD%E3%82%B8%E3%82%A7%E3%82%AF%E3%83%88%E3%81%AB%E5%B0%8E%E5%85%A5" aria-hidden="true"></a> FFmpegKitをAndroidプロジェクトに導入</h2>
FFmpegKitの導入はMobileFFmpegの際と同様にアプリケーションのbuild.gradleにライブラリ依存関係を追加するだけで導入出来ます。
<div class="code-block-container">
<div class="code-block-filename-container">build.gradle</div>
<pre class="diff-highlight "><code class="diff-highlight ">dependencies {
 implementation 'androidx.core:core-ktx:1.7.0'
 ~~省略~~
+ implementation 'com.arthenica:ffmpeg-kit-full:5.1'
 testImplementation 'junit:junit:4.13.2'
 androidTestImplementation 'androidx.test.ext:junit:1.1.3'
 androidTestImplementation 'androidx.test.espresso:espresso-core:3.4.0'
}
</code></pre>
</div><h2 id="%E4%BA%8B%E5%89%8D%E6%BA%96%E5%82%99">
<a class="header-anchor-link" href="#%E4%BA%8B%E5%89%8D%E6%BA%96%E5%82%99" aria-hidden="true"></a> 事前準備</h2>
まず、事前準備として冒頭部分に無音がある音源を用意しました。 
冒頭に約2秒の無音部分があります。 
<img src="https://storage.googleapis.com/zenn-user-upload/ba65d688654f-20221129.png" alt loading="lazy" class="md-img"> 
sample_voice_silent.mp3
<h2 id="%E9%9F%B3%E5%A3%B0%E3%83%A1%E3%83%87%E3%82%A3%E3%82%A2%E6%83%85%E5%A0%B1%E3%82%92%E5%8F%96%E5%BE%97%E3%81%99%E3%82%8B">
<a class="header-anchor-link" href="#%E9%9F%B3%E5%A3%B0%E3%83%A1%E3%83%87%E3%82%A3%E3%82%A2%E6%83%85%E5%A0%B1%E3%82%92%E5%8F%96%E5%BE%97%E3%81%99%E3%82%8B" aria-hidden="true"></a> 音声メディア情報を取得する</h2>
次に今回利用する音声ファイルの情報を確認してみます。 
今回は便宜上サンプルの音源(sample_voice_silent.mp3)をAndroid StudioのDevice File Explorerを使って事前に/data/user/0/アプリケーションID/files配下へ直接配置しました。 
<code>FFmpegKit.execute("コマンド")</code>という形式でFFmpegのコマンドを実行出来ます。 
また、情報を確認するだけならFFprobeKitにgetMediaInformationメソッドがあるのでこちらがオススメです。
<div class="code-block-container">
<div class="code-block-filename-container">MainFragment.kt</div>
<pre class="diff-highlight language-diff-kotlin"><code class="diff-highlight language-diff-kotlin">override fun onViewCreated(view: View, savedInstanceState: Bundle?) {
 super.onViewCreated(view, savedInstanceState)
+ val filePath = context?.filesDir?.path + File.separator + "sample_voice_silent.mp3"
+	val mediaInformation = FFmpegKit.execute("-i $filePath -f null -")
 //val mediaInformation = FFprobeKit.getMediaInformation(filePath)
+ Log.d("VOICE INFO BEFORE", mediaInformation.logsAsString)
}
</code></pre>
</div>ログには以下の情報が出力されました。sample_voice_silent.mp3は、 
長さ:08.07秒 
フォーマット:mp3 
チャンネル:ステレオ 
の音源であることが分かります。
<div class="code-block-container">
<div class="code-block-filename-container">Log</div>
<pre><code>D/VOICE INFO BEFORE: ffmpeg version n5.1.2 Copyright (c) 2000-2022 the FFmpeg developers
 built with Android (7155654, based on r399163b1) clang version 11.0.5 
 ~~省略~~
 [mp3 @ 0x758022f97dc0] Estimating duration from bitrate, this may be inaccurate
 Input #0, mp3, from '/data/user/0/com.example.ffmpeg_practice/files/sample_voice_silent.mp3':
 Metadata:
 TSS : GarageBand 10.4.7
 iTunNORM : 00001F65 00001F65 0000745F 0000745F 00000A4E 00000A4E 00007E86 00007E86 00000843 00000843
 iTunSMPB : 00000000 00000210 00000A50 0000000000056220 00000000 0001EB6E 00000000 00000000 00000000 00000000 00000000 00000000
 Duration: 00:00:08.07, start: 0.000000, bitrate: 132 kb/s
 Stream #0:0: Audio: mp3, 44100 Hz, stereo, fltp, 128 kb/s
 Stream mapping:
 Stream #0:0 -&gt; #0:0 (mp3 (mp3float) -&gt; pcm_s16le (native))
 ~~省略~~
D/VOICE INFO BEFORE: video:0kB audio:1390kB subtitle:0kB other streams:0kB global headers:0kB muxing overhead: unknown
</code></pre>
</div><h2 id="%E5%86%92%E9%A0%AD%E3%81%AE%E7%84%A1%E9%9F%B3%E9%83%A8%E5%88%86%E3%82%92%E5%88%87%E3%82%8A%E5%8F%96%E3%82%8B">
<a class="header-anchor-link" href="#%E5%86%92%E9%A0%AD%E3%81%AE%E7%84%A1%E9%9F%B3%E9%83%A8%E5%88%86%E3%82%92%E5%88%87%E3%82%8A%E5%8F%96%E3%82%8B" aria-hidden="true"></a> 冒頭の無音部分を切り取る</h2>
では、FFmpegのコマンドが使えることがわかったので、音声ファイルの冒頭にある無音部分を切り取ってみます！ 
<a href="https://ffmpeg.org/ffmpeg-all.html#silenceremove" target="_blank" rel="nofollow noopener noreferrer">FFmpegのドキュメント</a>を参照すると<code>silenceremove</code>という無音部分を削除する便利なコマンドがあるのでこちらを使っていきましょう。 
以下のコードでは、 
<code>start_periods=1</code> オーディオの先頭でトリミングを行う 
<code>start_duration=0</code> オーディオのトリミングを停止する前に無音を残す時間は0とする 
<code>stop_threshold=-50d</code> 閾値を-50dBとする 
というパラメータを設定しています。
<div class="code-block-container">
<div class="code-block-filename-container">MainFragment.kt</div>
<pre class="diff-highlight language-diff-kotlin"><code class="diff-highlight language-diff-kotlin">override fun onViewCreated(view: View, savedInstanceState: Bundle?) {
 super.onViewCreated(view, savedInstanceState)
 val filePath = context?.filesDir?.path + File.separator + "sample_voice_silent.mp3"
 val mediaInformation = FFmpegKit.execute("-i $filePath -f null -")
 //val mediaInformation = FFprobeKit.getMediaInformation(filePath)
 Log.d("VOICE INFO BEFORE", mediaInformation.logsAsString)

+ val outputFilePath = context?.filesDir?.path + File.separator + "output.mp3"
+ val removeSilence = FFmpegKit.execute("-i $filePath -af silenceremove=start_periods=1:start_duration=0:stop_threshold=-50dB $outputFilePath")
+	val outputmediaInformation = FFmpegKit.execute("-i $outputFilePath -f null -")
 //val outputMediaInformation = FFprobeKit.getMediaInformation(outputFilePath)
+ Log.d("VOICE INFO AFTER", outputMediaInformation.toString())
 }
</code></pre>
</div>出力は以下のようになりました。 
音声の長さが06.11秒と短くなっていることが分かります。
<div class="code-block-container">
<div class="code-block-filename-container">Log</div>
<pre><code>D/VOICE INFO AFTER: FFmpegSession{sessionId=3, 
	~~省略~~
 Input #0, mp3, from '/data/user/0/com.example.ffmpeg_practice/files/output.mp3':
 Metadata:
 TSS : GarageBand 10.4.7
 iTunNORM : 00001F65 00001F65 0000745F 0000745F 00000A4E 00000A4E 00007E86 00007E86 00000843 00000843
 iTunSMPB : 00000000 00000210 00000A50 0000000000056220 00000000 0001EB6E 00000000 00000000 00000000 00000000 00000000 00000000
 encoder : Lavf59.27.100
 Duration: 00:00:06.11, start: 0.025057, bitrate: 128 kb/s
 Stream #0:0: Audio: mp3, 44100 Hz, stereo, fltp, 128 kb/s
 Metadata:
 encoder : Lavc59.37
 Stream mapping:
 Stream #0:0 -&gt; #0:0 (mp3 (mp3float) -&gt; pcm_s16le (native))
	~~省略~~
</code></pre>
</div>波形で確認してみましょう！ 
冒頭部分にあった無音部分が削除されています。 
<img src="https://storage.googleapis.com/zenn-user-upload/9160804afff1-20221129.png" alt loading="lazy" class="md-img"> 
silenceremove適用前後の比較
<h1 id="%E3%81%BE%E3%81%A8%E3%82%81">
<a class="header-anchor-link" href="#%E3%81%BE%E3%81%A8%E3%82%81" aria-hidden="true"></a> まとめ</h1>
今回は、AndroidでFFmpegKitを用いてFFmpegを利用する手順を学ぶことが出来ました。 
FFmpegはコマンドが大変豊富にあり、deesserというサ行などの歯擦音の抑制やSpeech Normalizerのフィルターなどがあり様々なユースケースで選択肢の一つになりそうだと感じました。 
パラメータの調整をさらに知っていけば色々なことが出来そうです！

AndroidでFFmpegを利用し無音部分を切り取る

FFmpegKitをAndroidプロジェクトに導入

Discussion