<aside class="msg message">!<div class="msg-content">
本記事はambrテックブログへ2023/7/18に投稿した記事を<a href="https://zenn.dev/p/ambr_inc" target="_blank">ambr Tech Blog</a>のために移植したものになります。
</div></aside>
<h2 id="%E3%81%AF%E3%81%98%E3%82%81%E3%81%AB" data-line="4" class="code-line">
<a class="header-anchor-link" href="#%E3%81%AF%E3%81%98%E3%82%81%E3%81%AB" aria-hidden="true"></a> はじめに</h2>
初めまして！ambrでUnityエンジニアをしているサックーと申します。
弊社のメタバースプラットフォームxambrにおいて、スマートフォン対応をすることとなり現在鋭意作業中となっています。 
その中で課題となったのが使用可能メモリがこれまで対応していたデバイスよりも少ないことでした。
これまでの対応デバイスの中で最も搭載メモリが少ないのはMeta Quest2で、CPU・GPU共有のRAM合計は6GBです。 
一方iPhoneにおいては搭載メモリがそれよりも少ない機種が多くありました。
そこでiPhone対応をしていくにあたって、システム部分で使用する容量とCG側で使用可能な容量を厳密に調べることが必要になったわけです。 
この記事ではその調査の中で得た知見の概要をまとめたものになります。
<h3 id="%E4%BD%BF%E7%94%A8%E7%92%B0%E5%A2%83" data-line="17" class="code-line">
<a class="header-anchor-link" href="#%E4%BD%BF%E7%94%A8%E7%92%B0%E5%A2%83" aria-hidden="true"></a> 使用環境</h3>
<ul data-line="19" class="code-line">
<li data-line="19" class="code-line">Unity 2021.1.28f1 URP</li>
<li data-line="20" class="code-line">Memory Profiler 0.5.0-preview.1</li>
<li data-line="21" class="code-line">Xcode 14.3</li>
<li data-line="22" class="code-line">iOS16.4.1</li>
</ul>
<h2 id="1%E3%82%A2%E3%83%97%E3%83%AA%E3%81%8C%E4%BD%BF%E7%94%A8%E5%8F%AF%E8%83%BD%E3%81%AA%E3%83%A1%E3%83%A2%E3%83%AA%E5%AE%B9%E9%87%8F" data-line="24" class="code-line">
<a class="header-anchor-link" href="#1%E3%82%A2%E3%83%97%E3%83%AA%E3%81%8C%E4%BD%BF%E7%94%A8%E5%8F%AF%E8%83%BD%E3%81%AA%E3%83%A1%E3%83%A2%E3%83%AA%E5%AE%B9%E9%87%8F" aria-hidden="true"></a> 1アプリが使用可能なメモリ容量</h2>
まず大前提として搭載したRAMの量に応じた１アプリで使用可能なメモリ容量がOSによって定められています。使用メモリがこの値を超えた瞬間に容赦なくアプリがクラッシュします。
<img src="https://res.cloudinary.com/zenn/image/fetch/s--wGjLt10l--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_1200/https://storage.googleapis.com/zenn-user-upload/deployed-images/d578d9481bb7b82ef9f4a16e.png%3Fsha%3D7840037d4ee4bcb98822bac38784918c7f819be9" loading="lazy" class="md-img"> 
使用可能メモリ量
「使用可能」の値はXcodeのDebugNavigatorで確認した数値で、実際にこの値を超えるとアプリが落ちることを確認しました。 
搭載RAMが増えたからと言ってそれに比例して使用可能量が増えるわけではないようです。 
もしかしたらiOSのバージョンによってこの値は変わるのかもしれません。
<h2 id="memoryprofiler%E3%81%8C%E6%B6%88%E8%B2%BB%E3%81%99%E3%82%8B%E3%83%A1%E3%83%A2%E3%83%AA%E9%87%8F" data-line="35" class="code-line">
<a class="header-anchor-link" href="#memoryprofiler%E3%81%8C%E6%B6%88%E8%B2%BB%E3%81%99%E3%82%8B%E3%83%A1%E3%83%A2%E3%83%AA%E9%87%8F" aria-hidden="true"></a> MemoryProfilerが消費するメモリ量</h2>
Unityでの開発において、メモリの使用量を計測するにはMemoryProfilerを使うと思いますが、実はその計測自体がメモリを消費し、計測後も残り続けるということが分かりました。今回使用した環境では１回の計測でおよそ111MBほど増えるようで、計測のたびに溜まっていくのでそのうちあふれてクラッシュしてしまいます。なので一度の実行においては基本的には一度だけSnapshotを撮るのがいいでしょう。また、MemoryProfilerを使えないのは開発上よくないため、この分の余裕を持ったメモリ設計をすることが推奨されます。
<img src="https://res.cloudinary.com/zenn/image/fetch/s--eWwOa8cA--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_1200/https://storage.googleapis.com/zenn-user-upload/deployed-images/1d7eb2971cab3fa3b19ffa25.png%3Fsha%3D0face92e38576bec8e55859f597f418ea4190cca" loading="lazy" class="md-img"> 
1度の実行で2回目に撮ったMemoryProfilerのSnapshot
<h2 id="xcode%E3%81%AEdebugnavigator%E3%81%A7%E8%A6%8B%E3%82%89%E3%82%8C%E3%82%8B%E3%83%A1%E3%83%A2%E3%83%AA%E4%BD%BF%E7%94%A8%E9%87%8F%E3%81%A8unity%E3%81%AEmemoryprofiler%E3%81%A7%E8%A6%8B%E3%82%89%E3%82%8C%E3%82%8B%E3%83%A1%E3%83%A2%E3%83%AA%E4%BD%BF%E7%94%A8%E9%87%8F%E3%81%AE%E5%B7%AE" data-line="42" class="code-line">
<a class="header-anchor-link" href="#xcode%E3%81%AEdebugnavigator%E3%81%A7%E8%A6%8B%E3%82%89%E3%82%8C%E3%82%8B%E3%83%A1%E3%83%A2%E3%83%AA%E4%BD%BF%E7%94%A8%E9%87%8F%E3%81%A8unity%E3%81%AEmemoryprofiler%E3%81%A7%E8%A6%8B%E3%82%89%E3%82%8C%E3%82%8B%E3%83%A1%E3%83%A2%E3%83%AA%E4%BD%BF%E7%94%A8%E9%87%8F%E3%81%AE%E5%B7%AE" aria-hidden="true"></a> XcodeのDebugNavigatorで見られるメモリ使用量とUnityのMemoryProfilerで見られるメモリ使用量の差</h2>
iPhone開発においてメモリの使用量を見る手段はUnityのMemoryProfilerだけではなく、XcodeのDebugNavigatorもありますよね。この２つで見られるメモリ使用量は異なっていて、それはそれぞれが監視している対象が異なるためです。下の例ではXcodeからは1.26GB消費していることになっていますが、MemoryProfilerからは366MBしか見えていません。
<img src="https://res.cloudinary.com/zenn/image/fetch/s--RqFLg8pL--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_1200/https://storage.googleapis.com/zenn-user-upload/deployed-images/a9787ee798568ddb9c6e2a4f.png%3Fsha%3Db4ce27357acfb11eeb3d7712b8f5ef5bb4e20c4d" loading="lazy" class="md-img"> 
Xcodeから見たメモリ使用量
<img src="https://res.cloudinary.com/zenn/image/fetch/s---0L_WoDb--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_1200/https://storage.googleapis.com/zenn-user-upload/deployed-images/4e9cc368be266621af8e73b9.png%3Fsha%3D3ef0476dd2fd223592cc8476efbeb4b12b7498bd" loading="lazy" class="md-img"> 
MemoryProfilerから見たメモリ消費量
MemoryProfilerが監視しているのは、CGアセットやC#スクリプトなどのUnity内のMagagedな領域だけであり、外部ライブラリなどに含まれる大体のdllやOS側のシステムで処理される動画などのNativeな要素は対象外となっています。Xcodeからはそれらを合わせたアプリ全体のメモリ使用量を監視しているため、上記制限はこちらを気にすることになります。
<h2 id="%E5%8B%95%E7%94%BB%E5%86%8D%E7%94%9F%E6%99%82%E3%81%AE%E3%83%A1%E3%83%A2%E3%83%AA%E4%BD%BF%E7%94%A8%E9%87%8F" data-line="54" class="code-line">
<a class="header-anchor-link" href="#%E5%8B%95%E7%94%BB%E5%86%8D%E7%94%9F%E6%99%82%E3%81%AE%E3%83%A1%E3%83%A2%E3%83%AA%E4%BD%BF%E7%94%A8%E9%87%8F" aria-hidden="true"></a> 動画再生時のメモリ使用量</h2>
弊社のシステムではアプリ内で動画を再生する仕組みがあり、ローカルに全体をキャッシュして再生するダウンロード方式と、HLSを使用したストリーミング方式に対応しています。そのどちらにおいても再生時のメモリ使用量の増加はMemoryProfilerにはほとんど現れず、もっぱらXcode側に現れます。AVProを使っているのですが、処理としては動画をテクスチャに書き込み、マテリアルがそれを参照することで描画しているようです。 
この背景を元に、動画の何の値がメモリ使用量に影響を与えているのかを確認するために、
<ul data-line="59" class="code-line">
<li data-line="59" class="code-line">解像度</li>
<li data-line="60" class="code-line">ビットレート</li>
<li data-line="61" class="code-line">フレームレート</li>
<li data-line="62" class="code-line">動画長</li>
</ul>
を変えて調べてみました。
 
その結果メモリ使用量は解像度（ピクセル数）に比例し、他の要素の影響はほぼないことが分かりました。これは動画の処理時に非圧縮のピクセルデータを扱うためと思われます。具体的にはストリーミングの場合1ピクセル当たり37.5B程度消費すると計算でき、実際の解像度に当てはめると 

<ul data-line="70" class="code-line">
<li data-line="70" class="code-line">4096*2048の場合　300MB</li>
<li data-line="71" class="code-line">1920*1080の場合　74MB</li>
<li data-line="72" class="code-line">1024*576の場合　21MB</li>
</ul>
程度と算出され実測値もそれに近いものでした。この比例係数はダウンロードの方が大きく、バッファ量の違いが影響している可能性がありますが未検証です。仮に1ピクセル当たりの1フレーム分の値はRGBの3Bとすると、ストリーミングでは12フレーム程度バッファしている可能性があります。
<h2 id="%E6%8F%8F%E7%94%BB%E8%A7%A3%E5%83%8F%E5%BA%A6%E3%81%AB%E3%82%88%E3%82%8B%E5%BD%B1%E9%9F%BF" data-line="76" class="code-line">
<a class="header-anchor-link" href="#%E6%8F%8F%E7%94%BB%E8%A7%A3%E5%83%8F%E5%BA%A6%E3%81%AB%E3%82%88%E3%82%8B%E5%BD%B1%E9%9F%BF" aria-hidden="true"></a> 描画解像度による影響</h2>
Unityでカメラを使用する場合、内部では描画解像度に合わせた解像度のRenderTextureが生成されています。そしてこのRenderTextureももちろんメモリを消費しています。iPhoneは機種によってディスプレイの解像度が異なるわけでして、高解像度の機種ではより多くのメモリを消費してしまいます。 
1334x750のiPhone8では90.3MBだった消費量が、2436x1125のiPhoneXでは161.1MBに増えています。(個数も変わっていますが小さなサイズの物でした) 
<img src="https://res.cloudinary.com/zenn/image/fetch/s--_T_6-GID--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_1200/https://storage.googleapis.com/zenn-user-upload/deployed-images/70c5c3de18f972c2dd23b8f5.png%3Fsha%3Da9ca43c758a0d836854cf76fead68054ff1e2bc0" loading="lazy" class="md-img"> 
iPhone8
<img src="https://res.cloudinary.com/zenn/image/fetch/s--yut4ldvG--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_1200/https://storage.googleapis.com/zenn-user-upload/deployed-images/63cf25107a294b0d7dba99f6.png%3Fsha%3Db7c465efd8c4c0d0b1e53513c4d049e2d08a8664" loading="lazy" class="md-img"> 
iPhoneX
しかしこれを緩和する方法としてFixedDPIという機能を使うことができます。これは実際の機器のDPIを無視して指定したDPI相当の解像度で描画する設定です。
<img src="https://res.cloudinary.com/zenn/image/fetch/s--Sr09BhgX--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_1200/https://storage.googleapis.com/zenn-user-upload/deployed-images/372865c8ec9e6e78d2f26d6f.png%3Fsha%3D48d5e7bf63d32805cfc90b3926f557f3fa235e31" loading="lazy" class="md-img"> 
Fixed DPIの設定
本来iPhoneXは458DPIですが、326と指定することで1722x800の解像度で描画されます。するとメモリ消費を105.3MBに抑えることができました。
<img src="https://res.cloudinary.com/zenn/image/fetch/s--oS9JkADR--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_1200/https://storage.googleapis.com/zenn-user-upload/deployed-images/fc168edd160f2e63430285fb.png%3Fsha%3D5fd93fb0d12e7745015f9c1548dcbac458518382" loading="lazy" class="md-img"> 
DPIを326に指定した場合のiPhoneX
もちろんその分解像度が落ちているわけですが、オリジナルの解像度密度が3Dアプリケーションには過剰な節があり、視認性を確保できるUIデザインによって体験を損なわずにパフォーマンス確保を両立可能だと考えています。また、異なる機種間でも同じ解像感に揃えられるというメリットもあります。
<h2 id="cg%E3%81%AB%E9%96%A2%E3%81%99%E3%82%8B%E3%83%A1%E3%83%A2%E3%83%AA%E4%BD%BF%E7%94%A8%E9%87%8F" data-line="98" class="code-line">
<a class="header-anchor-link" href="#cg%E3%81%AB%E9%96%A2%E3%81%99%E3%82%8B%E3%83%A1%E3%83%A2%E3%83%AA%E4%BD%BF%E7%94%A8%E9%87%8F" aria-hidden="true"></a> CGに関するメモリ使用量</h2>
ようやく本来知りたかったCGで使うメモリ容量に来ました。シェーダーやパーティクルなどいくつかの要素がありますが、ここでは支配的な要素であるテクスチャとメッシュについて取り上げます。
<h3 id="%E3%83%86%E3%82%AF%E3%82%B9%E3%83%81%E3%83%A3" data-line="102" class="code-line">
<a class="header-anchor-link" href="#%E3%83%86%E3%82%AF%E3%82%B9%E3%83%81%E3%83%A3" aria-hidden="true"></a> テクスチャ</h3>
これは基本的に解像度と圧縮形式によって決まります。元のファイルのプロパティにかかわらず、Unity上でのImportSettingsによって決定されます。 
テクスチャは膨大な量になりがちですが、<a href="https://docs.unity3d.com/ja/2019.4/Manual/TextureStreaming.html" target="_blank" rel="nofollow noopener noreferrer">Texture Streaming</a>とMipmapの機能を使うことでメモリの消費量を制御可能です。
<img src="https://res.cloudinary.com/zenn/image/fetch/s--pRyGlkj3--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_1200/https://storage.googleapis.com/zenn-user-upload/deployed-images/d605b76ed54aa353b3b7b920.png%3Fsha%3Da5a4fc3201e6d973c2476e40a42beff1c32cf9c3" loading="lazy" class="md-img"> 
TextureStreamingの設定
QualitySettingsで設定できるMemoryBudgetという値は、Streaming Mipmapが有効でMipmapが存在するテクスチャが、合計で使用するメモリ容量上限を指定するものになります。この場合は100MBに指定しているので、シーン上にどれだけ対象のテクスチャがあったとしても、メモリ消費量はこれ以下に抑えられます。 
仕組みとしては、カメラとの距離とBudgetの懐事情を勘案して、適切な解像度のMipmapがロードされるというものです。あまりに小さい値だと近場の画像もかなり低い解像度になってしまいますが、スマホの小さい画面では割と目立たなかったりするので相性がいいと感じました。 
ただしTexture Streamingの対象外のテクスチャはBudgetを超えてメモリを消費するので注意が必要です。特にSpriteはMipmapを持てずに対象とできないので気を付けましょう。
<h3 id="%E3%83%A1%E3%83%83%E3%82%B7%E3%83%A5" data-line="114" class="code-line">
<a class="header-anchor-link" href="#%E3%83%A1%E3%83%83%E3%82%B7%E3%83%A5" aria-hidden="true"></a> メッシュ</h3>
メッシュにはTexture Streamingのような機能がないので、シーン上に存在するメッシュがすべてメモリに載ってしまいます。さらにアセットの情報からメモリ消費量を予測する計算式のようなものは見つけることができませんでした。MeshのAssetファイルに何やら頂点が持つデータ容量の記載がありますが、これがそのままメモリ消費量と一致するわけではありません。
<img src="https://res.cloudinary.com/zenn/image/fetch/s--Lv1jc15k--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_1200/https://storage.googleapis.com/zenn-user-upload/deployed-images/dc2dc9e01ec8370d79795966.png%3Fsha%3D065ab2ba3ec813168482c778974bba712fefc3e5" loading="lazy" class="md-img"> 
MeshのAssetファイルのInspector
<img src="https://res.cloudinary.com/zenn/image/fetch/s--08SktIO3--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_1200/https://storage.googleapis.com/zenn-user-upload/deployed-images/a75affd1b2035860bcbf7262.png%3Fsha%3D318ee33962fdb848ab9df0950f4d7536512de19d" loading="lazy" class="md-img"> 
実際のメモリ消費量
そこで複数のメッシュについて頂点数とメモリ消費量の関係を調べたところある程度の法則が見えてきました。 
式にすると頂点数×4×48 Bがおよそのメモリ消費量のようです。 
48Bというのは１頂点当たりのUV0までのデータ量で、4の係数部分は実際に調べた中では3.58~4.2までの幅がありました。 
この係数は１頂点が属するポリゴンの数が関係ありそうですが定かではないです。メッシュによってはUVを複数持っていますが、おおむねこの式が使えました。
<h2 id="%E3%81%BE%E3%81%A8%E3%82%81" data-line="129" class="code-line">
<a class="header-anchor-link" href="#%E3%81%BE%E3%81%A8%E3%82%81" aria-hidden="true"></a> まとめ</h2>
今回初めてここまでメモリ消費量と向き合いましたが、いろいろと面白い事実を知れて大変ではありつつ楽しかったです。Unityを使ったiPhoneアプリ開発で、メモリ消費量と戦う方の助けとなれば幸いです！

Unity製iPhoneアプリのメモリ使用量の調査まとめ

1アプリが使用可能なメモリ容量

MemoryProfilerが消費するメモリ量

XcodeのDebugNavigatorで見られるメモリ使用量とUnityのMemoryProfilerで見られるメモリ使用量の差

Discussion