🔥

Numerai 2022Q2炉端会議メモ

2022/08/02に公開

機械学習

バグ報告に感謝するCTO（上）と、その間に栄養補給するCEO（下）

この記事は？

NumeraiのCEOとCTOが2022年07月07日に以下のYouTubeに公開した、炉端会議 (fireside chat)の中で、個人的に面白いと思った内容のメモです。

正確な一次情報を知りたい方は↑の動画をご覧になってください。Slidoのvote順の回答になっているため、大事そうな前半に特にフォーカスしています。

注）Numeraiって何ぞという方は、Numerai Japanese Docsをご覧ください
注）私の英語力の問題で以下の内容が正確ではない可能性があります
注）全てのQ&Aを網羅しているわけではありません

CEOから

まずは自分からオープニングだ。

NMR stake総額が100万NMRに近づいてきている。ずっと50万ドル相当のstakeを目指していて、これは1つのマイルストーンになる。

Numerai Supreme向けのトレーディングも開始した。

（↓拍手するNumerai運営のみなさん）

Numerai SupremeはNumerconでアナウンスした通り、従来のプロダクトであるNumerai Oneに比べてよりアグレッシブな商品だ。Numerai Oneとの違いはOptimizerが違う。

資金調達も積極的に行っていた。自分たちのファンドは主に機関投資家向けで、Numerai Supremeのキャパは現状1億ドルだが、我々は7,000万ドルの資金調達に成功した。これは非常に素晴らしいことで、今後とも自分たちのパフォーマンスを示し続けることで、より興味を持ってくれる人が増えてくれることだろう。

次に、Daily tradingについてだ。Numeraiの今後として、デイリーのトレーディングをやらない、というのは考えられない。ただその実現には、参加者に提出を自動化してもらうことが不可欠で、Numerai computeの改良を取り組んでいるところだ。いいところまで来ていると思う。

TC (True Contribution)について、TournamentのみならずSignalsにもTC stakingを導入した。実はSignalsではほぼTCがないんじゃないか？と思っていたけれども、実際はtournamentよりも高いTCを持っているSignalsのモデルもある。これはデータを自由に使えるSignalsだからこそで、とてもエキサイティングだ。

Universeについて、拡大を予定している。現状、世界の全ての株式を網羅しているわけではなく、流動性等を考慮し取引しやすいものを選んでいる。7月末までにUniverseを10~15% (+数100銘柄)拡大しようとしている。多くの参加者では、corrがこれだけで10%ほど上昇するようだ。参加者は何もする必要ない。そのままで、我々がUniverseを拡大するだけで、みんなのcorrやsharpeが上がるんだ。クールだろ？

もう1つリサーチしていることがあって、それは新しいターゲットについてだ。現状スコアリングに使われているターゲットは1つだが、それ以外にも色々なターゲットを提供している。スコアリングに使われているターゲットだけ使うのは典型的な間違いだ。他のターゲットにもっと情報がある。例えば、jerome_60はblendingによく効くターゲットだ。その他のターゲットを使うことで、しばしばオリジナルのターゲットで評価されるスコアも良くなるし、TCもそうだろう。ぜひ他のターゲットも考慮するモデリングをしてほしい。更に新しいターゲットのリリースも検討中だ。

Q & A

Daily roundsへどう参加者を導くつもりなのか？

How do you want to incentivize participation in daily rounds?

Submission windowはこれまでよりずっと短くなる。参加してくれる人にはより多くの報酬を払うことになるだろう。早くからStakeしてくれた人には報酬を弾む、とか色々考えているが、まずは参加者の提出自動化を進めたい。

TCはもう最終形態なのか？何か変えるつもりはあるか？

Do you believe TC is in its final form? If not what do you want to change?

Numerai Supremeを始めるのに伴って、Numerai oneのoptimizerにも一部僅かな変更を加えているため、TCにも影響は出るだろうが、まだ反映していない。商品や時間軸によってTCは変わるので、例えば、

new TC = 1 month numerai one TC + 3 month numerai one TC + 1 month supreme TC + 3 month numerai supreme TC

みたいにすることを考えている。これでTCがスムージングされ、安定化することが期待される。

Corr stakingを止める予定はあるか？CorrとTCのpayout factorを変える予定は？

Are there plans to remove core staking? Proposal different payout factors for core and tc?

TCの方が明らかに望ましい評価指標ではあるが、Corr廃止は今のところ考えていない。複雑性を回避するため、corrとTCでpayout factorを変えることはしようと思っていない。

Numerai ETF欲しいです

Any plans for numeri etf?

実は検討したことはあるんだが、障壁がいくつもあって止めたんだ。手数料の問題と、ショートが簡単にできなくなることとか...。ETFにしない方が自分たちはお金が稼げることがわかって、そして特に今はお金を稼ぐことは大事なことなので、やらないことにした。

TC導入後ファンドパフォーマンスは大きく向上したのか？

How much measurable improvement in the hedge fund has occurred since tc has been introduced?

参加者からテストデータへの予測を集めることはもうしていないのでわからないが、TCの定義上良くなってなければおかしいな。

V4データがV3データより優れている証拠はあるか？

Any stance on if v4 data performs better than v3?

内部の検証ではそうなっていて、だからV4データをリリースした。参加者がどのデータを使っているかわからないためそれ以上の検証は難しい。

ファンドのキャパシティについて、現在の目標を超えた成長戦略を持っているか？

In terms of capacity, do you have a growth plan beyond your current target? Could other strategies or even capacity constraints be crowdsourced?

3か月ターゲットで運用する、dailyで取引する、などは検討中だ。どちらもキャパの上昇に役立つ。

アカウント単位のstakingはいつっす？

Wen account level staking?

（CTO）SOON（笑）。すまない、Supremeでの資金調達等、他により優先順位が高いものに取り組んでいる。Staking systemは色々なシステムと繋がっていて、手を付けるのは中々大変だ。Daily roundsが始まって、仕様が固まったら取り組みたい。

5億ドルのAUMを達成するのはいつ？

Wen 500 million AUM?

数か月後には2億ドルには到達すると思う。3年の取引記録は多くの投資家が気にするとことだから、それが得られるタイミングになれば、比較的簡単に行くのではないかと思う。

NFTeeに使い道はない！？

Is there a plan for utility for NFTees?

(CTO) 実は秘密の使い道を考えている笑

Numerai computeのupdateはAWS onlyだそうだが、他のクラウドでも利用可能になるようなソリューションを考えていないのか？

I heard about the upcoming changes on compute will you keep it AWS only or will you also consider other clouds and a provider or provide a general extendable solution?

(CTO) 自分たちはAWSが一番なじみがある。Computeはもっと単純化したいと思っていて、compute liteと呼んでいる。今はAWSにフォーカスしているが、他の全てのクラウドにも拡張可能にしたい。

Benchmark modelsのリリースはいつ！？

Wen benchmark models?

Numerconで発表したやつだな。まだ取り組めていないが、完了させたいと思っている。とても参加者にとって助かるサービスだという認識はあるし、今月から始める。

新しい特徴量、ターゲットなどデータのアップデートはあるか？

Will there be an update on the data set in new features, better targets for tc, and daily data data yes updates on data set coming soon?

（CTO）ある。近いうちにアナウンスできると思う。

より多くのデータサイエンスコミュニティにリーチする具体的なプランはあるか？

Is there any concrete plan from the team to engage the wider data science and machine learning community?

(CEO) 今以上のものはない。Kaggleで株式のコンペがあり、discussionでNumeraiの名前が何度も登場したのは嬉しかった。我々は今まで通り、最も難しく最も報酬が得られるコンペを開催し続けていくことが大事だ。

(CTO) コミュニティのイベントはもっとやっていってもイイと思っている。最近はLondonでもmeetupがあった。次はNYとか、日本でもいいかもしれない。

Numercon 2023はやるの？

Is Numercon 2023 happening?

まだ考えてなかったが、日本でやってもいいかもね。

（↓日本でNumerconをやることを想像し笑みがこぼれるCEO）

Anson (CTO)アニキ、分散化はいつやるんだ？

Hey Anson bro when decentralization?

（CTO）Numerconでちょっと話したな。そのときのビジョンをまだ持ち続けている。パトリックとのどのチェーンを採用するか1月ごろに検討したが、arbitrumも落ちたし、自分の好みだったsolanaも落ちたし、いったいどれが安定して使えるものなのか、L1, L2の状況の進展をもう少し見極めたい。

Daily submissionで、データダウンロードから提出まで2時間以上は欲しいんやが可能か？

Regarding daily submissions, in the future is more than two hour window from data download to prediction deadline possible?

（CTO）これについて今取り組んでいるところで、例えばデータベンダーから自分たちにいつデータが届いて、自分たちはそれをどれだけ早くデータセットに作り直して参加者に提供できるのか...?提出されたモデルからメタモデルを作って、optimizationをして、取引実行までにどれくらいかかるのか？検討事項はたくさんあるが、なるべくフレッシュなデータを参加者には提供したいと思っている。

データ計算資源コストは第三世界の平均給与より高い。データサイエンスを使ってどう改善するつもりだ？

The cost of data computation is bigger than the average salary of third world countries. How do you plan to improve those places using data science?

Parquetをまずは使うんだ。あれはコンパクトだ。Eraごとにdownloadするとか、色々できることはあるし、そういうトリックについて話し合う場を設けてもいいかもしれない。

新しいトーナメントはどういったものになるのか、dailyで提出するものなのか、違う時間軸なのか？

Any plans for new tournaments for example daily submissions or different prediction horizons?

全く新規のトーナメントではなくて、現状のnumerai tournamentの中で、違う時間軸や違うターゲットで評価をしたりすることも考えている。3か月の予測だけでなく、1年の予測でもworkするような、そんなモデルを参加者には提出してほしい。

Numerbayのbuyerに自動で予測を提出できるようにならないか？

Any chance compute would feature automatic uploading of predictions to buyers at the Numerbay platform?

Numerbayはコミュニティ主導で、そういったシステムを作ることは可能だと思っている。

合成データはいつだ？

Wen synthetic data?

このトピックについてはforumにたくさんの良いアイデアがある。現状ターゲットを増やすことにもっぱら取り組んでいるが、自分たちのアジェンダには入っている。

Erasureの復活はいつ？

Wen erasure revival?

復活しない（笑

もっとモデルスロットをいただけませんでしょうか？

Can we get more model slots please?

(CTO) もちろん。50って十分じゃね？って思ってるけど、誰も反対しないなら、増やしてもイイかも。

NFTeeは本当に6,000個しかないのか？増えない？

Will there ever only be six thousand nftees or could there be more minted in the future?

増えないよ

仮想通貨を対象に同様のtournamentをやってもいいのでは？

Is the data right for starting a similar tournament for crypto?

(CEO) Numerai tournamentというより、Signalsは仮想通貨でやってもいいかもしれない。というのは、自分たちにとって始めるのが簡単だからだ。Crypto market neutral fundをやるのに、この世で自分たち以上に向いている存在はいないんじゃないか？と思ってる。いずれはやりたいね。

(CTO) カウンターパーティリスクが怖いけどね笑　株は色々規制があって安心だ。

成功をどう定量するのか？Numeraiは成功か？その成功は十分か？

How do we measure success? Are we successful? Is this good enough?

多くのヘッジファンドはパフォーマンスを隠している。AQRは自身のパフォーマンスを公表しているので、それと比較した自分たちのパフォーマンスを公開している。世界のヘッジファンドのLeaderboardがあるといいよな笑　自分たちはかなり上位に来ると思う。

内部のゴールとしては、Sharpeは2を超えたい。今1.2 - 1.4とかだ。素晴らしいのは、自分たちのパフォーマンスがTwo sigmaとか他との相関が低いことだ。ある投資家に「どうしてこんなことが可能なんだ？」と言われた。これは素晴らしいことで、そうじゃなければtwo sigma買っとけ、ってなるからな。

終わりに（訳者感想）

Numerconも4月にありましたし、今回は「ええーっ！？」みたいな新しいことは個人的にはありませんでした。Numerconで発表されたaccount level stakingとbenchmark modelsについては、自分含め期待していた方も多かったと思いますが、まだ手を付けられてないそうです^^;　そこはちょっと残念でしたね。

Numerai supremeが始まり、このご時世に（このご時世だからか？）かなりの額の資金調達ができているのはさすがですね。リチャードCEOも資金調達効率を考えてNYに移住ということで、運営の資金はさらに潤沢になっていくことでしょう（~~我々参加者の資金も潤沢にしてくださいお願いします~~）。

今年は株式、暗号資産市場がヤバイ（語彙力）ですが、だからこそNumeraiのようなmarket neutralファンドに注目が集まってるのかもしれません。今年は皆さん資産がヤバイ（語彙力）方も多いと思いますので投げ銭大丈夫です。いずれ始まるDaily roundsで溶かしてください。

Numercon 2023が日本開催になったら激アツですね笑　楽しみに待ちたいと思います。