2023 年の振り返り
もう年が明けて 2 月になってしまいましたが、振り返りを書かないと過去の出来事を忘れそうなので、書いておきます。去年の振り返りは 2022 年の振り返りと 2023 年の抱負 〜オープンロジに 1 人目の機械学習エンジニアとして入社して〜 です。
仕事
2023 年の振り返り
データ基盤整備
仕事面では 2023 年のミッションはデータ基盤の整備でした。3 月に優秀なデータエンジニアの人が入社してくれて、データ整備は大きく進捗しました。特に terraform に強みのある方で、メンテナンス性の高いモジュールの構成や CI/CD の導入をグイグイ進めていただき、私としても terraform についてだいぶ勉強になりました。
2023年の年始ごろから、アプリケーションの RDS を BigQuery に同期するサービスとして Datastream for BigQuery の導入を検討していました。Datastream for BigQuery を本番導入しようとしている話で紹介したような技術調査を経て、現在はある程度安定稼働する状態まで来ました。データ基盤の中でも lake 層の構築という観点では、概ね目的を達成したと言えます。
色々とトラブルがありましたが、特に印象に残っているのは予算の問題です。Datastream を稼働したときの料金を事前に見積もって経営陣に共有していましたが、その見積もりが外れ、想定外に大きなお金がかかってしまいました。その後、見積もりをやり直してシステム予算の稟議を通しましたが、システム予算について深く考えたのは初めてで勉強になりました。ちなみに、Datastream を稼働した際に発生する料金の多くは
- Datastream による Backfill(初回の全数同期)と CDC(差分同期)で発生する料金
- BigQuery にデータを書き込む際に発生する料金(Streaming Insert ではなく Analysis として課金)
が占めています。特に BigQuery への書き込み料金は予想以上に高額でした。Datastream 関連で発生する料金を事前に見積もるのは非常に難しく、ほとんど当たりません。
採用
最近はカジュアル面談や面接に出る機会が少し増えてきました。2022 年も何度か面接に出ましたが、ファシリテーションは行わずサブ面接官みたいな立ち位置でした。2023 年後半からファシリテーションなども担当するようになり、ある程度自立して面接ができるようになりました。と言っても、今数えたら 2023 年と 2024 年 1 月でカジュアル面談が 3 件、一次面接 4 件と全然少ないですね(笑)
アナリティクスエンジニアの募集要項の作成などにも関わり、採用の経験値は増えてきているように感じます。採用についてはまだまだ素人ですが、前職では経験できなかった部分なので、すごく勉強になっています。
技術広報
また、11 月に Findy さんが主催する「物理と人をつなぐデータドリブンな物流システム開発〜データ利活用とアーキテクチャの考え方〜」というイベントで登壇しました。
↓スライド
以前から社外に対してオープンロジのデータ活用をアピールしたいと思っていたので、その夢が叶いました。イベントを開催していただいた Findy さんと私に声をかけてくれた人事の方には感謝しかありません。とは言え、まだまだアピールが足りないので、色々と成果を上げてまた発表したいですね。余談ですが、一部のスライドがいつの間にか会社の採用資料などに掲載されていて、ちょっとびっくりしました。採用でも使ってもらえてありがたいです。
年末の倉庫の応援
年末に提携倉庫の作業人員が不足したため、急遽休みを返上して作業の手伝いに行きました。別件で出荷前に商品の買い合わせ情報から箱の大きさを予測するシステムを作っていますが、倉庫作業中にひらめいた特徴量を使ったところ、精度が向上しました。現物を見ると予測対象に対する解像度が上がることを実感しました。
倉庫作業は腰にきます。私は 2 日だけ手伝いましたが、ヘトヘトになりました。いつも作業していただいている倉庫の方はすごいですね。
2024 年でやりたいこと
2024 年では可視化を進めていく予定です。データ基盤のマート層やデータウェアハウス層の整備やダッシュボードの開発です。Redash と Looker Studio を使っていますが、お客様に提供するようなプロダクトレベルのダッシュボードを作るにはやや力不足な気がしています。他社さんはダッシュボードの品質管理とかレビューってどうしてるんでしょうか?ツールも含めて基礎からご教示いただきたい気持ちです。
また、相変わらず人が足りないので、採用には力を入れたいです。上記のような課題感から、今年はアナリティクスエンジニアを募集しています。
私生活
2023 年の振り返り
家を買った
一軒家を買ったことが 2023 年最大のイベントです。5 月ごろに契約して、ローンの手続きや間取り・設備などの設計など色々なイベントがあり、てんてこ舞いだった記憶があります。今は建築フェーズに入り、引っ越しに向けての準備や火災保険の検討を進めています。賃貸とは比べ物にならないほど、手続きが複雑で考えることも多く、非常に勉強になりました。
詳しく書くと文章が長くなりすぎるので、ひと段落したら、改めて知見をまとめようと思っています。
新婚旅行
3 月に 1 週間休暇を取って、宮古島に新婚旅行に行きました。天候にも恵まれ、ウェディングフォトやシュノーケリング体験などをしてきました。信じられないほど海が綺麗で、水中カメラを持っていかなかったことを後悔しています。まさか自分がシュノーケリングのような陽キャなアクティビティを楽しめるとは思っていませんでした(笑)
ちなみに、ウェディングフォトの事前予約が成立していないことに現地で気づいて、慌てて写真屋に電話をかけまくってなんとか空いているところに予約を入れました。当時は死ぬほど冷や汗をかきましたが、結果的には予定よりも充実したプランで撮影できました。宮古島は過去の旅行の中で一番楽しかったですが、このトラブルだけは二度と経験したくない。。。
ピクミン 4
待望のピクミン 4 がリリースされました。まじで面白い!オッチンが強すぎる。唯一の不満は DLC が一切出てこないことです。
2024 年でやりたいこと
2023 年 12 月ごろから健康のためにジョギングを始めました。最近は 30 分(5〜6km)くらい走れるようになりました。週 2〜3 回くらいの頻度で続けていこうと思います。できればハーフマラソン走れるようになりたいけど、どうやってトレーニングする時間を確保したらいいんでしょうね。ちなみに目標は健康診断の肝臓の数値を正常値に戻すことです。運動不足が原因かわからないけど、正常化したい。
また、去年やると言っていた資格取得が一切できていないので、今年こそは何か取りたいです。4〜5 月くらいまでは引っ越しなどの手続きで忙しいと思うので、そのあとで何か勉強したい。
Discussion