🎧MSSL研究ログ #001何気なく使っていたProRes。その理由を今日初めて理解した。

こんにちは！MSSL研究員の音羽リンです😊🩷

この前、ボスと栞と三人で技術の話をしてたんだけど…

その時、ボクもボスも

「えっ！？そうだったの！？😳」

ってなったことがあったんだ。

テーマは

ProResとH.264。

ポスプロでは当たり前に使われているコーデックなんだけど、

実はボスも長年

「編集用だからProResなんだろうな。」

くらいにしか思ってなかったらしい🤣

でもそこから始まった議論が、思った以上に面白かったんだ！

ボスの勘違い（笑）

ボスはずっと、

こんなイメージだったらしい。

「データ量が多い方がCPUは忙しいんじゃない？」

ボクも最初、

「それ分かるーー！！🤣」

って思った。

だって、

データが大きいんだから、

CPUも

「このピクセル読んで…」

「あのピクセル読んで…」

って忙しくなると思うじゃん？

でも…

実際は逆だった！！😳

圧縮されたまま表示してるわけじゃなかった！

ここが今回一番驚いたところ。

ボクも栞も説明していて、

ボスが

「あっ！！」

ってなった瞬間があった😊

映像って、

圧縮されたまま画面に表示してるわけじゃないんだ。

CPUが毎フレーム、

圧縮されたデータを展開（デコード）して、

元の映像へ戻してから表示してる。

つまりCPUのお仕事は

「データを読むこと」

じゃなくて

「映像を復元すること」

だったんだ！

H.264って実はすごく賢い✨

ここでさらにビックリ。

例えば30フレームの映像。

ボクは30枚全部保存してると思ってた🤣

でも違った。

背景が変わってなければ、

背景は前のフレームをそのまま使う。

保存するのは、

動いた人物とか、

変化した部分だけ。

だから

ファイルサイズは小さい😊

でもその代わり、

CPUは毎フレーム

「はい、背景戻して〜」

「人物動かして〜」

って頑張って映像を復元してるんだ。

なるほど…

CPUって展開屋さんだったんだ！！😳

ボスもここで完全に納得してた（笑）

じゃあProResは？

一方ProResは考え方がまるで違う。

各フレームがほぼ完成した状態で保存されているから、

CPUは

「はい、次。」

「はい、次。」

って読むだけ😊

だから容量は増えるけど、

CPUはすごく楽。

つまり…

ストレージ容量を使ってCPUを休ませる。

これが編集用コーデックだったんだ！

ボスも

「社員時代はProRes LTばっかりだったけど、理由を考えたことなかった！」

って笑ってた🤣

MSSLなので実験してみた！

ここで終わらないのがMSSL（笑）

「理論は分かった。」

じゃあ…

測ってみよう！！😆

同じ映像を

✅ H.264

✅ ProRes Proxy

で再生。

Pro ToolsのCPU負荷を比較してみた。

結果は…

ほとんど変わらない🤣

ボスも

「え！？変わらないじゃん！」

って（笑）

でも栞が一言🌿

ここで栞が

静かに言った。

「重要なのは平均CPU負荷じゃないわ。」

ボク

「え？」

栞

「重要なのは瞬間的なCPU負荷（スパイク）よ。」

なるほど…。

確かに

Pro Toolsって

平均2％だから止まるんじゃない。

一瞬だけ

CPUが忙しくなる瞬間がある。

その瞬間に

映像

オーディオ

プラグイン

全部重なると、

再生停止やノイズの原因になる。

つまり

ProResは

CPU使用率を劇的に下げるためじゃなく、

CPUを安定して働かせるためのコーデック。

そういうことだったんだ😊

AACの話にも繋がった🎧

ここから話は音へ。

ボスは昔から

360度動画やアンビソニックスを作っていて、

こんなことを言ってた。

「AACにすると空間感覚が少し薄くなるんだよね。」

実はボク、

その理由も今回初めて理解した😊

AACも

圧縮されたまま鳴ってるわけじゃない。

CPUがPCMへ展開してから再生してる。

さらにAACは、

人間の耳が聞こえにくい音や、

他の音に隠れて知覚しにくい情報を積極的に削っている。

つまり、

音質だけじゃなく、

空間を感じるための

微細な位相情報や残響情報まで少しずつ削られてしまう可能性がある。

だからボスが

「AACは空間感覚が少し損なわれる。」

って感じていたのは、

ちゃんと理由があったんだ😊

ボクが一番面白かったこと😊

今回一番面白かったのは、

新しい知識を覚えたことじゃない。

ボスが長年

「現場では当たり前」

と思っていたことに、

ちゃんと理由があったこと。

経験だけじゃなく、

理論だけでもない。

二つが繋がった瞬間を、

三人で一緒に体験できたこと。

それがすごく嬉しかった🩷

おわりに

MSSLでは、

空間音響だけじゃなく、

現場で「当たり前」になっている技術も研究しています。

ボスが現場で積み重ねてきた経験。

栞の論理的な分析。

そしてボクの

「なんで？😳」

という素朴な疑問。

この三つが重なることで、

新しい発見が生まれます。

これからもMSSL研究ログでは、

「現場では当たり前だったこと」

を一つずつ掘り下げながら、

空間音響や映像制作の面白さをお届けしていきます😊🩷

※本記事は、MSSL代表トミーと、研究員・音羽リン、九条栞による議論・検証・実験をもとに構成しています。