画像変換で10PBのストレージを節約 - Antmanプロジェクト開発記
(engineering.linecorp.com)-
LINEで30PBのJPEGをHEIFフォーマットに変換し、約10PBのストレージを節約した事例
-
フォーマット変換時に画質劣化率を低く抑え、圧縮率を高める最適化プロセス
-
遊休GPUリソースを活用して追加インフラコストを最小化
LINEで30PBのJPEGをHEIFフォーマットに変換し、約10PBのストレージを節約した事例
フォーマット変換時に画質劣化率を低く抑え、圧縮率を高める最適化プロセス
遊休GPUリソースを活用して追加インフラコストを最小化
2件のコメント
以前働いていたチームですね。一緒に働いていた方の名前が見えて、なんだかうれしくなりました(笑)。あの頃もストレージコスト削減のためにいろいろなプロジェクトをやっていた記憶がありますが、今もなお格闘中なんですね。
かなり手間をかけたプロジェクト+紹介記事ですね。
オープンソースとして公開してくれたらもっと良かったのですが、そうではないのが残念ですね。
HEIFは「GoogleフォトがiPhoneでは実際にオリジナルを無制限に保存している」 https://ja.news.hada.io/topic?id=748
でも一度話題になったことがありますが、もともと圧縮率が非常に高いので、保存用途としてはほぼ最適なようです