10 PB Speicher durch Bildkonvertierung eingespart – Die Entwicklungsgeschichte des Antman-Projekts

 (engineering.linecorp.com)
8 Punkte von sduck4 2020-01-21 | 2 Kommentare | Auf WhatsApp teilen

  • Ein Fall bei LINE, in dem durch die Konvertierung von 30 PB an JPEGs in das HEIF-Format rund 10 PB Speicher eingespart wurden

  • Ein Optimierungsprozess, der bei der Formatkonvertierung die Qualitätsverluste reduziert und die Kompressionsrate erhöht

  • Minimierung zusätzlicher Infrastrukturkosten durch die Nutzung ungenutzter GPU-Ressourcen

Verwandte Beiträge

2 Kommentare

 
encyphered 2020-01-24

Das ist ein Team, in dem ich früher gearbeitet habe. Es ist irgendwie schön, den Namen von jemandem zu sehen, mit dem ich zusammengearbeitet habe, haha. Ich erinnere mich, dass wir damals wegen der Senkung der Speicherkosten auch verschiedene Projekte gemacht haben, und offenbar ist der Kampf noch immer im Gange.
 
xguru 2020-01-21

Das ist wirklich ein Projekt, in das enorm viel Arbeit geflossen ist, plus ein guter Vorstellungsartikel.

Es wäre noch schöner, wenn es als Open Source veröffentlicht würde, daher ist es etwas schade, dass das nicht der Fall ist.

Zu HEIF wurde auch hier schon einmal erwähnt, dass „Google Fotos auf dem iPhone tatsächlich unbegrenzt Originale speichert“: https://de.news.hada.io/topic?id=748

Da die Kompressionsrate ohnehin sehr gut ist, scheint es für Speicherzwecke nahezu optimal zu sein.