Verfolgung österreichischer Lebensmittelpreise per Scraping

 (mastodon.gamedev.place)
1 Punkte von GN⁺ 2023-09-17 | 1 Kommentare | Auf WhatsApp teilen
  • Während in Österreich der Druck durch Lebensmittel- und Energiepreise zunimmt, baute Mario Zechner vor dem Hintergrund der Ankündigung einer begrenzten staatlichen Preis-DB selbst eine Preisverfolgungsplattform auf Basis der Online-Stores großer Handelsketten
  • Der erste Prototyp wurde für das gesamte Sortiment zweier großer Ketten in 2 Stunden erstellt; später kamen Daten aus deutschen und slowenischen Filialen sowie Kategorienormalisierung, Matching ähnlicher Produkte und Analysewerkzeuge hinzu
  • Zusammen mit anonym bereitgestellten Daten, die seit 2017 gesammelt wurden, ließ sich nachvollziehen, dass die Preise von Eigenmarkenprodukten zweier großer Ketten bis auf den Cent genau übereinstimmen – auch im historischen Verlauf
  • Historische Preisdaten zeigen Fälle, in denen Preise am selben Tag oder mit 1–2 Tagen Abstand angeglichen wurden, außerdem Shrinkflation und identische Produkte, die bis zu 40 % teurer sind als in Deutschland
  • Der österreichische Lebensmittelmarkt hat mit rund 40 % einen hohen Anteil an Aktionsware; selbst wenn mit gesenkten Listenpreisen geworben wird, kann der durchschnittlich gezahlte Betrag durch das zyklische Rabattmodell dennoch steigen

Ankündigung einer staatlichen Preis-DB und der Start eines privaten Projekts

  • In Österreich liegt die Inflation über dem EU-Durchschnitt, besonders stark ist der Druck bei grundlegenden Bedarfsgütern wie Energie und Lebensmitteln
  • Die Regierung kündigte im Mai an, gemeinsam mit großen Lebensmittelketten eine Datenbank für Lebensmittelpreise aufzubauen
    • Der zuständige Minister erklärte, der Umfang der Arbeiten sei groß und werde bis zum Herbst dauern
    • Der abgedeckte Umfang beschränkt sich auf 16 Produktgruppen wie Mehl und Milch
    • Der Aktualisierungsrhythmus ist auf einmal pro Woche angesetzt
  • Mario Zechner hörte davon und baute in 2 Stunden einen Prototypen, der das gesamte Sortiment zweier großer Ketten abdeckt
  • Die Plattform arbeitet, indem sie die Online-Stores der Märkte crawlt
    • Die meisten Märkte verfügen über APIs
    • Die gesammelten Daten werden normalisiert, damit Vergleiche zwischen Märkten möglich sind
    • Anschließend werden sie in einer Form bereitgestellt, die Veröffentlichung und Analyse erlaubt

Ausbau der Plattform und Preisdaten seit 2017

  • Nach der ersten Plattform kamen auch Daten aus deutschen und slowenischen Märkten hinzu
  • Um unterschiedliche Produktkategorien der einzelnen Märkte zu normalisieren und identische oder ähnliche Produkte einander zuzuordnen, wurden einfache Data-Science-Techniken ergänzt
  • Ein anonymer Twitter-Nutzer stellte Daten bereit, die seit 2017 bei zwei großen Ketten gecrawlt worden waren
  • Zechner integrierte diese Daten in die Plattform und ergänzte Analysewerkzeuge
  • Erste Analysen ergaben, dass die Preissteigerungen selbst unter Berücksichtigung höherer Energiepreise als stark einzuschätzen sind

Preisgleichheit zwischen Ketten und gleichzeitige Preisänderungen

  • Die erste Analyse vor dem Aufbau der Plattform bestand darin, die günstigsten Eigenmarkenprodukte zweier großer Ketten manuell zu vergleichen
    • Beispiele sind Produkte wie Eigenmarken-Milch oder -Mehl
    • Die Preise von 40 Produktpaaren stimmten bis auf den Cent genau überein
  • Eine NGO sah dies auf Twitter und führte dieselbe Analyse mit 600 Produktpaaren durch; das gleiche Muster zeigte sich erneut
  • Mit der Integration historischer Daten ließ sich der Zeitpunkt von Preisänderungen bei denselben Produkten der beiden Ketten vergleichen
  • Bei günstigen Eigenmarkenprodukten zeigten sich Fälle, in denen die Preise in beiden Ketten am selben Tag oder mit 1–2 Tagen Abstand geändert wurden und am Ende beim gleichen Preis landeten
  • Dieses Muster wurde nicht nur bei günstigen Eigenmarken, sondern auch bei Eigenmarken im mittleren Preissegment beobachtet
  • Zechner sieht die Möglichkeit einer stillschweigenden Kollusion (tacit collusion), bei der sich Preise in einem Oligopol auch ohne ausdrückliche Abstimmung angleichen
    • Andere ähnliche Plattformen hätten dasselbe Muster ebenfalls beobachtet
    • Das Muster sei seit der Phase stark steigender Inflation zu sehen

Shrinkflation und Preisunterschiede zwischen Ländern

  • Die Plattformanalyse zeigte auch Fälle von Shrinkflation
    • Gemeint sind Fälle, in denen der Produktinhalt kleiner wurde, der Preis aber gleich blieb oder sogar stieg
    • Als Beispiel wird Waschmittel genannt
  • Es zeigten sich auch Fälle, in denen dasselbe Produkt in Deutschland bis zu 40 % günstiger war
    • Deutschland wird dabei als Land mit höherem Durchschnittseinkommen und höheren Lebenshaltungskosten dargestellt
  • Auch Produkte, die nur in Österreich hergestellt werden, sind teils außerhalb Österreichs günstiger
  • Billa wird als österreichische Version von REWEDE erwähnt
  • Auch bei der österreichischen Marke Red Bull gibt es Fälle, in denen der österreichische Aktionspreis höher ist als der reguläre Preis in Deutschland

Rabattstruktur und die tatsächliche Wirkung von „Preissenkungen“

  • Auf dem österreichischen Lebensmittelmarkt ist der Rabattanteil besonders hoch
    • In wettbewerbsintensiven Lebensmittelmärkten sind im Durchschnitt etwa 10–20 % der Produkte rabattiert
    • In Österreich liege dieser Anteil bei 40 %
  • Rabatte machen es für Verbraucher schwer, den tatsächlich gezahlten Preis zu kennen
    • Verbraucher kennen den Preis oft erst nach dem Besuch im Markt und dem Blick auf die Tagesangebote
    • Die Ketten verschicken Rabattprospekte per Post und verwenden auch Sticker, die gesammelt und an der Kasse auf Produkte geklebt werden
    • Apps werden ebenfalls als Mittel zur Gewinnung von Nutzerdaten erwähnt
  • Nach negativer Berichterstattung hängten Lebensmittelketten in ihren Märkten Hinweise auf mit der Aussage: „Wir haben in diesem Jahr bereits die Preise von 450 Produkten gesenkt“
    • Die Gesamtzahl der Produkte wird mit etwa 22.000 angegeben
    • Die betreffende Kette stellte auch eine maschinenlesbare PDF mit der Liste der im Preis gesenkten Produkte bereit
  • Zechner glich die Produkte aus der PDF mit seiner Datenbank ab
    • Oberflächlich betrachtet erwies sich die Behauptung über Preissenkungen als zutreffend
    • Einige Produkte waren jedoch Teil eines seit Jahren wiederkehrenden zyklischen Preismusters und somit keine dauerhaften Preissenkungen
  • Es traten auch subtilere Fälle auf
    • Der Listenpreis wurde gesenkt, aber der Aktionspreis, der regelmäßig angewendet wird, wurde erhöht
    • Auch wenn die Senkung des Listenpreises faktisch stimmt, kann der durchschnittlich gezahlte Betrag für Verbraucher, die dasselbe Produkt jede Woche kaufen, durch den höheren Aktionspreis am Ende über dem früheren Niveau liegen

Verwandte Beiträge

1 Kommentare

 
GN⁺ 2023-09-17
Hacker-News-Kommentare

  • Ich habe in Österreich und Deutschland gelebt, und dass die Preise in österreichischen Supermärkten deutlich höher sind, ist zu 100 % wahr; das gilt auch für Produkte aus Österreich.
    Der Grund ist, dass Deutsche extrem preissensibel sind und ständig vergleichen, während Österreicher im Schnitt weniger darauf achten — und Supermärkte das ausnutzen. Österreich hat eine geringere Bevölkerungsdichte und viele schwer erreichbare Filialen, etwa in Bergregionen, wodurch die Logistikkosten höher sind; außerdem ist die Mehrwertsteuer etwas höher, und auch die Löhne für ungelernte Arbeit in Supermärkten und Logistik liegen etwas über denen in Deutschland.
    Zudem sehen in Österreich selbst Filialen derselben Unternehmen besser aus als in Deutschland, die Regale sind ordentlicher, und die Warteschlangen sind tendenziell kürzer, was die Betriebskosten erhöht. Letztlich würden die Preise sinken, wenn Verbraucher so stark auf den Preis achten würden wie in Deutschland und weniger Wert auf Ästhetik legten; sie könnten auch sinken, wenn die Leute anfingen, ein Stück weiter zum günstigeren Supermarkt zu gehen.

    • Deutschland ist ein autozentriertes Land, in dem man in einer durchschnittlichen Stadt die meisten Wege — zur Arbeit, ins Fitnessstudio usw. — mit dem Auto zurücklegt; dadurch ist es leichter, noch etwas weiter zum billigsten Supermarkt zu fahren.
      In Österreich sind öffentlicher Verkehr und Fahrradnutzung deutlich besser, weshalb man nicht extra einen Umweg macht, nur um den günstigsten Lebensmittelmarkt mitzunehmen. In österreichischen Gegenden, in denen man das Auto nutzt, ist die Bevölkerungsdichte so niedrig, dass es auch nicht viel Wettbewerb zwischen Supermärkten gibt.
    • Man sollte auch ergänzen, dass der österreichische Lebensmittelmarkt faktisch von drei Unternehmen dominiert wird, also eine Großkonzernstruktur hat. Diese konkurrieren selten direkt miteinander, indem sie Filialen unmittelbar nebeneinander platzieren.
    • Bei den Niederlanden und Deutschland ist es ähnlich. Ich wohne nahe der Grenze, und oft sind niederländische Bio-Gemüse in deutschen Lebensmittelgeschäften deutlich billiger, als wenn man dasselbe Gemüse in den Niederlanden kauft.
      Ein Teil davon liegt an der höheren Mehrwertsteuer in den Niederlanden, aber ich denke, der Großteil kommt daher, dass Niederländer höhere Preise eher einfach bezahlen als Deutsche.
    • Allerdings haben sich diese Bedingungen in den letzten zwei Jahren nicht verändert, daher reichen sie nicht aus, um den aktuellen Preissprung zu erklären.
    • Bei Kanada und den USA ist es ähnlich. Kanada ist immer teurer und hat auch weniger Auswahl.

  • Als österreichischer Entwickler und Verbraucher habe ich dieses Problem das ganze Jahr über aus nächster Nähe beobachtet, und es ist unglaublich frustrierend, dass wir ohne jeden legitimen Grund abgezockt werden, während sich nichts ändert und es niemanden kümmert.
    Es ist wirklich beeindruckend, dass Mario an diesem Thema drangeblieben ist und von diesem nervigen Wahnsinn nicht genug bekommen hat.

    • Wenn solche Projekte breite Aufmerksamkeit schaffen und zu organisiertem Widerstand der Verbraucher führen, werden die Leute sich auch dafür interessieren.
      Damit Unternehmen sich nicht schlecht verhalten, braucht es einen Erwachsenen im Raum. Man sollte von der Annahme ausgehen, dass Unternehmen sich schlecht verhalten, wenn sie nicht überwacht werden — weniger als Feststellung, sondern eher als zu prüfende Hypothese.
      Zumindest verhalten sich Unternehmen schlechter, wenn es keine Konsequenzen gibt; früher hatten sie keinen „guten Grund“, die Preise zu erhöhen, jetzt dient Inflation als Deckmantel für Preiserhöhungen.
      Solche Projekte mit Indexdaten wirken wie ein Bereich mit großem Potenzial, besonders jetzt, wo KI- und Machine-Learning-Systeme Veränderungen und Trends leicht beobachtbar machen. Entscheidend ist, wie man hinreichend klare Schlussfolgerungen und Beobachtungen gewinnt, die genug sozialwissenschaftliche Empörung auslösen, damit Menschen handeln.
      Oder vielleicht sollen wir einfach akzeptieren, dass Unternehmen solche Technologien nutzen, um alles zu Ungunsten der Verbraucher zu optimieren, und sie nicht für eine White-Hat-artige Gegenwehr einsetzen.
    • Ich bin kein Österreicher, lebe aber in Österreich. Anfangs dachte ich, nach Corona steigen die Preise eben überall, aber wenn ich sehe, wie die Preise jetzt weiter steigen, fühlt es sich zunehmend wie ein unverhohlenes Cash Grab an.
      Andererseits weiß ich nicht, was man erwartet, wenn man allen jedes Jahr 500 Euro zusätzlich als Klima bonus gibt. Mir ist schleierhaft, wie das die Inflation senken soll, und ich habe den Eindruck, dass die Lebensmittelketten das ausnutzen.
    • Es ist nicht ohne Grund teurer geworden; die Preise in Österreich sind aus genau demselben Grund hoch, aus dem sie in Deutschland niedrig sind. Weil der festgesetzte Preis dem Unternehmen das meiste Geld einbringt.
      Ob der Preis hoch oder niedrig ist, der Grund ist immer derselbe: Dieser Preis bringt das meiste Geld ein.
    • Kürzlich bekam ein indischer Ernährungs-Influencer auf LinkedIn eine DMCA-Beschwerde und stand kurz vor einer Klage, nur weil er die Nährwerttabelle auf der Rückseite von Bournvita, einem Malz-Schokoladenprodukt zum Einrühren in Milch, vorgelesen hatte.
      Solche Unternehmen reagieren extrem empfindlich, sobald etwas anfängt, ihre Gewinne zu beeinflussen. Es könnte auch nicht Bournvita, sondern ein ähnlicher Milchzusatz für Kinder gewesen sein.
    • Gier und das Streben nach höheren Gewinnen sind für sie ebenfalls Grund genug.

  • Wenn es ähnlich ist wie im Vereinigten Königreich, gibt es so viel Shrinkflation, dass man für Preisvergleiche den Preis pro Gramm brauchen wird. Dabei werden Produktgrößen reduziert und Zutaten durch billigere ersetzt: Auch wenn die Verpackung äußerlich gleich aussieht, gibt es mehr Luft in Schokoriegel-Verpackungen, 1 cm Hohlraum unter dem Deckel von Eiswaffeln, eingedellte Böden bei Butterdosen, und Verpackungsseiten, die früher gerade waren, verjüngen sich jetzt.
    Solche „Tricks“ gab es schon früher, aber sie werden immer häufiger eingesetzt. Jeder Supermarkt hat eine vollständige Bestandsdatenbank und könnte daher praktisch ohne Kosten alle fünf Minuten eine aktuelle Preisliste für sämtliche Produkte schicken. Die Legislative holt offenbar keinen Expertenrat ein oder hat nicht vor, das zu tun, aber ein Anfang ist immerhin ein Anfang.

    • Im Vereinigten Königreich gibt es bereits eine Pflicht zur Angabe des Preises pro Gramm, genauer gesagt des Einheitspreises in £/KG.
      Das Problem ist, dass Lebensmittelhändler, wenn sie Menschen dazu bringen, „Treuekarten“ zu nutzen, alles als „Aktionspreis“ deklarieren können und damit die Pflicht zur Angabe des Einheitspreises umgehen. Es wird nur der £/KG-Wert des höheren Originalpreises angezeigt, sodass Verbraucher nicht leicht vergleichen können.
      Wenn man bei Aldi oder Lidl einkauft, kann man das vermeiden, aber ich wäre nicht überrascht, wenn auch sie der Versuchung von Treuekarten-exklusiven Preisen bald erliegen. Natürlich haben auch sie Shrinkflation betrieben.
      Beispiel: https://www.tesco.com/groceries/en-GB/products/296117381 — „£3.00 / £10.71/kg“, aber der Clubcard-Preis beträgt £2.00
    • Britische Supermärkte scheinen gesetzlich verpflichtet zu sein, bei einzelnen Produkten das Nettogewicht des Inhalts anzugeben. Das müsste das Gesamtgewicht ohne Verpackung sein und sollte sich daher ziemlich schnell analysieren lassen.

  • Als Österreicher: Preisvergleichsprojekte sind gut, aber der Elefant im Raum ist, dass die Preise in deutschen Lebensmittelgeschäften bei denselben Produkten 20–40 % niedriger sind.
    Die Erklärungen der Supermarktketten sind bestenfalls dubios. Etwa, dass es mehr Filialen pro Kopf gebe als in Deutschland oder dass man bei teureren österreichischen Vertriebspartnern einkaufen müsse. Ähnliche Geschichten habe ich auch gehört, etwa dass Belgien teurer sei als Frankreich.
    Um die Lage zu ändern, braucht es Preisvergleiche in ganz Europa.

    • Das eigentliche Problem in Österreich ist ein schlechtes Geschäftsumfeld mit hohen Steuern und vielen Vorschriften. Am Ende bleiben in diesem Bereich nur wenige dominierende Player übrig.
      Kleinere Unternehmen haben nicht einmal Spielraum, in Bereichen wie Produktauswahl oder Öffnungszeiten zu innovieren, sodass der Markteintritt für sie von vornherein schwierig ist.
    • Vermutest du einen anderen Grund? Zum Beispiel, dass man damit in Österreich durchkommt, in Deutschland aber nicht? Mich würde interessieren, welche Erklärung du als „nicht dubios“ ansehen würdest.
    • Ich bin in Griechenland, und Pfirsiche aus lokaler Produktion sind hier teurer als dieselben griechischen Pfirsiche, die in Rumänien verkauft werden. Ich habe das heute gesehen und war schockiert; ich weiß nicht, wie die Griechen diese absurde Situation ertragen. Benzinpreise sind ebenfalls viel höher.

  • Wenn man online Preise für Dienste und Produkte sammelt, sieht man wirklich viele interessante Dinge, und meistens sind es Tricks, die den Kunden schaden sollen.
    Ich denke, es ist an der Zeit, dass die EU gesetzlich vorschreibt, dass Unternehmen Preisdaten über eine standardisierte API bereitstellen. Dann würden alle profitieren, und solche Tricks ließen sich eindämmen.
    Ich habe tatsächlich einen Scraper für Disney-World-Urlaubspakete gebaut und dabei auch herausgefunden, wie man günstigere Angebote findet, indem man Hotel-Tickets nur für einen Teil des gesamten Aufenthalts separat kauft. Irgendwann will ich daraus einen Urlaubsinflationsindex machen.
    1 - https://mousetrack.co.uk

  • Ein wirklich interessanter Artikel. Es ist so ermüdend, Lebensmittelpreise zu bewerten und den Einkauf so anzupassen, dass Zeit und Kosten optimiert werden; mit einem großen Datensatz wie diesem könnte das viel einfacher werden.
    Ich frage mich, ob es eine ähnliche Preisanalyse für die USA gibt.

    • Eine andere Möglichkeit ist, sich die Gewinnmargen der Verkäufer anzusehen. Die großen Unternehmen in den USA sind alle börsennotiert; wenn du also bei Costco, Walmart, Target, Kroger oder Albertsons einkaufst, weißt du, dass du nur ein paar Prozent mehr zahlst als das, was es den Händler kostet, dir die Ware zu verkaufen.
      Natürlich unterscheiden sich die Margen einzelner Artikel im Laden, aber fast alle unverarbeiteten, haltbaren Lebensmittel gehören zu den Artikeln mit den niedrigsten Margen.
      Auch Winco, Aldi und Lidl sind Lebensmittelhändler, die für extrem niedrige Margen bekannt sind.

  • Ich weiß nicht, wie andere Mastodon-Server sind, aber dieser ist in Sachen Lesbarkeit Twitter um Lichtjahre voraus.
    Ich hoffe, dass irgendwann jemand ein Enthüllungsbuch darüber schreibt, was genau an diesem Unternehmen und seinem Produktdesign-Ansatz falsch gelaufen ist.

    • Die Anreize sind unterschiedlich. Ein börsennotiertes Unternehmen mit Tausenden Beschäftigten, das auf dauerhaftes Wachstum ausgerichtet ist, und ein Community-Projekt haben zwangsläufig unterschiedliche Ziele.
      Ersteres hat mehr Ressourcen, Letzteres ist stärker missionsorientiert.
    • Das sieht nach dem normalen Mastodon-Design aus. Man kann auch separate Frontends verwenden.
    • Es ist der Dark Mode im Standardstil von Mastodon und eine Ein-Panel-Ansicht.
      Es gibt auch eine mehrspaltige „erweiterte Ansicht“, die Tweetdeck ähneln soll.
      Manche bevorzugen Dark Mode, aber auf E-Ink-Geräten ist er wirklich furchtbar zu lesen. Wenn man nicht bei einer bestimmten Instanz eingeloggt ist, kann man das Theme nicht ändern; deshalb habe ich dazu ein entsprechendes Issue offen.

  • Ein hervorragender Thread, der die Macht kluger, technisch versierter Bürger zeigt.

    • Österreichische Verbraucher, die häufig ins Ausland oder nach Deutschland fahren, wussten schon lange, dass sie abgezockt werden, konnten es aber nicht beweisen; jetzt können sie es. Die wichtigere Frage ist, was daraus folgt. Die Daten zeigen klar, dass die großen Händler bei der Preisabsprache kooperieren.
      Meine Erwartung ist, dass nichts passieren wird. Die staatlichen Regulierungsbehörden, die das überwachen sollten, werden wahrscheinlich zu dem Schluss kommen, dass alles in Ordnung ist. Ich gehe davon aus, dass sie bereits gekauft sind, damit sie nach ihrer politischen Laufbahn als Lobbyisten oder „Berater“ für diese Händler arbeiten können.
      Vor etwa sechs Jahren erhöhten die drei größten Telekommunikationsanbieter Österreichs zur exakt gleichen Zeit gemeinsam ihre Preise; die zuständige Behörde schloss den Fall mit der Begründung, es gebe keinen Beweis dafür, dass die drei Unternehmen eine Preisabsprache getroffen hätten, und es könne Zufall gewesen sein.
      Dieses Land ist so korrupt, dass es bis in die Wurzeln verfault ist. Als Verbraucher und Steuerzahler werde ich mit dem Segen der Regierung aus allen Richtungen legal ausgenommen, und in vielen anderen Ländern dürfte es ähnlich sein.

  • Als Österreicher habe ich diesen Link an einige Journalisten und Freunde geschickt. Ich frage mich, wie man daraus konkretes Handeln machen kann, damit die Politik in Bewegung kommt und es auch den Verbrauchern hilft.