- Wenn Denken die Kapazität des Kopfes übersteigt, lagern Menschen es mithilfe von externen Repräsentationen wie Händen, Körper, Anordnung von Objekten, Skizzen, Diagrammen und Gesten in die Welt aus, um das Verstehen zu unterstützen
- Karten, Felsritzungen, Tafeln in Enzyklopädien und zeitlich geordnete Bilder verkleinern die reale Welt nicht einfach maßstabsgetreu, sondern wählen Informationen aus, lassen sie weg oder heben sie hervor, um Beziehungen und Organisation sichtbar zu machen
- Diagramme stellen mit räumlichen Mitteln wie Punkten, Linien, Kästen, Pfeilen, Leerraum sowie Zeilen und Spalten Orte, Wege, Kategorien, Teil-Ganzes-Beziehungen und Ereignisfolgen dar
- Auch Schrift und Sprache haben teilweise diagrammatische Eigenschaften, etwa durch Abstände zwischen Wörtern, die Gliederung in Absätze und Kapitel oder die Anordnung in zeitlicher Reihenfolge, doch Karten und Diagramme besitzen eine reichere visuell-räumliche Entsprechung zur Gegenstandswelt
- Diagramme auf Papier und Gesten in der Luft entstehen beide aus räumlichen Handlungen der Hand; zur Bezeichnung des Organisierens abstrakten Denkens durch räumliches Handeln wird das Konzept spraction vorgeschlagen
Warum wir Denken in der Welt anordnen
- Gedanken können die Grenzen des Geistes schnell überschreiten, und Menschen nutzen zur Verstärkung davon Dinge in ihrer Umgebung und ihren Körper
- Hände, Körper, Stöcke und Steine, die Anordnung von Kaffeetassen, Skizzen im Sand oder Kritzeleien auf Papierservietten können externe Repräsentationen des Denkens sein
- Zu den lange überlieferten externen Repräsentationen des Denkens gehören Tierzeichnungen an Höhlenwänden, in Stein geritzte Karten, in Säulen und Triumphbögen eingravierte Geschichte, Erklärungen und Reisen auf Grabwänden, Mythen auf griechischen Vasen und Rechenmarkierungen auf Knochen
- Solche Repräsentationen sind so gestaltet, dass sie das eigene Denken oder das Denken anderer unterstützen
- Markierungen und Anordnungen auf Oberflächen spiegeln Denken wider und wirken wiederum auf das Denken zurück
- Sie werden Diagramme, Skizzen, Grafiken, Visualisierungen, Modelle, materielle Werkzeuge, kognitive Werkzeuge oder kognitive Artefakte genannt
Gestaltungsprinzipien externer Repräsentationen
- Externe Repräsentationen kopieren die Anordnung der natürlichen Welt nicht unverändert, sondern verwenden gestaltete Anordnungen
- Wie Karten enthalten sie einige Informationen, lassen andere weg und vereinfachen oder übertreiben oft selbst die enthaltenen Informationen
- Repräsentationen wie Karten, die in einer Gemeinschaft wiederholt verwendet wurden, werden im Gebrauch verfeinert und durchlaufen eine Art informellen User-Test
- Solche Repräsentationen zeigen, wie sich die Struktur des Denkens in visuell-räumlichen Ausdrücken abbilden lässt
- Der Ansatz verbindet zwei empirische Traditionen
- Wie in der Linguistik werden Fälle kognitiver Artefakte analysiert, die über lange Zeiträume und an vielen Orten entstanden sind
- Wie in der Psychologie werden die Regelmäßigkeiten experimentell untersucht, mit denen Menschen externe Repräsentationen von Bedeutung erzeugen, interpretieren und verwenden
- Repräsentationen auf Papier und Gesten in der Luft entstehen beide durch Handlungen der Hand im Raum; aus dieser Verbindung entsteht das Konzept spraction
Karten: der Welt ähnlich, aber nicht die Welt selbst
- Karten sind Repräsentationen, die Orte im Raum durch Markierungen auf einer Oberfläche und räumliche Beziehungen darstellen
- Die babylonische Tonkarte wird vom British Museum auf 700–500 v. Chr. datiert und gilt als die älteste erhaltene Karte
- Diese Karte ist nicht nur eine strenge geografische Repräsentation, sondern verbindet Raum und Zeit, Geografie und Geschichte sowie Mythos
- Orte oder Landmarken werden als punktartige Zeichen oder Flächen dargestellt, Wege zwischen Orten als Linien
- Dieselben Informationen lassen sich auch sprachlich ausdrücken, doch Karten besitzen eine sekundäre Isomorphie oder eine reichhaltigere Entsprechung zur realen Welt
- Deshalb können visuell-räumliche Repräsentationen direkter sein als Wörter und Sätze
- Karten sind jedoch nicht einfach verkleinerte Abbilder der Welt
- Viele Informationen fehlen, Küstenlinien werden geglättet, und Straßen können zur besseren Sichtbarkeit verbreitert werden
- Wie moderne Karten können auch antike Karten Anmerkungen enthalten
- Karten sind auf einen Zweck hin gestaltet
- Sie liefern ein Bild der größeren Welt, das von einem bestimmten Ort aus nicht sichtbar ist
- Sie zeigen, wie Raum genutzt wird und wie Geografie mit menschlicher Aktivität interagiert
- Sie können für Routenplanung, Stadtplanung und Gestaltung genutzt werden
Felsritzungen und Diagramme: von der Darstellung zu Kategorien und Anordnung
- Die ältesten erhaltenen Graffiti sind Felsritzungen und Felsmalereien wie Steinritzungen, Höhlenbilder und Grabdarstellungen; sie reichen bis in die späte Steinzeit vor etwa 40.000 Jahren zurück
- Frühe Höhlenbilder und Felsritzungen aus verschiedenen Regionen wurden an voneinander unabhängigen Orten gefunden, zeigen aber überraschend ähnliche Formen und Inhalte
- Die Bilder der Chauvet-Höhle werden auf etwa 30.000 bis 32.000 Jahre datiert
- Überlagerte Kopfzeichnungen werden teils als früher Versuch von Animation interpretiert
- Viele frühe Bilder vermitteln eher Allgemeinheit als ein bestimmtes Individuum
- Tiere, Strichmenschen und geometrische Formen oder Symbole erscheinen von einem natürlichen Hintergrund getrennt
- Tiere und Strichmenschen sind identifizierbar, weil ihre Teile, die Zusammensetzung der Teile und die Form mit realen Gegenständen korrespondieren
- Die Formen ähneln eher idealisierten Prototypen als Objekten mit individueller Identität
- Menschen erscheinen in typischen Ansichten von vorn oder von der Seite, Tiere meist im Profil
- Die Größen werden oft einander angeglichen statt realen Proportionen zu folgen
- Die Bilder haben meist dieselbe Richtung und Haltung und werden nach Typen gruppiert, etwa Tiere zusammen und Menschen zusammen
- Diese Merkmale stehen eher mit diagrammatischer Gestaltung als mit Szenendarstellung in Verbindung
- Bilder desselben Typs werden in ähnlicher Größe und Ausrichtung angeordnet
- Zeilen und Spalten, lockere Gruppen und räumliche Trennung ermöglichen Vergleich und Gegenüberstellung
- Allerdings wurden Felsritzungen wahrscheinlich über lange Zeit von mehreren Urhebern geschaffen, weshalb das Ganze schwer als einheitlich gestaltetes Werk gelten kann
L’Encyclopedie und die räumliche Grammatik des Diagramms
- Die Tafeln von Diderot und D’Alembert in L’Encyclopedie zeigen auf derselben Seite den Unterschied zwischen Szenendarstellung und Diagramm
- Der obere Teil der Tafel zur Pinmaker’s Factory ist eine Aktivitätsszene, in der Arbeiter und Werkzeuge gemeinsam in einem natürlichen Raum angeordnet sind
- Raum, Wände, Fenster, Boden, Tür, Bilder und Kamin sind enthalten
- Arbeiter und Werkzeuge sind in dem Raum platziert, der die Arbeit ermöglicht
- Licht und Schatten folgen einer natürlichen Lichtquelle
- Der untere Teil ähnelt eher einem katalogartigen Diagramm, das Werkzeuge und Teile aus dem Kontext löst und nach Typen neu anordnet
- Die Bildgrößen entsprechen nicht den realen Proportionen
- Schatten und Schraffur dienen weniger natürlichem Licht als der Hervorhebung struktureller Merkmale
- Werkzeuge und Teile sind nach Kategorien gruppiert, in Zeilen und Spalten angeordnet und durch ähnliche Abstände getrennt
- Diagramme extrahieren Elemente aus einer Szene und ordnen sie neu an, um begriffliche Entsprechungen klarer zu machen
- Die obere Szene ist eine kontextualisierte Repräsentation
- Die untere Anordnung ist eine Repräsentation, die aus dem Nutzungskontext gelöst und in den neuen Kontext des Typs eingeordnet wurde
- Die Seiten und Doppelseiten von L’Encyclopedie sind hierarchisch gestaltet
- Informationen zu einem Thema werden über eine Doppelseite integriert
- Seiten, Ränder, Linien, Rahmen sowie die Trennung in Kapitel und Bände spiegeln und unterstützen die Hierarchie der Informationen
- Auch Text verwendet diagrammatische visuelle Mittel wie Leerraum zwischen Wörtern, die Trennung von Sätzen und Absätzen oder eine neue Seite für ein neues Kapitel
Zwei Arten, die Welt zu organisieren: Teile und Arten
- Die Anordnung in Diagrammen ist mit zwei Organisationsweisen verbunden, mit denen Menschen die Welt vereinfachen und verstehen
- Teilorganisation (Partonomy) zerlegt ein Ganzes in eine Hierarchie von Bestandteilen, etwa Körperteile, Teile von Objekten, Teile einer Szene oder Teile einer Regierung
- Klassifikationsorganisation (Taxonomy) gruppiert Dinge, die Form und Funktion teilen, etwa Tierarten, Pflanzenarten, Werkzeugarten oder Instrumentenarten
- Zur Teilorganisation von Szenen gehören Menschen, Dinge und Aktivitäten, die typischerweise in dieser Szene vorkommen
- In der Pinmaker’s Factory wickelt ein Arbeiter Faden auf ein Rad
- In einer anderen Szene rührt ein Bäcker Teig mit einem Löffel, und ein Schneider schneidet Stoff mit einer Schere
- Gruppen von Dingen, die interaktiv zusammen verwendet werden, etwa Papier und Schere, Hammer und Nagel oder Messer und Brot, heißen thematische Organisation
- Fügt man einen Handelnden hinzu, entsteht eine grundlegende Szene
- Eine der sich in antiken Felsritzungen wiederholenden thematischen Organisationen ist Jäger und Beute
Diagramme, die Zeit und Ereignisse anordnen
- Auch Ereignisse in zeitlicher Reihenfolge zu bündeln und zu sinnvollen Einheiten zu machen, ist eine verbreitete Form der Organisation von Erfahrung
- Die Serienfotografien von Muybridge und Marey zeigen Bewegungen von Menschen und Tieren als Folge von Standbildern
- Die Bilder sind horizontal in Leserichtung angeordnet und bereiten den Weg für den Film
- Das Wandgemälde im Grab des Astronomen Nakht in Theben aus dem 15. Jahrhundert v. Chr. ist ein antikes Beispiel für eine Anordnung von Ereignissen, die Aussaat und Ernte zeigt
- In diesem Fall sind die Ereignisse horizontal angeordnet, aber die Reihenfolge wird ungewöhnlich von unten nach oben organisiert
- Visuelle Erzählungen, Geschichte und Erklärungen auf Gräbern, Säulen, Triumphbögen, Friesen und Schriftrollen zeigen integrierte Folgen zusammengehöriger Handlungen in linearer Anordnung
- Der Fluss fortlaufender menschlicher Aktivität wird in zentrale Ereignisse oder erklärende Schritte segmentiert
- Szenen werden oft in Zeilen oder Spalten angeordnet und folgen nicht immer, aber häufig einer zeitlichen Reihenfolge
- Ereignisdiagramme enthalten neben darstellenden Elementen auch nichtdarstellende grafische Elemente wie Wörter, Symbole und Rahmen
- Beispiele sind Buntglasfenster, Kamerabedienungsanleitungen, Anleitungen für zerlegbare Möbel, visuelle Erklärungen in naturwissenschaftlichen Lehrbüchern und Comics
- Graphic Novels und Comics entwickeln die Darstellung von Ereignissen in der Zeit zu einer eigenen Kunstform weiter
Punkte und Linien: Wegkarten und Experimente zur Wegbeschreibung
- Karten, Felsritzungen, Grabmalereien und Fertigungstafeln lassen sich als Bottom-up-Diagramme verstehen, die Dinge, Szenen und Ereignisse der Welt verdichten und neu anordnen, um Beziehungen sichtbar zu machen
- Experimentelle Forschung untersucht, wie Menschen Diagramme mit unterschiedlicher Bedeutung erzeugen, verstehen und verwenden
- Einfache geometrische Formen wie Punkte, Linien, Kästen und Pfeile erhalten je nach Kontext Bedeutung
- Diese Bedeutung hängt mit den geometrischen Eigenschaften der jeweiligen Form zusammen
- Aufgaben zur Wegbeschreibung zeigen die Parallelität zwischen sprachlicher Anleitung und skizzierter Karte
- Studierende in Wohnheimen wurden gefragt, ob sie den Weg zu einem lokalen Fast-Food-Restaurant kennen; wenn ja, sollten sie entweder eine Skizzenkarte zeichnen oder eine Wegbeschreibung schreiben
- Nach Segmentierung und Kodierung der Karten und Wegbeschreibungen zeigte sich, dass beide eine kleine Anzahl semantischer Einheiten teilen
- Landmarken werden auf Karten als punktartige Zeichen und in Wegbeschreibungen als Namen dargestellt
- Wege erscheinen als Varianten von Linien, und sowohl Punkte als auch Linien beruhen auf der konkreten Welt
- Aus der Ferne erscheint ein Ort wie ein Punkt, und eine Straße aus der Ferne wie eine Linie
1 Kommentare
Hacker-News-Kommentare
https://consc.net/papers/extended.html
Diese Idee taucht auch als einer von mehreren interessanten Aspekten in meinem Lieblingsroman „Jonathan Strange and Mr. Norrel“ auf
https://joeldueck.com/mind-palaces.html
Spekulativ würde ich sagen, dass es auch im Gehirn kleinere Schleifen gibt, die es ermöglichen, über ein Thema nachzugrübeln. Allerdings haben solche Schleifen womöglich nicht so viele zugängliche Neuronen oder nicht dieselbe Wiedergabetreue zwischen den Iterationen wie externe Werkzeuge. Ohne diese selbststimulierende Rekursion würde alles, was wir folgern, in einem einzigen Durchlauf von Sensorik zu Motorik enden, und das wirkt nicht besonders plausibel
Dasselbe neuronale Netz mehrfach anzuwenden und den Zustand zwischen Iterationen als Gedächtnis weiterzureichen, erklärt auch, warum beim Menschen Gedächtnis mit anderen Intelligenzfaktoren korreliert. Maschinen können zum Beispiel FLOPS unabhängig von der Speicherkapazität haben
Nachdem Amos Tversky früh gestorben war, waren Barbara Tversky und der ebenfalls verwitwete Daniel Kahneman bis zu Kahnemans Tod vor wenigen Wochen Lebensgefährten
[0] https://en.wikipedia.org/wiki/Barbara_Tversky
[1] https://en.wikipedia.org/wiki/The_Undoing_Project
https://pubmed.ncbi.nlm.nih.gov/12613670/
Es überrascht, dass die vorhandene Forschung zu dieser Idee hier nicht umfangreicher zitiert wird
Sich auf die technische Mystik präzise definierter Fachbegriffe zu stützen und sie dann in einem Kontext zu verwenden, in dem sie eigentlich nicht gelten, kann ein Hinweis darauf sein, dass den vorgebrachten Ideen Substanz fehlt. Daher wirkt es so, als mache der Autor es absichtlich vage
Letztere zieht wie im unteren Teil der Abbildung die wichtigen Elemente aus dem Kontext heraus, um diese Prinzipien explizit und klar zu vermitteln, statt sich auf Induktion zu verlassen
„Was du ererbt von deinen Vätern hast, erwirb es, um es zu besitzen.“ — JWvG, zitiert in ISR
Es heißt „uralte Auslagerungen des Denkens“, aber es gibt auch mündliche Überlieferung
Letztlich geht es darum, Medien zur Unterstützung der Kognition zu nutzen; seltsam ist, dass mündliche Medien nicht erwähnt werden