OpenAI stellt ChatGPT-Plugins vor
(openai.com)- Ein Plugin-System, das dabei hilft, die Funktionen von ChatGPT zu erweitern
- Es ermöglicht den Zugriff auf Echtzeitinformationen, auf das Dokumenten-Repository/KB eines Unternehmens, das Ausführen von Berechnungen oder die Nutzung von Drittanbieterdiensten wie Reservierungen/Bestellungen
- OpenAI hat außerdem zwei selbst entwickelte Plugins vorgestellt: Web Browser (Zugriff auf externe URLs) und Code Interpreter (stellt einen Python-Interpreter in einer Sandbox-Umgebung bereit)
- Das Knowledge-Base-Retrieval-Plugin wurde als Open Source veröffentlicht, sodass es jeder nutzen und zur Verwendung der eigenen KB erweitern kann
- Die ersten Plugins wurden unter anderem von Expedia, FiscalNote, Instacart, KAYAK, Klarna, Milo, OpenTable, Shopify, Slack, Speak, Wolfram und Zapier entwickelt
- Derzeit befindet sich das Ganze in einer Limited Alpha; für die Plugin-Entwicklung ist eine Registrierung auf der Waitlist erforderlich
~~ Der Einführungsbeitrag von kuroneko wird hier ebenfalls beigefügt.
- OpenAI plant die Einführung der ChatGPT-Plugin-Funktion und sammelt derzeit Interessenten über eine Warteliste.
- Dadurch kann ChatGPT auf aktuelle Informationen zugreifen oder in Verbindung mit Drittanbieterdiensten ausgeführt werden.
- Demo: Mit OpenTable Restaurants suchen, mit WolframAlpha die Kalorien eines Rezepts berechnen und mit Instacart Zutaten bestellen.
- Auch drei selbst entwickelte Plugins wurden zusammen vorgestellt.
- Ein Browsing-Plugin, mit dem ChatGPT die Welt des Internets direkt erkunden kann.
- Es kann Suchanfragen ausführen, passende Links in den Suchergebnissen anklicken, zur vorherigen Seite zurückkehren, andere Suchergebnisse ansehen oder neue Suchanfragen starten.
- Es erkundet das Internet wie ein Mensch und teilt die Ergebnisse mit.
- Ein Code-Interpreter-Plugin, mit dem ChatGPT Python-Code direkt ausführen kann.
- Es bietet eine isolierte Python-Ausführungsumgebung, die während der laufenden Chat-Unterhaltung bestehen bleibt.
- Nutzer können Dateien in den Arbeitsbereich hochladen und die erzeugten Ergebnisse herunterladen.
- Demo: Analyse bereitgestellter CSV-Dateien und Erstellung von Diagrammen oder Verarbeitung bereitgestellter Bilder.
- Ein Retrieval-Plugin, das ChatGPT den Zugriff auf persönliche oder organisatorische Informationen ermöglicht.
- ChatGPT durchsucht natürlichsprachliche Anfragen stellvertretend und findet in Quellen wie Dateien, Notizen und E-Mails die relevantesten Materialien.
- Dieses Plugin wurde als Open Source veröffentlicht.
8 Kommentare
Die einzelnen Unternehmen haben auch jeweils ihre eigenen Vorstellungsartikel zu ihren ChatGPT-Plugins veröffentlicht.
https://twitter.com/gdb/status/1638971232443076609
Dies ist ein von Greg Brockman, dem Präsidenten von OpenAI, gepostetes Beispielvideo zur Verwendung eines Videoverarbeitungs-Plugins.
Nachdem man eine mp4-Datei hochgeladen und gesagt hat: "Extrahiere bitte nur die ersten 5 Sekunden", erstellt es ein Video, das nur diese 5 Sekunden enthält, und erzeugt einen herunterladbaren Link dafür.
Außerdem ein Video, das die Reaktionen unter der Hacker-News-URL zu ChatGPT Plugins liest und zusammenfasst.
https://twitter.com/gdb/status/1638986918947082241
Wenn Plugins gut genutzt werden, scheint es möglich zu werden, echte menschliche Arbeit zu ersetzen.
Zum Beispiel könnten sie in einem bestimmten Zeitraum selbstständig nach dem günstigsten Flugticket suchen und es buchen, mit Home IoT verknüpft benötigte Alltagsartikel erkennen und bestellen oder meine eingehenden E-Mails für mich lesen und mir nur die wirklich wichtigen Inhalte noch einmal mitteilen ...
In dem Moment, in dem Plugins für alle freigegeben werden, könnte das vielleicht eine ähnliche Wirkung auslösen wie damals der Start von ChatGPT.
Auch die selbst entwickelten Plugins sind wirklich spannend.
Wenn man sich das Dokument ansieht, das GPT-4 ausführlich beschreibt, heißt es dort, dass es möglich gewesen sei, es menschenähnlich handeln zu lassen; ich vermute, genau solche Aspekte wurden auf Web-Browsing und die Ausführung von Python-Code angewendet.
Gerade Python könnte, wenn es sich noch weiterentwickelt, vielleicht sogar dazu führen, dass ChatGPT mit großen GPU-Servern verbunden wird und GPT-5 trainieren kann ... Wäre das nicht genau die Singularität?
Es gibt Dienste, die mit dem Teilen von Prompts Geld verdienen; die dürften davon wohl getroffen werden.
Ach, ich habe den Beitrag direkt beim Sehen verfasst, aber war wohl ein paar Minuten zu spät. Kann man das doppelte Thema entfernen?
Der von Ihnen verfasste Beitrag ist wirklich sehr gut, aber da es keine Funktion zum Zusammenführen von Topics gibt, werde ich den Haupttext manuell zusammenführen. Vielen Dank
Es wäre schön, wenn Sie den Kommentar auch hier unverändert mit einstellen könnten!
Ich habe den Kommentar erneut gepostet. Vielen Dank!
Ich habe mich gefragt, warum das nicht möglich ist … aber sie haben es so umgesetzt, dass man sich auf verschiedene Weise beteiligen kann.
Auch der Plugin-Entwicklungsprozess ist einigermaßen einfach. https://platform.openai.com/docs/plugins/introduction
Man lädt ein Manifest auf die eigene Website hoch, registriert das Plugin, und danach kann es verwendet werden.
Es erinnert an den App Store aus den frühen Tagen der Smartphones.