2 Punkte von GN⁺ 2023-07-31 | 1 Kommentare | Auf WhatsApp teilen
  • Künstliche Intelligenz (AI) ist eine disruptive Technologie, die das Web verändert und das Leben der Menschen beeinflusst.
  • Mozilla engagiert sich für vertrauenswürdige AI mit einem Schwerpunkt auf Transparenz, Schutz der Privatsphäre der Nutzer, Nutzerautonomie, Sicherheit und der Minimierung von Bias.
  • Generative AI-Chatbots wie ChatGPT und Bard sind populär, werden jedoch von mächtigen Technologieunternehmen betrieben.
  • Mozilla glaubt an die kollaborative Kraft von Open Source, stärkt Nutzer und verhindert die technologische Kontrolle durch einige wenige Unternehmen.
  • Mozilla hat kürzlich einen Hackathon veranstaltet, um einen internen Chatbot-Prototypen zu entwickeln, der in sich abgeschlossen, Open Source und mit ihren Prinzipien vereinbar ist.
  • Dabei standen sie vor Problemen wie Hosting, Runtime-Umgebung, Modellauswahl, Bias und der Integration internen Wissens.
  • Als Runtime-Umgebung wurden llama.cpp und Hugging Faces text-generation-inference verwendet.
  • Das LLaMA-2-Modell wurde für den Chatbot ausgewählt, wobei die Einschränkungen anerkannt wurden und künftig eine Neubewertung geplant ist.
  • Mit Embeddings und Vektorsuche wurde Mozillas internes Wissen in den Chatbot integriert.
  • Prompt Engineering ist für die Funktionalität des Chatbots wichtig und hilft dabei, fortlaufende Gespräche nachzuverfolgen.
  • Der System-Prompt ist die anfängliche Anweisung, die dem Chatbot seine Funktion und sein Verhalten definiert.
  • Das Kontextfenster des Chatbots bestimmt sein Gedächtnis und seine Fähigkeit, auf frühere Fragen und Antworten Bezug zu nehmen.
  • Die Verwaltung des Kontextfensters ist wichtig für Prompt Engineering und die Aufrechterhaltung des Gesprächskontexts.
  • LangChain ist ein führendes Orchestrierungswerkzeug im Bereich der Sprachmodelle, kann jedoch komplex zu erlernen und zu verwenden sein.
  • Die Benutzeroberfläche des Chatbots muss fortlaufende Gespräche, frühere Threads und weitere Komplexitäten handhaben.
  • Open-Source-Chatbot-UIs wie chatbot-ui und Companion können als Frontend für Sprachmodelle verwendet werden.
  • Mozilla hat einen Prototyp-Chatbot entwickelt, der ihre Werte widerspiegelt und sicher innerhalb der Organisation gehostet wird.
  • Open-Source-Chatbots befinden sich weiterhin in der Entwicklung, und es gibt Herausforderungen bei der Modellevaluierung und der richtigen Auswahl.
  • Mozilla will es Entwicklern erleichtern, sich am Open-Source-Ökosystem des maschinellen Lernens zu beteiligen, und plant, zur Open-Source-Community beizutragen.

1 Kommentare

 
GN⁺ 2023-07-31
Hacker-News-Kommentare
  • Die US-Navy-Reihe für Elektro- und Elektronikausbildung (NEETS) und andere interessante Dokumente sind auf der Website zu finden.
  • Für Menschen mit mathematischem Hintergrund wird das Buch "Antenna Theory: Analysis and Design" empfohlen.
  • Auch das ARRL-Antennenbuch ist einen Blick wert.
  • Es gibt einen Artikel darüber, dass Militärflugzeuge zur Kommunikation mit U-Booten eine 5 Meilen lange Antenne verwenden.
  • Longwires machen nicht nur Spaß zum Experimentieren, sondern können mit zunehmender Länge auch stärker gerichtet werden.
  • Das Antennenhandbuch des US Marine Corps ist gut geschrieben und leicht zugänglich.
  • Praktisches Wissen aus solchen Handbüchern ist oft wichtiger als theoretisches Wissen.
  • Im Leitfaden fehlen Details dazu, wie EM-Felder erzeugt werden.
  • Die Gleichung für den Pfadverlust enthält einen Term f oder Lambda, was fragwürdig sein könnte.
  • Das US-Militär und andere Behörden erstellen gründliche und praxisnahe Schulungsunterlagen.