19 Punkte von xguru 2023-05-11 | 2 Kommentare | Auf WhatsApp teilen
  • Zusammenfassung der Keynote

Einführung generativer KI

  • Gmail „Help me write“: E-Mails automatisch verfassen und nach Wunsch verfeinern (Formalize, Elaborate, Shorten, ..)
  • Maps „Immersive View for Route“: Ganze Routen in einer immersiven Ansicht anzeigen. 15 Städte (London, New York, Tokio, SF, ..)
  • Photo „Magic Editor“: Unnötige Bereiche entfernen, Objekte verschieben und fehlende Bildteile generieren und auffüllen

Making AI helpful for everyone

  • Wissen und Lernen verbessern
  • Kreativität und Produktivität steigern
  • Anderen ermöglichen, Innovationen zu schaffen
  • Verantwortungsbewusst entwickeln und bereitstellen

Vorschau auf PaLM 2

  • PaLM 2 wird in mehr als 25 Produkte und Funktionen integriert
  • Vier Modellgrößen: Gecko (mobile Geräte und offline), Otter, Bison, Unicorn
  • Mit mehr als 100 Sprachen trainiert, kann verstehen und erzeugen
  • Demonstration, wie Code-Bugs behoben, erklärt und Kommentare auf Koreanisch hinzugefügt werden
  • Sec-PaLM, ein mit Sicherheitswissen feinabgestimmtes PaLM 2, erkennt Sicherheitsbedrohungen
  • Med-PaLM 2, auf medizinisches Wissen abgestimmt, reduziert Fehldiagnosen um das 9-Fache und ist das erste LLM auf Expertenniveau
    • Auch die Analyse von Informationen aus Xray und Mammogram wird ergänzt
  • Das Team Google DeepMind, entstanden aus Google Brain und DeepMind, trainiert Gemini als nächstes Foundation Model
    • Ein multimodales Modell, das wie PaLM 2 in verschiedenen Modellgrößen angeboten werden soll

AI Responsibility

  • Mit Watermarking und Metadaten soll erkennbar sein, ob Inhalte generiert wurden

Google Bard

  • Läuft derzeit auf Basis von PaLM 2
  • Kann Code in mehr als 20 Sprachen erzeugen und debuggen
  • Ab nächster Woche sollen erzeugte Codes Citation-Informationen enthalten
  • Erzeugter Code kann direkt nach Colab/Replit exportiert werden
  • Dark Theme wird ab heute unterstützt
  • Schaltflächen hinzugefügt, um Bard-Antworten an Google Docs oder als Entwurf an Gmail zu senden

Bard + Tools

  • In einigen Wochen werden Bilder in Antworten und Prompts unterstützt
    • Über Google Search und den Knowledge Graph werden die passendsten Bilder zu den Ergebnissen angezeigt
    • Funktionen von Google Lens werden in Bard integriert: Erstelle eine lustige Bildunterschrift für ein Foto mit zwei Hunden (Golden Retriever und Schäferhund)
  • Gefundene Ergebnisse in Google Maps anzeigen
  • Als Tabelle darstellen und nach Google Sheets exportieren
  • Geplante Integration mit verschiedenen Diensten wie Instacart, Indeed und Khan Academy
  • Unterstützung für Bildgenerierung mit Adobe Firefly
  • Ab heute ohne Waitlist in mehr als 180 Ländern auf Englisch verfügbar, unterstützt auch Koreanisch und Japanisch
  • Unterstützung für mehr als 40 Sprachen geplant
  • Mit dem Wechsel auf das Gemini-Modell wird es weitere Fortschritte geben

KI in Google Workspace

  • Docs „Help me write“
  • Sheets „Help me organize“: Eine Situation beschreiben, und passende Datenformate werden erzeugt
  • Slides „Help me visualize“: Aus vorhandenem Text passende Folien erzeugen und den Stil ändern
  • Duet AI for Workspace
    • Die KI schlägt proaktiv Prompts vor und passt sich automatisch an die aktuelle Arbeit an
    • Über die Funktion Docs Sidekick (Arbeitstitel) wird das gerade bearbeitete Dokument erkannt und es werden verschiedene Prompts vorgeschlagen
    • Gmail Sidekick fasst E-Mail-Threads zusammen (schlägt Kalendereinladungen oder Bilder für E-Mails vor)
    • Slides Sidekick zeigt die Zusammenfassung der gesamten Präsentation an (schlägt Prompts für FAQ-Folien und Sprechernotizen vor)

Labs

  • Unter g.co/labs können verschiedene KI-Experimente angesehen und ausprobiert werden

Google Search

  • Den Suchergebnissen wird ein generativer KI-Bereich hinzugefügt, mit verschiedenen Empfehlungen, Verfeinerungsoptionen und möglichen Anschlussfragen
  • Erkennt den bestehenden Kontext in Gesprächen
  • Integration mit dem Google Shopping Graph
  • Nutzbar über die Aktivierung von SGE (Search Generative Experience) in Search Labs von Labs (Waitlist)

KI in Google Cloud

  • Unterstützung für die Entwicklung von KI-Anwendungen auf der Vertex AI-Plattform
  • Enterprise Search verfügbar
  • PaLM 2 und drei neue Modelle verfügbar
    • Imagen: Bilderzeugung
    • Codey: Code-Autovervollständigung
    • Chirp: Speech to Text. Mehr als 300 Sprachen
  • RLHF-Funktion zur Vertex-Plattform hinzugefügt, damit eigene Modelle feinabgestimmt werden können
  • Duet AI for Google Cloud
    • AI Expert unterstützt Entwickler
  • A3 Virtual Machines hinzugefügt
    • Basierend auf NVIDIA H100 GPU

PaLM API

  • Unter g.co/palm kann man sich auf die Waitlist setzen lassen

Project Tailwind

  • AI-first-Notebook
  • Unter g.co/labs kann man sich auf die Waitlist setzen lassen

Responsible AI

  • Alle von Google erzeugten Bilder sollen in den Metadaten enthalten, dass sie von KI erzeugt wurden
  • Universal Translator mit Lip matching / Speech generation / intonation / translation
  • Einführung von Automated adversarial testing

Pixel

  • Personal AI mit dem Google Tensor G2-Chip
  • Pixel Call Assist übernimmt Anrufe mit langen Wartezeiten
  • Gespräche mit Pixel Speech transkribieren
  • Generative AI Wallpaper
  • Pixel 7a vorgestellt ($499)

Pixel Tablet

  • Google Tensor G2
  • Ladefähiges Speaker Dock vorgestellt
    • Im Docking-Betrieb arbeitet es im Hub-Modus und wird zu einem digitalen Bilderrahmen
  • Unterstützung für mehrere Nutzer
  • Chromecast integriert
  • Speaker Dock für $499 inklusive

Google Pixel Fold

  • Google Tensor G2
  • Faltbares Gerät mit Frontdisplay und faltbarem Display
  • Dreifache Bildschirmfläche eines normalen Smartphones (7,6 Zoll)
  • Corning Gorilla Glass Victus
  • IPX8-Wasserschutz
  • Aufnahmen ohne Stativ möglich
  • Beide Displays können gleichzeitig verwendet werden
    • Im Dual Screen Interpreter Mode wird nur die Übersetzung auf dem vorderen Display angezeigt
  • Mit der Continuity-Funktion wird ein Inhalt, der auf dem Frontdisplay angesehen wird, nach dem Aufklappen nahtlos auf dem gesamten Display weiter abgespielt
  • Multitasking per Split Screen unterstützt
  • Beim Ansehen von YouTube wechselt es beim leichten Zusammenklappen in den Tabletop-Modus und spielt nur auf dem oberen Display ab. Unten werden Steuertasten angezeigt
  • Vorbestellung für $1799 möglich (Versand im nächsten Monat)
    • Vorbesteller erhalten eine Pixel Watch
    • Google One für 6 Monate und YouTube Premium für 3 Monate

2 Kommentare

 
roxie 2023-05-12

Ganz schön heftig.

 
pugh123 2023-05-11

Danke für die Zusammenfassung.^^