Keyboard Connect: Plattform für Remote-Klavierunterricht auf Basis der Web MIDI API

 (keyboardconnect.com)
1 Punkte von GN⁺ 2024-02-12 | 1 Kommentare | Auf WhatsApp teilen
  • Ein Dienst, der das Problem verringern will, dass sich in Remote-Klavierstunden Sprache, Video und Tastatureingaben nur schwer gemeinsam handhaben lassen – durch webbasierte Videokonferenzen und MIDI-Sharing
  • Die Kernfunktionen sind Video Calling und MIDI Sharing; als Übertragungsart wird P2P-Verschlüsselung hervorgehoben
  • File Sharing soll bald verfügbar sein, Lesson Planning und Record Playback sind für später angekündigt
  • Im Vergleich dazu gelten bestehende Setups wie MIDI-Controller·DAW·Routing-Software oder Digitalpiano·Audio-Interface als mit hohen Kosten und hoher Einrichtungskomplexität verbunden
  • Keyboard Connect senkt die Einstiegshürde mit einem Setup rund um MIDI-Controller und Webcam; Tutoren können den Dienst per E-Mail oder über die Buchung eines 30-minütigen Calls kontaktieren

Funktionen für Remote-Klavierunterricht

  • Keyboard Connect ist ein Videokonferenzdienst für Klaviertutoren, der eine Unterrichtsumgebung schaffen will, in der Schüler im Remote-Unterricht fokussierter mitmachen können

  • Derzeit verfügbare Kernfunktionen

    • Video Calling

    • MIDI Sharing

      • Als Übertragungsart wird P2P Encrypted Transmission hervorgehoben

  • Geplante Funktionen und Lernwerkzeuge

    • File Sharing: bald verfügbar
    • Lesson Planning: später verfügbar
    • Practice Tools
    • Record Playback: später verfügbar
    • Für Tutoren wird betont, dass eine bessere Unterrichtserfahrung dabei hilft, Schüler zu halten; für Schüler soll eine höhere Beteiligung bessere Lernergebnisse unterstützen

Kostenvergleich mit bestehenden Remote-Unterrichts-Setups

  • Es wird der Vergleich gezogen, dass neue Schüler bisher teurere und komplexere Ausrüstung benötigten, um in einem Videoanruf sowohl Sprache als auch Klavierklang zu übertragen
    • MIDI controller + DAW + piano VST + routing software: ca. $200
    • Digital piano + audio interface + routing software: ca. $600
    • Acoustic piano + high quality mic + room treatment: ca. $3000
  • Keyboard Connect vergleicht dies mit einem Setup, bei dem nur ein MIDI controller angeschlossen wird und das ab $60 starten kann
  • Auch bei einem Setup, das gleichzeitig den Spieler und eine Draufsicht auf das Klavier zeigt, wird der Unterschied bei der Ausrüstung betont
    • Bestehendes Setup: two cameras + mounting equipment + OBS/USB switcher, ca. $150
    • Keyboard-Connect-Setup: webcam, $0–$40
  • Klaviertutoren können dem Dienst ihre Arbeit per E-Mail an jeremy@keyboardconnect.com oder über eine 30-minütige Call-Buchung vorstellen

Verwandte Beiträge

1 Kommentare

 
GN⁺ 2024-02-12
Hacker-News-Kommentare

  • Während Corona musste ich Remote-Klavierunterricht vorbereiten und habe versucht, zwei Videos zu kombinieren, um gleichzeitig die Hände über den Tasten und das Gesicht zu zeigen, aber damals war die Latenz viel zu hoch.
    Am Ende habe ich nur eine Kamera von oben verwendet, eine transparente Acrylplatte in einem 45-Grad-Winkel vor dem hochgestellten Laptop platziert und das Gesicht des Pianisten beleuchtet. Diesen Effekt nennt man Pepper's Ghost.
    Dadurch konnte der Lehrer mit nur einer Kamera sowohl die Hände auf den Tasten als auch das Gesicht des Spielers sehen, und der Spieler wirkte, als würde er wie bei einem Teleprompter direkt in die Kamera schauen. Ich lasse das hier, falls es jemand anderem helfen könnte.

    • Klingt ziemlich interessant. Ich würde gern sehen, wie so ein Aufbau tatsächlich funktioniert oder ein Beispiel davon.
    • Ich frage mich, ob „die Latenz war viel zu hoch, wenn man zwei Videos kombiniert“ an CPU-Grenzen lag.
      OBS hat normalerweise keine so große Verzögerung, selbst wenn mehrere Quellen gleichzeitig kombiniert werden, und zumindest Audio und Video lassen sich synchron halten.

  • Wirklich ein tolles Konzept, und Glückwunsch zum Launch.
    Ich habe in den letzten Jahren selbst eine Web-MIDI-App [0] gebaut und eine Multiplayer-Funktion auch eine Zeit lang in Betracht gezogen. Mich würde interessieren, wie hoch die Latenz ist.
    Auf der Landingpage wäre ein Videobeispiel der App hilfreich, und es scheint besser zu sein, Besucher erst dann zum Login zu zwingen, wenn sie nach dem Ausprobieren des Klaviers die Remote-Funktion nutzen wollen. Die Buttons, die man anklicken oder auswählen kann, bei denen beim Drücken aber nichts passiert, fand ich etwas verwirrend.
    In der App hat die Tastaturverbindung problemlos funktioniert und es gab keine Berechtigungsanfrage, aber eine Anzeige, dass ein MIDI-Gerät verbunden ist, wäre hilfreich. Wenn ich die Tasten mit der Maus anklickte, kam kein Ton, und bei meinem Yamaha P120 MIDI-Keyboard blieben gedrückte Tasten ausgewählt, sodass ich sie nur einmal anschlagen konnte. Es wirkt, als würden noteOff-Events nicht registriert; ich würde daher empfehlen, noteOn mit Velocity 0 ebenfalls als noteOff zu behandeln und bei einem noteOn für einen bereits spielenden Ton selbst noteOff aufzurufen, um hängenbleibende Tasten zu vermeiden.
    Ich würde die Tastatur nicht automatisch je nach Bildschirmgröße ausblenden. Das sieht vielleicht besser aus, aber man muss an Leute denken, die auf Tablets oder Smartphones spielen möchten und den Zoom nicht ändern können. Das Konzept ist wirklich gut, und viel Erfolg bei der weiteren Entwicklung. Wenn du Hilfe brauchst, melde dich gern :-)
    [0] app.midiano.com

    • Schön, noch einen HN-Nutzer auf derselben Wellenlänge zu sehen :) Ich probiere die App aus und schicke Feedback. In der Zwischenzeit könnte es auch Ideen geben, die man von pianojacq.com übernehmen kann.
    • Vielen Dank für das Feedback, die Vorschläge sind alle hilfreich. Ich werde anhand jedes einzelnen nach und nach Anpassungen vornehmen.
      Die Latenz habe ich nicht direkt gemessen, aber ich habe es mit meiner Schwester getestet, die auf der anderen Seite der USA lebt, während wir gleichzeitig telefoniert haben. Wenn sie gesprochen oder einen Ton gespielt hat, habe ich es in der App vor dem Telefon gehört, also ist es zumindest besser als ein Telefonat.

  • Sieht wirklich beeindruckend aus, ich würde es gern selbst ausprobieren.
    Aus Sicht eines Schülers habe ich wenig Interesse an einer zweiseitigen Plattform. So wirkt es gerade, aber was ich möchte, ist, über die Website verifizierten Klavierunterricht zu buchen und den empfohlenen USB-MIDI-Adapter zu kaufen.
    Als kurzfristiges MVP wäre es gut, Adapter zu empfehlen, deren Funktion auf einer Seite mit Partnerprogramm bestätigt ist. Langfristig könnte man auch überlegen, eine Firma zu finden, die das als White-Label verkauft, damit man Logo und Website daraufsetzen kann, aber das ist viel weniger wichtig als die anderen Dinge, die ihr gerade baut, also kann es vorerst warten.
    Für die ersten paar Unterrichtsstunden und das anschließende Üben wären automatisierte vorab aufgezeichnete Lektionen gut, mit denen man Grundlagen lernen oder das schnelle Lesen von Noten trainieren kann.

    • Was den „USB-MIDI-Adapter“ angeht: Eigentlich ist USB MIDI der kleinste gemeinsame Nenner bei MIDI-Keyboards. Wenn man ein gebrauchtes MIDI-Keyboard aus den letzten zehn Jahren nimmt, ist die Chance hoch, dass es USB hat, und auf Craigslist reichen 40 bis 60 Dollar völlig aus.
      Für Anfänger ist die größte Entscheidung die Anzahl der Tasten und wie viel Platz man dafür hat. Es gibt alles von 25 bis 88 Tasten.
      Mit steigendem Preis kommen je nach Modell ältere 5-polige MIDI-Ein- und Ausgänge, anschlagdynamische Tasten, halbgewichtete/gewichtete Hammermechanik, Aftertouch, Eingänge für Fußcontroller, Pads/Knobs/Fader zur DAW-Steuerung, ein eingebauter Sequencer, externe Sync-Ein- und Ausgänge sowie CV- und Gate-Ausgänge zur Verbindung mit modularen Geräten dazu.
    • So etwas gibt es bereits, und das ist ein ziemlich solider Markt mit mehreren Anbietern. Während Corona habe ich eine Zeit lang https://pianomarvel.com/ genutzt, und es war bis zu einem gewissen Grad hilfreich.
    • Die Vorschläge sind sehr gut und die Richtung fühlt sich richtig an. Ich werde diese Richtung weiter erkunden, um die Plattform auszubauen.

  • Ich würde gern Feedback sowohl aus Lehrer- als auch aus Schülersicht geben, aber auf der Website gibt es außer ein paar kleinen Animationen keine Möglichkeit zu sehen, was das Produkt tatsächlich tut und wie es funktioniert.
    Mindestens ein YouTube-Demovideo, idealerweise direkter Zugang zu einer echten Demo-Oberfläche, wäre hilfreicher.
    Ich dachte, Getting Started könnte helfen, wurde dann aber in einen Anmeldefluss gezwungen, in den ich nicht investieren möchte, bevor ich mehr über das Ergebnis weiß.

    • Stimmt. Der obligatorische Login zwischen Landingpage und App hat mich auch gestört. Ich werde ein umfassenderes Demovideo erstellen und es vor der Anmeldung zugänglich machen.

  • Soweit ich gehört habe, sollen MIDI-Controller fürs Klavierlernen nicht besonders gut sein. Um sich die richtigen Gewohnheiten anzugewöhnen und die Fingerkraft aufzubauen, brauche man eine Hammermechanik-Tastatur und den vollen Umfang von 88 Tasten
    Ich selbst habe im Präsenzunterricht an einem echten Klavier gelernt und kann daher aus persönlicher Erfahrung nichts zum Lernen mit MIDI-Controllern sagen, aber es klingt plausibel

    • MIDI bedeutet nicht automatisch, dass keine Hammermechanik vorhanden ist
      Jedes Digitalpiano hat USB-MIDI, und auf Craigslist findet man für ein paar hundert Dollar leicht gebrauchte Geräte mit Hammermechanik
      Mein Yamaha U1 wurde auch mit einer Box geliefert, über die es sich per MIDI verbinden lässt
    • Ich denke, es dauert ziemlich lange, bis andere Faktoren wichtiger werden als dass der Schüler tatsächlich ins Spielen eintaucht und konsequent dabeibleibt
      Insofern kann ein billiges Plastik-MIDI-Keyboard, das leicht zu bekommen und leicht hinzustellen ist, besser sein als ein Steinway. In diesem Stadium ist es wichtiger, dass es griffbereit ist, als dass es perfekt passt
      Das sage ich als Musikstudent, aber es ist natürlich keine allgemeingültige Ansicht
    • Man kann auch 88-Tasten-MIDI-Keyboards mit Hammermechanik kaufen
      Selbst unter elektrischen Pianos wie Wurlitzer oder Rhodes gibt es viele mit weniger als 88 Tasten und nur halbgewichteter Tastatur
    • Ich stimme zu, dass Hammermechanik besser ist, aber der Grund ist nicht „Fingerkraft“, sondern dass sie Fingerkoordination entwickelt
      Die Finger sind bereits stark genug, um Tasten mit Hammermechanik zu drücken. Besonders dann, wenn man in der Technik lernt, die Schwerkraft zu nutzen
      Hammermechanik ist wichtig für die Entwicklung der Koordination. Der Widerstand der Tasten hilft dabei, die Verbindung zwischen Anschlag und erzeugtem Klang zu kalibrieren. Man braucht sowohl kinästhetisches als auch auditives Feedback
    • Tatsächlich fühlt sich jedes Klavier anders an. Einer der Nachteile dieses Instruments ist, dass man bei Auftritten oft einfach auf dem vorhandenen Klavier spielen muss. Die zuvor erwähnten tragbaren Digitalpianos sind eine Ausnahme
      Selbst wenn man nur ein digitales Keyboard hat, sollte man deshalb das Lernen nicht aufgeben

  • Glückwunsch zum Launch
    Ich würde empfehlen, Videos aus Spielerperspektive aufzunehmen. Sonst müssen die Schüler das Bild beim Anschauen gedanklich umdrehen, was eine zusätzliche Abstraktionsebene schafft
    Es sei denn, man will den Schülern auch beibringen, Pianisten aus Publikumsperspektive zu lesen

  • Es gibt auch https://plugandplink.com/. Dort ist eine Hardware-Komponente enthalten, die Lernenden hilft, und die „Snake“ leuchtet auf
    Die App enthält außerdem vorgefertigte Videos und Lektionen, die mit der Hardware interagieren. Dinge wie Tonleitern und Arpeggien
    Mein Sohn nutzt es mit einem Remote-Tutor, und es funktioniert sehr gut. Außerdem kann er sich mit der App und der Snake in der restlichen Zeit der Woche selbst durchs Üben führen lassen

    • Ziemlich cool, aber gibt es keine Version für ein Klavier in voller Größe? Und 125 Dollar?! Wahrscheinlich, weil es noch Gen 1 ist

  • Als die Pandemie begann, brauchte ich eine schnelle Lösung für den Klavierunterricht meiner Tochter. Ich habe eine Konfiguration aus OBS, Synthesia und einer alten Logitec-Webcam gebaut, die noch im Haus herumlag. Damals war es fast unmöglich, neue Webcams zu bekommen
    Über die Laptop-Kamera habe ich ein Frontalbild der Spielerin gesendet, über die Webcam ein Bild der mittleren Tasten von oben. Der Blickwinkel der Kamera reichte nicht aus, um die ganze Tastatur zu erfassen. Dazu kam noch die virtuelle Tastatur von Synthesia. In OBS hatte ich drei Layouts für diese Elemente angelegt und den Wechsel per Leertaste ermöglicht
    Beim Audio habe ich das Laptop-Mikrofon für die Sprache mit dem Direktsignal des E-Pianos gemischt. Für die damalige Zeit hat das ziemlich gut durchgehalten
    Es gab auch Einschränkungen, die eine verbesserte Lösung heute wohl nicht mehr hätte: Die Lehrkräfte konnten sich nicht auf eine einzige Videokonferenz-Software einigen, deshalb musste mein Setup unabhängig sein. Dadurch war die Unterstützung für die virtuelle Kamera von OBS fast eine naheliegende Wahl

  • Aus Marketing-Sicht würde ich ändern, dass man im Loop-Video auch sieht, wie der Tutor unter den Händen ein Keyboard hat
    Normalerweise spielt ein Tutor die verbesserte Passage selbst vor, während er erklärt, was falsch gespielt wurde und den korrekten Teil stärker hervorhebt, wenn er einen Fehler hörbar machen will
    Das aktuelle Loop-Video wirkt eher wie etwas von YouTube oder wie ein formelles geschäftliches Zoom-Gespräch. Das wirklich Besondere an dieser interessanten Plattform ist aber das Gefühl der Verbundenheit zwischen Tutor und Schüler, und das kommt weniger zur Geltung
    Coole Plattform

    • Guter Vorschlag. Ich werde das auf jeden Fall im Kopf behalten, wenn ich ein ordentliches Demo-Video mache

  • Sieht ziemlich cool aus. Ich würde gern eine kurze YouTube-Demo sehen, in der das Produkt tatsächlich funktioniert. Ich frage mich, was im realen Einsatz der größte Vorteil der MIDI-Funktionen ist

    • Ich werde auf jeden Fall ein Demo-Video erstellen, bevor ein Login erforderlich ist. Wenn ich MIDI in Echtzeit während des Gesprächs zeige, kann ich die Schwierigkeit vermeiden, gleichzeitig aufzuzeichnen, wie ich spiele und welche Noten ich anschlage
      Außerdem ist MIDI digital dargestellt, wodurch Dinge wie Akkord-/Skalenerkennung, Aufnahme und Wiedergabe sowie die Anzeige des Live-Spiels über den Noten möglich werden