Ein Prototyp, der mit AR und ML auf dem Smartphone aufgenommene Objektfotos nach dem Entfernen des Hintergrunds sofort in ein Dokument auf dem Computerbildschirm einfügt, den die Kamera gerade sieht
Der vollständige Quellcode ist auf GitHub veröffentlicht
Mobile App: React Native
Lokaler Server: Schnittstelle zwischen Mobile-App und Photoshop. OpenCV + Python
→ Mit Screenpoint wird die Position des Monitors ermittelt, den die Smartphone-Kamera sieht
→ Die aktuelle Objekterkennung wird durch die Ausführung eines separaten BASNet-Servers angebunden. Es wäre wohl auch möglich, DeepLab von TensorFlow Lite direkt in der App zu verwenden
1 Kommentare
Da sich die AR- und ML-Leistung von Smartphones zunehmend verbessert, werden solche Interfaces wohl immer häufiger werden.
GitHub: https://github.com/cyrildiagne/ar-cutpaste