Un prototipo que usa AR y ML para insertar de inmediato, en un documento de la pantalla de la computadora que está viendo la cámara, una foto de un objeto tomada desde el teléfono después de quitarle el fondo
El código fuente completo está publicado en GitHub
App móvil: React Native
Servidor local: interfaz entre la app móvil y Photoshop. OpenCV + Python
→ Con Screenpoint identifica la posición del monitor que está viendo la cámara del smartphone
→ Actualmente el reconocimiento de objetos se conecta ejecutando un servidor BASNet por separado. También podría ser posible usar DeepLab de TensorFlow Lite dentro de la app
1 comentarios
Como el rendimiento de AR y ML en los smartphones sigue mejorando, parece que veremos más interfaces como esta.
GitHub : https://github.com/cyrildiagne/ar-cutpaste