Saltar al contenido
Todo el trabajo
Trayectoria del fundador

Mixed Reality Desktop App

Detección de objetos en tiempo real y seguimiento tridimensional para una experiencia gubernamental de realidad mixta

Entregado en colaboración con Live Pixel y Mizzle Codes.

Tipo
App de escritorio
Cuándo
42 días
La aplicación de escritorio de realidad mixta funcionando en una tableta: un sujeto seguido dentro de una caja delimitadora tridimensional de malla, con miniaturas seleccionables de los sujetos debajo
Detección y seguimiento 3D en la app entregada
Del inicio a la demostración ante el gobierno
42 díasDel inicio a la demostración ante el gobiernoTrayectoria del fundador
Detección y composición, en hardware local
Tiempo realDetección y composición, en hardware localSin viajes de ida y vuelta a la nube
Instalación pública en la Asamblea Legislativa del Estado
En vivoInstalación pública en la Asamblea Legislativa del EstadoLucknow Vidhan Sabha

Resumen

Una aplicación de escritorio de realidad mixta "Selfie Point" para la Lucknow Vidhan Sabha: señal de cámara en vivo, detección de objetos en tiempo real y seguimiento posicional que integran a los visitantes en contenido de realidad mixta, entregada en 42 días.

Una instalación pública de realidad mixta para la Asamblea Legislativa de Uttar Pradesh, operada como aplicación de escritorio en un entorno gubernamental en vivo.

El reto

  • Detección y composición en tiempo real en hardware local, sin viajes de ida y vuelta a la nube
  • Un plazo fijo de 42 días que terminaba en una demostración pública en vivo
  • Funcionar de forma fiable en un entorno no controlado y de alta afluencia

Qué construimos

  1. Señal de cámara en vivo capturada y procesada en tiempo real
  2. Detección de objetos basada en YOLO en cada fotograma
  3. Seguimiento espacial y posicional de los sujetos detectados
  4. Composición de realidad mixta de los sujetos en vivo con contenido renderizado
  5. Empaquetado como aplicación de escritorio para operación in situ

Nuestro papel

Ingeniería de visión por computadora y de aplicaciones

  • Pipeline de detección y seguimiento
  • Composición de realidad mixta
  • Entrega in situ

Entregado en colaboración con Live Pixel y Mizzle Codes.

Plataforma y stack

  • Python
  • OpenCV
  • Detección de objetos con YOLO
  • Procesamiento de imágenes en tiempo real
  • Seguimiento tridimensional

Del producto entregado

La aplicación de realidad mixta en una ventana, con el encabezado de la Asamblea Legislativa de Uttar Pradesh, un panel de entornos y tres mosaicos de entorno seleccionables sobre un fondo de cámara en vivo
Selección de entorno sobre la señal de cámara en vivo
Aplicación de escritorio de realidad mixta demostrada en la Asamblea Legislativa del Estado de Uttar Pradesh
Demostración en la Asamblea Legislativa del Estado
Siguiente proyectoNational People's PartySitio web

Construya un sistema con una complejidad similar

Reserve una consulta gratuita de 30 minutos o escríbanos, siempre hablará directamente con la persona que construye su producto.

Techon Pixel · info@techonpixel.com