Brilliant Labs pone la IA frente a tus ojos con su pequeña lente AR de código abierto

El dispositivo portátil de realidad aumentada de Brilliant Labs contrasta marcadamente con el costoso, voluminoso y sigiloso Vision Pro de Apple. El producto inaugural de la startup, Monocle, es una lente AR de código abierto y de bolsillo que se puede colocar en cualquier gafa o sujetar al ojo. Lanzado en marzo, Monocle tiene un precio mucho más accesible de 349 dólares.

“Otros auriculares AR y VR tienden a mantenerte en el sofá de casa. Vamos exactamente en la dirección opuesta”, dijo Bobak Tavangar, director ejecutivo y cofundador de Brilliant Labs, en una entrevista con TechCrunch.

Para integrar su dispositivo AR en la vida diaria de las personas, Brilliant Labs, con sede en Singapur, pretende incorporar IA generativa en su dispositivo portátil compacto. Se ha recaudado algo de dinero para perseguir esta visión. Hoy, la startup anunció su financiación inicial de 3 millones de dólares liderada por Brendan Iribe, cofundador de Oculus; Adam Cheyer, cofundador de Siri; Eric Migicovsky, fundador de Pebble y ex socio de Y Combinator; Empresas Plug & Play; entre otros.

Un enfoque abierto

La comunidad de código abierto de Monocle ya ha ganado seguidores dedicados. En marzo, se volvió viral gracias a un grupo de estudiantes de Stanford que transformaron el ocular en una pantalla para GPT-4. Con la capacidad de escuchar la conversación de un usuario a través del micrófono de su teléfono en tiempo real, Monocle puede generar soporte personalizado, como ofrecer sugerencias sobre qué decir en una cita.

El proceso informático ocurre en el servidor de OpenAI. Luego, las respuestas se transmiten a través de Bluetooth desde el teléfono del usuario a Monocle y se proyectan en la lente frente al ojo del usuario.

Brilliant Labs también ha desarrollado internamente una aplicación similar. La solución arGPT, como se la llama, puede recibir sonido de forma nativa a través del micrófono de Monocle y otros sensores, lo que permite un diálogo de baja latencia con GPT-4.

Hasta ahora, Monocle ha atraído principalmente a desarrolladores, hackers, aficionados e investigadores que experimentan con el pequeño dispositivo del tamaño de la palma de la mano, un enfoque que el fundador cree que puede liberar el potencial de fusionar la IA generativa y la RA.

“Hay algo importante en permitir que la gente profundice en [the AR device’s] corazón y entenderlo y jugar con él y compartirlo con los demás, no simplemente recibir pasivamente algo que es la caja cerrada que unas pocas personas muy lejos han diseñado para el resto de nosotros”, dijo. «Creemos que hay algo realmente importante desde el punto de vista filosófico allí».

El desafío, por supuesto, es cómo salir de la base inicial de clientes geek y crear un producto que atraiga al mercado de consumidores más amplio.

Una estrategia ligera

Monocle viene con cinco procesadores diferentes, incluido un chip acelerador de matriz de puertas programables en campo (FPGA) pirateable que maneja los datos provenientes de la cámara, el micrófono y el sensor táctil capacitivo del dispositivo. El uso de componentes electrónicos de bajo consumo y piezas electrónicas miniaturizadas, según el fundador, permite que la lente sea compacta y pese sólo 15 gramos.

“Todas las demás empresas de dispositivos fabricaban auriculares voluminosos y caros. No estaban ganando dinero con ellos”, dijo Tavangar. «Esta era de la IA ya está aquí y desde el primer día, incluso antes de GPT, vimos una oportunidad de mercado con la visión por computadora».

En esta etapa, se necesita un teléfono inteligente que actúe como punto de retransmisión entre Monocle y las aplicaciones de inteligencia artificial basadas en la nube. Sin embargo, a largo plazo, el objetivo es crear una conexión directa entre el hardware y la nube, eliminando la necesidad de un servidor telefónico.

Con el tiempo, la visión de la compañía es ejecutar modelos de aprendizaje profundo directamente en sus pequeños dispositivos AR, lo que significa una latencia y funcionalidad aún menores incluso si se pierde la conexión a Internet.

El énfasis de Brilliant Labs en un diseño liviano se extiende a su estilo de gestión. A pesar de haberse establecido en 2019, la startup todavía está dirigida únicamente por sus tres cofundadores, lo que hace que uno se pregunte por qué otros fabricantes de dispositivos de realidad mixta necesitan cientos, si no miles, de personal. Hay señales de sobrecontratación. En febrero de 2021, hasta 200 personas se vieron afectadas durante un despido en Pico, una empresa de realidad virtual adquirida por ByteDance.

Tavangar atribuye su estilo de gestión a su paso por Apple, donde trabajó como líder de programa. Él cree que el enfoque es clave y que el éxito proviene de elegir una idea para implementar entre cientos de opciones potenciales.

“¿Cómo se puede crear hardware realmente liviano, asequible y enfocado para brindar esa experiencia impulsada por la IA? [We are not chasing] La intensidad gráfica o el gran campo de visión. [but rather] la experiencia singular de IA frente a los ojos”, sugirió el fundador.

“Eso significa que no se necesita un ejército de personas que estén luchando con Qualcomm y todos estos diferentes proveedores y participando en investigación y desarrollo y producción realmente riesgosas y de bajo rendimiento, y aún así vendiendo su dispositivo final con pérdidas. Significa que trabajamos con tecnología de alto rendimiento y socios de fábrica que están ansiosos por trabajar con nosotros y que, en algunos casos, han invertido en nosotros, como nuestro principal fabricante de ópticas y nuestro fabricante contratado”.

Camino a la rentabilidad

Si bien Tavangar se negó a revelar las cifras de ventas de Monocle, dijo que Brilliant Labs gana «bastante dinero por unidad» y «los márgenes son realmente buenos». A la empresa le va «bastante bien» sólo con la venta de hardware sin ningún esfuerzo de marketing, añadió.

“Esto es algo que aprendí nuevamente de Apple. Si puedes conseguir la economía unitaria correcta y si tus rendimientos son del 80, 90% o más a bajo volumen, entonces tienes la disciplina operativa, la buena base y eres capaz de empezar a escalar y ser una empresa rentable”, afirmó. dijo el fundador.

Por ejemplo, la startup está viendo actualmente «casi el triple en términos de lo que podemos vender en comparación con lo que nos cuesta fabricarlo». En comparación, muchas otras empresas de realidad mixta están vendiendo con márgenes cero o negativos, dijo Tavangar.

Además de vender hardware, Brilliant Labs planea incorporar más servicios impulsados ​​por grandes modelos de lenguaje, lo que presenta una oportunidad de cobrar por los servicios. Brilliant Labs se integró primero con GPT porque tiene una «API bien documentada». Pero el modelo de lenguaje grande requiere un uso intensivo de computación y el equipo busca constantemente LLM más comprimidos.

“Creo que con el tiempo veremos cuán comprimidos pueden volverse los modelos incluso a medida que aumenta la eficiencia. Como consecuencia de eso, el hardware que fabricamos será más potente incluso si el hardware se mantiene con un consumo de energía bajo”, dijo el fundador.

La empresa va camino de “superar con creces” su objetivo de ventas este año. Tiene cerca de 2000 desarrolladores en su comunidad Discord hasta la fecha.

Cuando se le preguntó sobre la ventaja competitiva de Brilliant Labs, Tavangar consideró que el ecosistema de software y hardware estrechamente integrado de la startup es difícil de copiar, sobre todo porque tiene una incipiente comunidad de código abierto.

La compañía también disfruta de una ventaja de datos, dijo, ya que la información del usuario recopilada por los sensores continúa informando a los servicios de IA que se ejecutan en la plataforma, lo que a su vez mejora la personalización del usuario. Brilliant Labs no almacena ningún dato de los clientes en sus dispositivos o servidores porque «no está interesado en vender datos a los anunciantes», señaló el fundador.