Lo que comenzó como un proyecto de hackathon de 36 horas el fin de semana pasado podría empoderar a la comunidad de código abierto para revolucionar la industria de las gafas inteligentes. Cinco miembros del equipo construyó un par de gafas inteligentes de 20 $, llamadas Open Glass, que conecta lo que ve y oye a un chatbot de IA , como como La Llama 3 de Meta.
Scott Fitsimones se dirigió al centro de San Francisco el sábado por la mañana para encontrarse con Nik Shevchenko, sin saber que estaba a punto de pasar los siguientes 36 años. horas en un hackathon de IA construyendo un nuevo dispositivo con él. En ese momento, Fitsimones pensó que estaba recogiendo un colgante de IA hecho por Shevchenko, a quien describe como un cabecilla del creciente movimiento de dispositivos portátiles con IA de San Francisco. Al final del fin de semana, su equipo ganó el hackathon y obtuvo aproximadamente 1.500 personas en lista de espera para preordenar sus gafas inteligentes de código abierto.
“No tenía idea acerca de este hackathon, y fue simplemente muy fortuito”, dijo Fitsimones. “Y luego, ya sabes, creo Empezamos simplemente a improvisar y construir sobre el prototipo inicial”.
Por su parte, Shevchenko participó en el hackathon sabiendo que quería construir el elemento de hardware para una especie de gafas inteligentes, según sus compañeros de equipo (Shevchenko no respondió a la solicitud de entrevista de Gizmodo). A él se unió Stepnan Korshakov, quien resolvió el software más difícil. desafíos del proyecto. Estos dos eligieron a Fitsimones, Shreeganesh Ramanan y Jatin Gupta para formar un equipo ganador.
En una habitación grande y aireada con vista a las aguas azules y las montañas verdes del Área de la Bahía, los ingenieros de software codificaron en sofás mullidos con pilas de La Croix a un lado. Cerebral Valley organiza hackatones como este a menudo, reuniendo la próspera escena de inicios de IA de San Francisco. Shevchenko era uno de los pocos usó un bolígrafo de soldadura en lugar de una computadora portátil, mientras que el resto del equipo seguía trabajando con el software. En un momento de la tarde del sábado, Shevchenko abandonó el evento para imprimir en 3D la carcasa de la computadora Open Glass.
Después de aproximadamente 36 horas de piratería, Shevchenko y el equipo presentaron con orgullo un par de gafas de sol baratas con una caja negra que sobresalía del lado derecho. lado. Las gafas incluían una cámara que tomaba una foto cada cinco segundos y un micrófono que transcribía audio constantemente. Esto recopila un base de datos de fotos y texto para reflejar lo que captan tus ojos y oídos. Presiona un botón en el costado de las gafas y puedes pedirle al chatbot Llama 3 de Meta que responda preguntas sobre tu propia vida.
“¿Cómo se llama esa persona?”, “¿Dónde dejé mis llaves?” y “¿Cuántas calorías tienen estas frutas?” algunas preguntas que la IA respondió durante la demostración. La tecnología tiene aplicaciones útiles para muchas personas, pero podría sobresalir en ayudar a alguien con mala visión o mala audición.
El equipo de Shevchenko ganó el primer premio en el hackathon, a pesar de un error en la capacidad de conversión de voz a texto de las gafas durante la demostración. de los ejecutivos de Meta y Groq, así como del CEO de Hugging Face, Clem Delangue, quien juzgó los proyectos finales. En pocas horas, la mente emprendedora de Shevchenko se puso en marcha y creó una lista de espera para reservar una versión del prototipo.
“Woah, woah, woah, woah, son 1.300”, dijo Korshakov por teléfono conmigo el lunes cuando descubrió cuántos pedidos anticipados habían recibido. La gente alrededor del mundo quiere construir cosas con esto. Ahora tienen alguna manera de poseer y contribuir al éxito de este proyecto. ellos mismos”.
Si bien actualmente hay otras gafas inteligentes en el mercado, como las Meta Ray-Ban, no son de código abierto ni tan baratas. Glass ofrece un kit relativamente económico que permite a los desarrolladores elegir qué LLM quieren usar y decidir qué quieren Por ejemplo, no todos los Open Glass tienen que tomar fotografías o grabar audio constantemente. Esto ofrece una opción asequible. , una opción pirateable para gafas inteligentes, un factor de forma que anteriormente era tremendamente costoso y limitante en lo que se podía hacer.
“Puedes conectarlo a OpenAI, puedes conectarlo a Gemini”, dijo Ramanan en una entrevista telefónica. tener la capacidad de mezclar y combinar las mejores opciones y luego crear sus propias aplicaciones y marcos interesantes”.
Las gafas inteligentes no se han popularizado como lo han hecho otros wearables. Sin embargo, el avance de los modelos de IA multimodal hace que este sea un momento emocionante para gafas inteligentes. Es fácil imaginar cómo se podría utilizar el nuevo GPT-4 Omni de OpenAI, que puede procesar vídeo, audio y texto simultáneamente en gafas como esta. Google incluso mostró un prototipo de nuevas Google Glasses en una demo de su última IA el martes. Abrir Glass espera que darle acceso a esta tecnología a la comunidad de código abierto permita una mayor innovación en el espacio.
Una cosa que está plagada de gafas inteligentes es la preocupación por la privacidad. Las Ray-Ban de Meta no graban audio y vídeo constantemente para usar tu vida como un base de datos, y eso probablemente sea algo bueno. Pero hay una creciente comunidad de fanáticos de los dispositivos de IA en Silicon Valley que están interesados en La idea de registrar constantemente su vida para crear el asistente personal definitivo. Anillos, colgantes y ahora gafas están surgiendo de nuevas empresas en San Francisco, todos fascinados por este potencial.
Si bien la tecnología de código abierto permitirá a los desarrolladores innovar en estas ideas de una manera más propia, aún quedan importantes preocupaciones por resolver. abordado con privacidad y costos. Estas preguntas son importantes, pero no son exactamente el enfoque para los desarrolladores en las primeras etapas de esta tecnología. Lo más importante para ellos,es hacerlo útil.
Algunas personas sin conocimientos técnicos pueden comprar Open Glass para simplemente usar un par de gafas inteligentes baratas. El equipo todavía está analizando el producto , pero parece que vendrá prefabricado con modelos en idiomas grandes integrados y una aplicación móvil que lo acompaña. El precio real del dispositivo también está sujeto a cambios, aunque todo el código fuente está disponible. gratis en GitHub.
La historia de Open Glass es un testimonio de la próspera cultura de las startups de IA en San Francisco. La comunidad de código abierto podría desbloquear avances clave en tecnología estancada, como las gafas inteligentes. Más prácticamente, también podría ofrecer a personas sin conocimientos técnicos un par de gafas inteligentes por el precio de unas entrada de cine.
Una versión de este artículo apareció originalmente en Gizmodo.
Este contenido ha sido traducido automáticamente del material original. Debido a los matices de la traducción automática, pueden existir ligeras diferencias. Para la versión original, haga clic aquí.