in

Camine de esta manera: cómo Oko aprovecha la IA para hacer que los cruces de calles sean más accesibles – Descubrir – Desarrollador de Apple

Okó es un testimonio del poder de la simplicidad.

El ganador del Apple Design Award 2024 por Inclusividad y del App Store Award 2024 por Impacto Cultural aprovecha la Inteligencia Artificial para ayudar a las personas ciegas o con baja visión a navegar por las aceras peatonales alertándoles sobre el estado de las señales: «Camina», «No camines». ”y similares, a través de retroalimentación háptica, de audio y visual. La aplicación brinda instantáneamente más confianza a sus usuarios. Su interfaz de usuario básica enmascara una poderosa combinación de herramientas visuales y de inteligencia artificial bajo el capó. Y es un logro especialmente impresionante para un equipo que no tenía experiencia en desarrollo de iOS o Swift antes del lanzamiento.

«La respuesta más importante que recibimos es: ‘Es tan simple que no tiene nada de complejo’, y es genial escuchar eso», dice Vincent Janssen, uno de OkóLos tres fundadores con sede en Bélgica. “Pero lo diseñamos de esa manera porque eso es lo que sabíamos hacer. Simplemente resultó que también era lo correcto”.


HOJA INFORMATIVA DE LA ADA

Los tres cofundadores de Oko, Vincent Janssen, Michiel Janssen y Willem Van de Mierop, se reúnen alrededor de un banco de monitores para revisar su aplicación.

Okó

  • Ganador: Inclusividad
  • Equipo: AYES BV
  • Disponible en: iPhone
  • Tamaño del equipo: 6
  • Reconocimientos anteriores: Ganador del premio App Store 2024 por impacto cultural; Elección de los editores de la App Store

Más información sobre Oko

Descarga Oko desde la App Store

Para Janssen y sus cofundadores, su hermano Michiel y su viejo amigo Willem Van de Mierop, Oko (el nombre se traduce como «ojo») fue un proyecto apasionante que surgió durante la pandemia. Los tres estudiaron informática con especialización en inteligencia artificial y habían pasado años trabajando en su ciudad natal de Amberes. Pero a principios de 2021, el trío se sentía inquieto. «Todos teníamos trabajos de tiempo completo», dice Janssen, «pero los fines de semana eran bastante aburridos». Sin embargo, sabían que su experiencia no podía compararse con la de un viejo amigo con baja visión, quien Janssen notó que se sentía más afectado a medida que avanzaban los meses de otoño e invierno.

«Realmente empezamos a notar que se sentía más aislado que los demás», dice Janssen. “Aquí en Bélgica nos permitían salir a caminar, pero tenías que estar solo o con tu familia. Eso significaba que no podía ir con un voluntario o guía. Como ingenieros de IA, eso nos hizo pensar: ‘Bueno, existen todas estas historias sobre vehículos autónomos. ¿Podríamos idear un sistema similar de imágenes o videos que ayudaría a las personas a orientarse en los espacios públicos?’”

Quizás había abierto Xcode tres veces unos años antes, pero por lo demás ninguno de nosotros tenía experiencia con iOS o Swift.

Vicente Janssen, Okó fundador

El trío comenzó a construir un prototipo que consistía en una microcomputadora, materiales impresos en 3D y un pequeño altavoz portátil prestado del padre de los hermanos Janssen. Hoy, Janssen lo llama “hardware hacky”, algo parecido a una pequeña computadora con una cámara. Pero permitió al equipo y a su amigo (ahora su principal evaluador) analizar la idea y explorar el potencial de la tecnología. ¿Podría la IA reconocer el estado de una señal para peatones? ¿A qué distancia podría detectar una señal de No caminar? ¿Cómo se comportaría bajo la lluvia, el viento o la nieve? Sólo había una forma de saberlo. «Salíamos a dar largos paseos», dice Janssen.

Y aunque la IA y el hardware obtuvieron buenos resultados en sus pruebas prácticas, surgieron problemas relacionados con el tamaño y la usabilidad del hardware, y el equipo comenzó a darse cuenta de que el software ofrecía una mejor solución. El hecho de que ninguno de los tres tuviera la más mínima experiencia en la creación de aplicaciones para iOS fue simplemente un obstáculo que superar. «Quizás había abierto Xcode tres veces unos años antes», dice Janssen, «pero por lo demás, ninguno de nosotros tenía experiencia con iOS o Swift».

Dos capturas de pantalla de la aplicación Oko. La captura de pantalla de la izquierda muestra un camino sugerido para caminar a través de una vista de mapa. La captura de pantalla de la derecha muestra una imagen en vivo de un cruce de calles con las palabras

Entonces, ese verano, el equipo pasó al software, dejó sus trabajos de tiempo completo y se dedicó a aprender Swift a través de tutoriales, videos y búsquedas confiables en la web. La idea central cristalizó rápidamente: crear una aplicación sencilla que se basara en la cámara, el SDK de Maps y un potente algoritmo de inteligencia artificial que pudiera ayudar a las personas a moverse por la ciudad. «Hoy en día, es un poco más complejo, pero al principio la aplicación básicamente abría una cámara y un modelo Core ML para procesar las imágenes», dice Janssen, señalando que el modelo original fue traído de Python. «Afortunadamente, las herramientas hicieron que la conversión fuera realmente sencilla». (OkóLos modelos de IA se ejecutan localmente en el dispositivo).

Una vez que el software tomó forma, se necesitaron más pruebas de campo. El equipo se acercó a organizaciones orientadas a la accesibilidad en toda Bélgica y formó un equipo de aproximadamente 100 evaluadores para “codesarrollar la aplicación”, dice Janssen. Entre los comentarios iniciales: Aunque Okó fue diseñado originalmente para usarse en modo horizontal, casi todos preferían sostener sus teléfonos en modo vertical. «Para ser honesto, tuve la misma experiencia», dijo Janssen, «pero eso significó que necesitábamos rediseñar todo».

Un grupo de hombres se encuentra en una habitación con paredes verdes mirando un monitor grande que contiene notas y bocetos para la aplicación *Oko*.

Otros cambios incluyeron modificar la retroalimentación de audio para imitar más fielmente los sonidos existentes del mundo real y abordar las solicitudes para agregar más retroalimentación visual. La experiencia equivalía a recibir educación sobre accesibilidad en el mundo real sobre la marcha. «Nos encontramos aprendiendo muy rápidamente sobre VoiceOver y la retroalimentación háptica», dice Janssen.

Aún así, el proyecto fue notablemente rápido. Okó se lanzó en la App Store en diciembre de 2021, ni siquiera un año después de que el trío lo concibiera. «Nos llevó un poco de tiempo hacer cosas, como asegurarnos de que la interfaz de usuario no estuviera bloqueada, especialmente porque no entendíamos completamente el código que escribimos en Swift», se ríe Janssen, «pero al final, la aplicación estaba haciendo lo que tenía que hacerlo”.

Nos encontramos aprendiendo sobre VoiceOver y la retroalimentación háptica.

Vicente Janssen, Okó fundador

La comunidad de accesibilidad se dio cuenta. Y en los meses siguientes, el Okó El equipo continuó ampliando su alcance: Michiel Janssen y Van de Mierop viajaron a los EE. UU. para reunirse con organizaciones de accesibilidad y obtener experiencia de primera mano con el tráfico callejero y los patrones de peatones estadounidenses. Pero incluso cuando la aplicación se expandió, el equipo mantuvo su enfoque en la simplicidad. De hecho, dice Janssen, exploraron y finalmente descartaron algunas ideas de expansión, incluida una diseñada para ayudar a las personas a encontrar y abordar el transporte público, que hicieron que la aplicación pareciera demasiado compleja.

Hoy, el Okó El equipo número 6, incluye una flota de desarrolladores que manejan asuntos de Swift más avanzados. «Aproximadamente un año después del lanzamiento, recibimos comentarios sobre funciones adicionales y mejoras de velocidad, y necesitábamos encontrar personas que fueran mejores que nosotros en Swift», se ríe Janssen. Al mismo tiempo, el trío original ahora está aprendiendo sobre negocios, marketing y expansión.

En esencia, Okó sigue siendo un brillante ejemplo de una aplicación sencilla que cumple bien su tarea. «Aún es un trabajo en progreso y aprendemos todos los días», dice Janssen. En otras palabras, todavía quedan muchos caminos por recorrer.

Conozca a los ganadores del Apple Design Award 2024

Behind the Design es una serie que explora las prácticas y filosofías de diseño de los finalistas y ganadores de los Apple Design Awards. En cada historia, vamos detrás de las pantallas con los desarrolladores y diseñadores de estas aplicaciones y juegos galardonados para descubrir cómo dieron vida a sus extraordinarias creaciones.

Fuente

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *

GIPHY App Key not set. Please check settings

Las innovaciones y los dispositivos tecnológicos para el hogar más inteligentes que amamos hasta ahora en CES 2025

Desglose de las mejoras de DLSS 4 para varias generaciones de GPU RTX

DLSS 4 de Nvidia promete grandes mejoras de rendimiento tanto para hardware nuevo como antiguo