medallaUna startup conocida por su producto de narración de videojuegos anunció que ha recaudado 13 millones de dólares con una valoración de 333 millones de dólares de varios inversores, incluidos Horizons Ventures, OMERS Ventures, Peak6 y Arcadia Investment Partners.
La compañía también presentó Highlight, una nueva aplicación de escritorio multiplataforma que actúa como un asistente contextual de IA para los usuarios. La aplicación captura el contenido de su pantalla y le permite hacer preguntas a un modelo de lenguaje grande (LLM) basado en ese contexto.
Henry Gladwin, socio de OMERS Ventures, dijo a TechCrunch por teléfono que la firma de inversión vio una oportunidad de tomar la tecnología central de Medal y aplicarla a los programas LLM.
“Entonces, la tecnología central de Medal se basa en la idea de comprender lo que sucede en el dispositivo de alguien, ya sea video o audio o cosas que suceden a su alrededor. Ahora, la compañía está tomando esa tecnología y aplicándola. a los LLM para la inducción, lo cual es un uso inteligente «, dijo Gladwin.
Gladwin añadió que ve a Medal como un producto que captura las mejores partes de la vida virtual, no sólo como una empresa de juegos. La aplicación Highlight es una extensión natural de este modelo.
¿Cómo funciona Resaltar?
A lo largo de los años, las empresas han intentado crear un asistente útil para los usuarios que utiliza información en pantalla. Google lleva años intentándolo con Google Now, Google Assistant y ahora Gemini. Apple hizo una incursión en este espacio cuando lanzó Apple Intelligence y su capacidad para comprender información contextual en pantalla el mes pasado en la Conferencia Mundial de Desarrolladores (WWDC). Microsoft también está aprovechando la IA generativa con Windows Recall, una función que ayuda a los usuarios a encontrar contenido que han visto en el pasado; después del anuncio inicial, Microsoft decidió Posponer Inicie la recuperación.
Highlight intenta lograr esto para el escritorio. En la versión actual, la aplicación actúa como un botón flotante en el escritorio. Cada vez que pasa el mouse sobre el ícono, captura el contenido en la pantalla y lo pasa como contexto a diferentes formularios. Puede optar por hacer otras preguntas utilizando diferentes herramientas como ChatGPT, Claude de Anthropic, Perplexity y más.
Basada en diferentes plantillas, la aplicación completa previamente algunas preguntas para ayudarlo a comenzar. Se capturan localmente y la aplicación no almacena ningún contenido. La compañía está creando su propio asistente similar a ChatGPT, que puede ser menos capaz que los modelos basados en la nube para algunas tareas, pero ese asistente puede eventualmente ejecutarse localmente en su dispositivo.
Además del contenido en pantalla, también puede pasar un documento y una memoria de audio del sistema como contexto para resaltar. Para aprovechar el caso de uso de audio, la empresa está creando una aplicación nativa de transcripción de reuniones similar a herramientas como Granola, Limitless y Krisp.
Destacar el edificio
Pim de Wit, uno de los cofundadores de Medal, dijo a TechCrunch por teléfono que la compañía comenzó a pensar en cómo aprovechar la tecnología de captura de clips de Medal.tv y combinarla con inteligencia artificial el año pasado.
«Sabemos que las actividades de grabación serán importantes para los sistemas operativos. Hemos visto a algunas importantes empresas de tecnología tomar medidas similares. Queremos proporcionar una plataforma abierta para conectar a los usuarios con asistentes, formularios e interfaces», dijo De Wit.
También mencionó que quiere crear una aplicación de IA que pueda ser utilizada por personas de todas las edades, incluso si no están familiarizadas con la tecnología. Es por eso que la aplicación mostrará sugerencias contextuales basadas en tu captura.
La compañía también está trabajando en la construcción de una plataforma abierta para que los desarrolladores publiquen sus propias aplicaciones en la plataforma Highlight. Esto es más o menos equivalente al lanzador Raycast para Mac, que te permite instalar complementos creados por desarrolladores. Sin embargo, la principal diferencia es que Highlight está disponible tanto para Mac como para Windows.
Gladwin de OMERS Ventures dijo que Highlights tiene una ventaja porque es independiente y no tiene interés en atraerlo a un ecosistema.
El camino a seguir
Medal.tv es un producto exitoso y la empresa quiere seguir dándole soporte y añadiendo nuevas funciones. Sin embargo, la empresa dedicará algunos empleados a trabajar en Highlight.
Highlights es gratuito por ahora, pero De Wit quiere monetizarlo a través del modelo App Store. La startup también está explorando la posibilidad de una suscripción premium para brindar acceso a algunas de sus aplicaciones y funciones, como plantillas nativas.
La compañía también está distribuyendo subvenciones de hasta $30,000 a desarrolladores que también tendrán acceso al equipo Highlight para desarrollar el ecosistema de aplicaciones.