Amazon Lens Live AI: comprar en tiempo real apuntando la cámara

TL;DR

Lens Live permite comprar apuntando la cámara, escaneando el entorno para mostrar listados de productos coincidentes en tiempo real.
Utiliza un modelo de detección de objetos para identificar artículos y compararlos con miles de millones de listados de Amazon, presentando resultados en un carrusel deslizable.
Las opciones permiten añadir artículos al carrito o a la lista de deseos e integra Rufus para resumir descripciones y responder preguntas.
Lens Live se está implementando en la app Amazon Shopping para iOS y llegará a más usuarios en las próximas semanas; es la respuesta de Amazon a herramientas de escaneo en vivo, con énfasis en la compra.

Contexto e antecedentes

Amazon ya ofrece capacidades de búsqueda visual dentro de la app Shopping, incluido el envío de imágenes, el escaneo de códigos de barras y búsquedas por foto. Lens Live amplía estas funciones al permitir el reconocimiento de objetos en tiempo real en el entorno del usuario al mover la cámara o enfocar un producto específico. The Verge presenta Lens Live como la respuesta de Amazon a experiencias de escaneo en vivo similares a Gemini Live de Google, pero destacando que Lens Live pone un gran botón de compra en todo lo que identifica. El catálogo de Amazon se utiliza para mostrar coincidencias de miles de millones de productos.

Novedades

Lens Live usa un modelo de detección de objetos para identificar productos visibles en la señal de la cámara en tiempo real. Cuando se reconoce un artículo, Lens Live lo compara con el marketplace de Amazon para mostrar artículos similares o coincidentes. El usuario ve un carrusel deslizable con coincidencias, con acciones directas para añadir al carrito o a la lista de deseos. La experiencia puede guiarse por un escaneo de una habitación o por enfocar un producto específico. Además de la información del producto, Lens Live integra Rufus, el asistente IA de Amazon, para resumir descripciones y responder preguntas. Esta funcionalidad se apoya en las capacidades de búsqueda visual existentes de Amazon, que ya permitían buscar por imagen, escanear códigos de barras y tomar fotos dentro de la app. Amazon indica que Lens Live se está implementando para iOS en este momento y que se ampliará a más usuarios en las próximas semanas.

Por qué importa (impacto para desarrolladores/empresas)

Lens Live ilustra un flujo de compra en tiempo real impulsado por IA dentro de una app de consumo. Para desarrolladores, es un ejemplo de cómo la detección de objetos en vivo puede combinarse con un catálogo amplio para ofrecer coincidencias accionables directamente en la interfaz. La integración con Rufus señala posibles caminos para combinar resúmenes de productos y preguntas y respuestas con resultados de búsqueda en vivo, lo que podría acelerar los procesos de decisión y reducir lagunas de información. Desde la perspectiva empresarial, esto destaca el valor creciente de la IA multimodal en el comercio minorista: percepción en tiempo real, comparación con el catálogo y acciones de compra inmediatas dentro de una app, todo con el apoyo de un asistente IA para información rápida.

Detalles técnicos o Implementación

Lens Live se apoya en un modelo de detección de objetos capaz de identificar productos mostrados en la cámara en tiempo real. Cuando se identifica un artículo, el sistema lo compara con miles de millones de listados en el marketplace de Amazon para mostrar coincidencias o artículos similares. Los resultados se presentan en un carrusel deslizable, con acciones directas para añadir al carrito o a la lista de deseos. El lanzamiento está progresando en la app Amazon Shopping para iOS y se espera extenderse a más usuarios en las próximas semanas. Lens Live también integra Rufus, el asistente IA de Amazon, para resumir descripciones y responder preguntas sobre los artículos identificados. Esta integración busca ayudar a los usuarios a comprender rápidamente los detalles sin abandonar el flujo de escaneo. La aproximación se apoya en las capacidades existentes de búsqueda visual de Amazon, que ya permitían búsquedas por imagen, escaneo de códigos y consultas por foto.

Puntos clave

Lens Live permite identificación en tiempo real y compra apuntando la cámara dentro de la app Amazon Shopping (iOS, despliegue progresivo).
Emplea un modelo de detección de objetos y lo compara con miles de millones de listados para mostrar coincidencias.
Un carrusel deslizable muestra artículos coincidentes con opciones para añadir al carrito o a la lista de deseos.
Rufus está integrado para resumir descripciones y responder preguntas sobre los artículos.
El despliegue debe expandirse en las próximas semanas, señalando el compromiso de Amazon con experiencias de compra basadas en IA dentro de aplicaciones.