La actualización personalizada de Samsung es un gran paso para conseguir una IA útil para su frigorífico

La idea de instalar una actualización de software en tu frigorífico ya me parece extraña y mucho menos mejorar sus capacidades de IA. Pero eso es exactamente lo que está sucediendo esta semana con la línea de refrigeradores Bespoke de Samsung y, para mi sorpresa, este parche está logrando grandes avances en la entrega de aprendizaje automático realmente útil en un cono de helado moderno.

Como resumen rápido, Samsung ya ofrece desde hace un par de años funciones impulsadas por IA, como el reconocimiento automático de alimentos y la planificación de comidas en sus refrigeradores Bespoke. Sin embargo, como supe después de una revisión de sus modelos emblemáticos a fines del año pasado, las capacidades de inteligencia artificial de la compañía aún son un trabajo en progreso. Antes de eso, puede reconocer 60 alimentos frescos (como frutas y verduras) en el frigorífico y otros 50 productos envasados ​​como yogur o palomitas de maíz. Pensé que era un comienzo decente, pero considerando la gran cantidad de artículos que puedes encontrar en una tienda de comestibles típica, estaba lejos de terminar. A menudo también era necesario ingresar datos adicionales, como la cantidad de artículos o cuándo se agregó algo por primera vez, lo que hacía que la idea del seguimiento de alimentos asistido por IA fuera más tediosa de lo deseado. No sé ustedes, pero generalmente no quiero tener que escribir en mi refrigerador y estoy seguro de que los ingenieros de Samsung están de acuerdo, lo que probablemente fue lo que llevó a esta importante actualización de software para su refrigerador Bespoke.

El gran cambio es que Samsung está agregando soporte para Google Gemini, lo que tiene varias implicaciones importantes. Al combinar el reconocimiento de objetos existente en el dispositivo de Samsung con los modelos basados ​​en la nube de Google, el número total de alimentos identificables está aumentando de más de 100 artículos a más de 2.000. Eso significa que necesitarás conectar el refrigerador a Wi-Fi, pero considerando que admite otras funciones inteligentes como la integración del calendario y la reproducción de video, no es una gran tarea.

Otra actualización es que Samsung está usando Gemini para expandir los controles de voz, pidiendo a los usuarios que cambien cosas como la configuración de los electrodomésticos del refrigerador, verificando detalles sobre cuándo se cambió el filtro de agua por última vez o incluso ayudando con la resolución de problemas. Y dependiendo de la situación, el frigorífico puede reproducir un tutorial para solucionar el problema.

Alternativamente, para resolver problemas más complicados o difíciles, Samsung está introduciendo lo que llama Reliability AI, que está diseñado para monitorear los componentes del refrigerador o ayudar a identificar fallas antes de que se vuelvan demasiado graves. O, en los casos en los que es necesario reparar el dispositivo, la IA puede proporcionar a los agentes información más detallada y permitirles arreglar las cosas de forma remota.

Por ejemplo, un representante de Samsung me dijo que si un cliente llama y dice que los cubos de la máquina de hielo salen en lotes y están pegados, la confiabilidad de la IA puede permitir a los agentes reducir la cantidad de agua agregada a la bandeja de hielo, todo sin tener que ir físicamente a su casa. En serio, Samsung dice que si bien el refrigerador monitoreará y rastreará las métricas de salud del dispositivo, los propietarios deberán otorgar un permiso específico para que los trabajadores de reparación accedan a esos datos. Mientras tanto, si un problema requiere servicio en persona, Samsung dice que al compartir estos datos con los técnicos de reparación, permite a las personas identificar y solucionar problemas más rápido en lugar de llegar sin contexto y diagnosticar problemas desde cero.

Mi unidad de prueba no ha tenido ningún problema mecánico en los ocho meses que la he estado usando, por lo que no pude evaluar la IA de reparabilidad de Samsung. Dicho esto, después de consultar con Samsung HQ, pude usar una versión inicial del nuevo software de la línea Bespoke durante las últimas dos semanas, incluido el soporte mejorado de reconocimiento de objetos basado en la nube, y es una mejora profunda. Incluso después de usarlo por un tiempo, todavía me sorprende la cantidad de alimentos diferentes que reconoce. En la parte trasera de mi refrigerador, tengo una lata de salsa de chalota Bull Head, un ingrediente taiwanés de nicho que se usa casi exclusivamente en platos asiáticos. Sin embargo, la IA no tuvo problemas para reconocerlo, incluso etiquetarlo automáticamente y agregarlo al AI Food Manager del refrigerador por primera vez.

Además, el sistema ahora es mucho mejor para reconocer marcas y contar la cantidad de ingredientes específicos para crear listas más precisas. Podía notar la diferencia entre una Coca-Cola Light y una Coca-Cola Zero, y también notó con precisión que había múltiplos de cada artículo. Y dado que el refrigerador a menudo tiene que hacer ping a un servidor basado en la nube en algún lugar para ayudarlo a reconocer varios elementos, los resultados han aparecido con bastante rapidez, a menudo en cuestión de segundos. Y para ciertos alimentos como los aguacates, me alegró que registre cuánto tiempo han estado en el refrigerador y mostrará una notificación emergente que podría estar a punto de caducar. Por supuesto, no siempre es correcto, pero en realidad todo lo que necesito es un recordatorio para verificar las cosas y así es.

Sam Rutherford para Engadget

También he notado que el refrigerador recuerda con frecuencia cuándo sacas un determinado alimento y luego te pregunta si deseas agregar ese artículo a tu lista de compras. Es un buen recordatorio para renovar las grapas que usas regularmente y viene en un formato de baja fricción para que no sea molesto. Desde allí, puedes revisar tu teléfono cuando estés en la tienda en lugar de preparar manualmente una lista cada semana. Además, debido a que el refrigerador reconoce y rastrea mucho mejor lo que hay dentro, puede brindar mejores sugerencias de recetas que puede preparar con ingredientes que ya tiene.

Dicho esto, como muchos modelos actuales, la IA no siempre detecta todos los detalles. Por ejemplo, inicialmente me sorprendió cuando etiquetó automáticamente el contenedor de queso crema falso como «Philadelphia Plant-Based», hasta que me di cuenta de que la etiqueta estaba incompleta y que la IA estaba leyendo lo que estaba escrito en la tapa y no tenía la inteligencia para completar la descripción con precisión. No me malinterpretes, cuando miro el Administrador de alimentos me da suficiente información para ayudarme a descubrir qué hay en el refrigerador. No está del todo bien.

El único problema con esta actualización es que, como muchos servicios de inteligencia artificial actuales, el nuevo software de Samsung puede generar demasiada confianza o ser propenso a alucinar. Una vez, cuando mi esposa estaba guardando algo en el refrigerador, el algoritmo tomó una fotografía de una venda de colores brillantes en su dedo y la etiquetó como verdura, lo cual no es mucho. Otras veces, aparentemente, es sólo una suposición. Pero yo diría que pasar de unos 100 elementos identificables a más de 2000 es una medida muy bienvenida, incluso si existen limitaciones.

La otra cosa extraña es que, si bien Samsung utiliza los modelos de inteligencia artificial de Google para muchas de las nuevas funciones del refrigerador, no verá nada llamativo como Gemini dentro del dispositivo. Es lamentable porque Bixby sigue siendo el único asistente digital que puedes usar y con el que puedes hablar directamente.

He dicho antes que el reconocimiento de alimentos mediante IA de Samsung es un trabajo en progreso y creo que es cierto. Con esta última actualización, la compañía se ha acercado mucho más a cumplir su promesa de un refrigerador con una funcionalidad de IA verdaderamente útil. Lo que alguna vez pareció una demostración tecnológica prometedora se ha convertido en una herramienta útil para rastrear sus compras, aunque con algunos contratiempos aquí y allá.