삼성의 맞춤형 업데이트는 냉장고에 유용한 AI를 향한 큰 진전입니다

냉장고에 소프트웨어 업데이트를 설치한다는 아이디어는 AI 기능 향상에 중점을 둔 것은 말할 것도 없고 이미 이상하게 느껴집니다. 하지만 이것이 바로 이번 주 삼성의 Bespoke 냉장고 라인에서 일어나고 있는 일이며, 놀랍게도 이번 패치는 현대의 아이스박스에서 진정으로 유용한 기계 학습을 제공하는 데 큰 진전을 보이고 있습니다.

간단히 요약하면, 삼성은 이미 몇 년 동안 Bespoke 냉장고에 자동 음식 인식 및 식사 계획과 같은 AI 기반 기능을 제공했습니다. 하지만 작년 말 주력 모델을 검토한 후 알게 된 것처럼, 회사의 AI 역량은 여전히 ​​진행 중인 작업입니다. 이전에는 냉장고가 요구르트나 팝콘과 같은 50여 가지 포장 제품과 함께 약 60가지 종류의 신선한 식품(과일, 채소 등)을 인식할 수 있었습니다. 괜찮은 시작처럼 느껴졌지만 일반적인 식료품점에서 찾을 수 있는 다양한 품목의 수를 고려하면 완전함과는 거리가 멀었습니다. 게다가 품목 수나 품목이 처음 추가된 시기와 같은 추가 데이터를 입력해야 하는 경우가 많았기 때문에 AI 지원 식료품 추적 아이디어가 원하는 것보다 더 지루했습니다. 나는 당신에 대해 모르지만 일반적으로 냉장고에 타이핑을 하고 싶지 않으며 삼성의 엔지니어들이 동의할 것이라고 확신합니다. 아마도 이것이 Bespoke 냉장고 소프트웨어에 대한 주요 업데이트를 가져온 것일 것입니다.

가장 큰 변화는 삼성이 Google Gemini에 대한 지원을 추가한다는 것인데, 이는 몇 가지 중요한 의미를 갖습니다. 삼성의 기존 온디바이스 객체 인식 기능과 Google의 클라우드 기반 모델을 결합하면 식별 가능한 총 식품 수가 100개 남짓에서 2,000개 이상으로 늘어납니다. 이제 이는 냉장고를 Wi-Fi에 연결해야 함을 의미하지만 캘린더 통합 및 비디오 재생과 같이 지원하는 다른 스마트 기능의 수를 고려하면 큰 문제는 아닙니다.

또 다른 업데이트는 삼성이 Gemini를 사용하여 음성 제어를 확장하여 사용자가 냉장고에 장치 설정 등을 변경하도록 요청하고 정수 필터를 마지막으로 교체한 시기와 같은 세부 정보를 확인하거나 문제 해결에 도움을 줄 수 있다는 것입니다. 그리고 상황에 따라 냉장고는 문제 해결 방법에 대한 튜토리얼을 재생할 수도 있습니다.

또는 더 복잡하거나 해결하기 어려운 문제를 위해 삼성은 냉장고의 구성 요소를 모니터링하거나 결함이 너무 심각해지기 전에 이를 식별하도록 설계된 신뢰성 AI(Reliability AI)를 도입했습니다. 또는 장치에 대한 서비스가 필요한 경우 AI는 상담원에게 더 자세한 정보를 제공하는 동시에 원격으로 특정 문제를 해결할 수 있도록 허용할 수 있습니다.

예를 들어, 삼성 담당자는 고객이 제빙기에서 큐브가 뭉쳐 나와 서로 붙어 있다고 전화하면 에이전트가 실제로 집에 올 필요 없이 얼음 트레이에 추가되는 물의 양을 줄일 수 있도록 Reliability AI를 사용할 수 있다고 말했습니다. 비판적으로 삼성은 냉장고가 장치 상태 지표를 모니터링하고 추적하지만 수리 담당자가 해당 데이터에 액세스하려면 소유자가 명시적인 동의를 제공해야 한다고 말합니다. 한편, 문제에 직접 서비스가 필요한 경우 삼성은 이 데이터를 수리 기술자와 공유함으로써 사람들이 아무런 맥락도 없이 도착하여 처음부터 문제를 진단하는 대신 문제를 더 빠르게 식별하고 해결할 수 있다고 말합니다.

내 테스트 장치는 내가 사용한 8개월 동안 기계적인 문제가 발생하지 않았기 때문에 삼성의 수리 가능성 AI를 평가할 수 없었습니다. 즉, 삼성 본사에서 먼저 확인한 후 지난 2주 동안 클라우드 기반 객체 인식에 대한 업그레이드된 지원을 포함하여 Bespoke 라인의 새로운 소프트웨어의 초기 버전을 사용할 기회가 있었고 그 개선은 심오했습니다. 한동안 사용해 보았음에도 불구하고, 얼마나 다양한 음식을 인식하는지에 여전히 놀랐습니다. 내 냉장고 뒤편 깊숙한 곳에 황소 머리 샬롯 소스 캔이 있는데, 이는 아시아 요리에 거의 독점적으로 사용되는 대만산 다소 틈새 재료입니다. 그러나 AI는 이를 인식하는 데 아무런 문제가 없었으며 자동으로 태그를 지정하고 냉장고의 AI Food Manager에 처음 추가된 시기를 포함했습니다.

게다가 시스템은 이제 더 자세한 목록을 작성하기 위해 브랜드를 인식하고 특정 성분의 수를 계산하는 데 훨씬 더 좋습니다. 다이어트 콜라와 제로 콜라를 구별하는 동시에 각 항목의 배수가 있음을 정확하게 확인할 수 있습니다. 그리고 냉장고가 다양한 품목을 인식하는 데 도움이 되도록 클라우드 기반 서버를 어딘가에 핑해야 하는 경우가 종종 있지만 결과는 종종 몇 초 이내에 나타나는 경우가 많습니다. 그리고 아보카도와 같은 특정 음식의 경우 냉장고가 해당 음식의 보관 기간을 추적하고 유통기한이 가까워질 수 있다는 알림을 표시한다는 점이 기뻤습니다. 물론, 그것이 항상 옳은 것은 아니지만, 나에게 정말로 필요한 것은 상황을 확인하라는 알림뿐이고 그것은 바로 그렇게 합니다.

Engadget의 샘 러더포드

또한 이제 냉장고는 사용자가 특정 음식을 자주 꺼낼 때를 기억하고 해당 항목을 쇼핑 목록에 추가할지 묻는다는 사실도 알아냈습니다. 정기적으로 사용하는 스테이플을 보충하고 마찰이 적은 방식으로 발생하므로 짜증이 나지 않도록 상기시켜주는 좋은 방법입니다. 그러면 매주 수동으로 목록을 선별할 필요 없이 매장에 있을 때 간단히 휴대폰을 확인할 수 있습니다. 또한 냉장고는 내부 내용물을 훨씬 더 잘 인식하고 추적하기 때문에 이미 가지고 있는 재료를 사용하여 요리할 수 있는 레시피에 대해 더 나은 제안을 제공할 수 있습니다.

즉, 현재의 많은 모델과 마찬가지로 AI가 항상 모든 세부 사항을 파악하지는 않습니다. 예를 들어, 처음에는 가짜 크림 치즈 통에 “필라델피아 식물 기반”이라는 라벨이 자동으로 표시되었을 때 깊은 인상을 받았지만, 라벨이 불완전하고 AI가 단지 뚜껑에 적힌 내용을 읽고 있을 뿐이며 설명을 정확하게 마무리할 수 있는 능력이 없다는 것을 깨달았습니다. 오해하지 마십시오. 식품 관리자를 볼 때 냉장고에 무엇이 들어 있는지 파악하는 데 도움이 되는 충분한 정보를 제공합니다. 그것은 아주 정확하지 않습니다.

이번 업데이트의 한 가지 문제는 오늘날의 많은 AI 서비스와 마찬가지로 삼성의 새로운 소프트웨어도 약간 과신하거나 환각에 빠지기 쉽다는 것입니다. 한번은 아내가 냉장고에 뭔가를 다시 넣고 있을 때 알고리즘이 아내의 손가락에 감긴 밝은 색의 붕대 사진을 찍어 야채라고 표시했는데 전혀 그렇지 않았습니다. 다른 경우에는 단지 추측하는 것처럼 보입니다. 그러나 식별 가능한 항목이 약 100개에서 2,000개 이상으로 증가하는 것은 제한 사항에도 불구하고 매우 환영할 만한 개선이라고 생각합니다.

또 다른 이상한 점은 삼성이 냉장고의 많은 새로운 기능에 Google의 AI 모델을 활용하고 있음에도 불구하고 장치 내부에 Gemini에 대한 명확한 설명이 표시되지 않는다는 것입니다. Bixby는 여전히 사용자가 직접 사용하고 대화할 수 있는 유일한 디지털 비서이기 때문에 다소 당황스러운 일입니다.

이전에 삼성의 AI 식품 인식이 진행 중인 작업이라고 말씀드렸는데, 저는 그 말이 여전히 유효하다고 생각합니다. 이번 최신 업데이트를 통해 회사는 정말로 유용한 AI 기반 기능을 갖춘 냉장고의 약속을 이행하는 데 훨씬 더 가까워졌습니다. 한때 유망한 기술 데모처럼 느껴졌던 것이 여기저기서 약간의 문제가 발생하더라도 식료품을 추적할 수 있는 편리한 도구가 되었습니다.