Microsoft і Liebherr разом працюють над розумними холодильниками наступного покоління

Минулої ночі ми повідомляє про холодильник LG Smart Instaview Signature з повною ОС Windows 10. Сьогодні Microsoft оголошує про співпрацю з підрозділом побутової техніки Liebherr у розробці нового покоління SmartDeviceBox від Liebherr.

Завдяки функції SmartDevice майбутні холодильники Liebherr дозволять вам контролювати збережені продукти за допомогою внутрішніх камер і технології розпізнавання об’єктів. Він не лише знімає зображення для перегляду, але й розпізнає окремі продукти всередині холодильника. Зібрана інформація автоматично додається до списку запасів, що дозволяє клієнтам швидко й чітко бачити, що є в холодильнику з будь-якого місця. Додаткові продукти можна додати до списку покупок, до якого клієнти зможуть отримати доступ у дорозі за допомогою програми для пристроїв iOS, Android або Windows за допомогою голосового модуля SmartDeviceBox.

Microsoft допомагає їм із можливостями комп’ютерного зору для розробки вищеописаної технології. Microsoft Cognitive Services Computer Vision API може коментувати нові зображення за допомогою різноманітних загальних міток категорій і тегів об’єктів. Liebherr використовуватиме їх для розробки свого рішення.

Використовуючи алгоритми глибокого навчання, які містяться в CNTK, дослідники даних Microsoft працювали з Liebherr над створенням нової системи обробки зображень для виявлення конкретних харчових продуктів, присутніх у холодильнику Liebherr. Починаючи з моделі комп’ютерного зору загального призначення, отриманої з мільйонів загальних зображень, система Microsoft може навчитися розпізнавати нові типи об’єктів – коробки з молоком, пляшки з кетчупом, банки з солоними огірками та багато іншого – на прикладах зображень. Коли нове зображення зсередини холодильника надається новій вивченій моделі, вона може виявити наявність об’єктів, які бачила раніше під час навчання.

Незважаючи на те, що поточна система, яку вони мають, є лише прототипом, Microsoft і Liebherr активно працюють разом, щоб перенести такий досвід у розумні пристрої нового покоління.