Минулого року Apple розгорнула на своїх пристроях механізм, який ідентифікує пам’ятки на фотографіях і дозволяє після знаходити на мобільних пристроях і комп’ютерах користувачів знімки за назвами цим пам’яток. Виробник увімкнув цю функцію без явної згоди власників пристроїв, і помічати це вони стали лише тепер.
Функція отримала назву «Покращений візуальний пошук», і вперше про неї розповів програміст Джефф Джонсон. За його словами, нова служба почала працювати 28 жовтня 2024 року на iOS 18.1 та macOS 15.1, і Apple не потрудилася чітко пояснити принципи роботи цієї технології.
У датованому 6 листопада 2024 року документі на сайті Apple говориться:
«Покращений візуальний пошук у додатку “Фото” дозволяє шукати фото за визначними пам’ятками та іншими орієнтирами. Ваш пристрій конфіденційно зіставляє місця на фото з каталогом світових локацій, який зберігається на серверах Apple. Ми використовуємо технології гомоморфного шифрування та диференціальної конфіденційності, а також використовуємо вузол протоколу OHTTP, який приховує IP-адресу. Це не дає Apple можливості зібрати будь-яку інформацію про те, що зображено на ваших фото. Функцію “Покращений візуальний пошук” можна вимкнути будь-якої миті. Для цього на пристрої iOS або iPadOS відкрийте “Налаштування” –> “Додатки” –> “Фото”. На Mac відкрийте програму “Фото” та виберіть “Налаштування” –> “Основні”».
Докладне пояснення принципів роботи технології наводиться у статті на сайті Apple від 24 жовтня 2024 року — приблизно в цей і було запущено «Покращений візуальний пошук». У його основі лежить модель машинного навчання, що працює локально на пристроях. Вона аналізує фотографії щодо присутності пам’яток. Якщо штучний інтелект знаходить збіг, система обчислює векторне вкладення – масив чисел, що представляє цей фрагмент зображення. Потім векторне вкладення шифрується з використанням гомоморфного шифрування, що дозволяє проводити обчислення над зашифрованими даними без розшифровки.
Після цього дані відправляються на віддалений сервер, де проводиться пошук за визначними пам’ятками. Результати повертаються на пристрій користувача, який, за твердженням Apple, єдиний здатний розшифрувати цю інформацію. Додатковим рівнем захисту є механізм диференціальної конфіденційності, що виключає ідентифікацію суб’єкта в базі даних, навіть якщо зловмисник отримає доступ до всієї бази.
Проте експерти, опитані британським виданням The Register, висловили сумніви в новій службі Apple. Компанія активувала «Покращений візуальний пошук» за умовчанням для всіх користувачів, включаючи тих, хто відключив вивантаження фотографій в iCloud з міркувань конфіденційності.
Більше трьох років тому Apple планувала перевіряти зображення на пристроях користувачів щодо матеріалів, пов’язаних з жорстоким поводженням з дітьми, але відмовилася від цієї ініціативи через питання до конфіденційності. Нова система, як стверджують критики, примусово обробляє локально збережені фотографії та надсилає дані про всі зображення, а не лише про ті, де знайдено підозрілі хеші.
Крім того, залишається незрозумілим, чому Apple запустила “Покращений візуальний пошук”, не переконавшись, що користувачі її пристроїв були належним чином повідомлені.