Прості методи розпізнавання облич

Примітка автора. Я додав знімки екрану, щоб показати, як виглядали ці приклади пошуку під час підготовки матеріалу. Однак врахуйте, що результати можуть змінюватися з часом.

Коли трапляються стихійні лиха, корупція або соціальна несправедливість, технологія розпізнавання облич може розкрити приховану правду. Однак ця технологія також може надавати хибну інформацію. Тому ретельна перевірка, верифікація та перехресне зіставлення даних украй необхідні для забезпечення точності та об’єктивності представленої інформації. Крім того, застосування цих інструментів може спричинити етичні та правові наслідки.

Технологія розпізнавання облич допомогла встановити, що цей воєнний відеоролик був російською пропагандою, а також ідентифікувати осіб, причетних до відомого венесуельського сайту, який розповсюджував фейки. Завдяки цій технології команда Bellingcat ідентифікувала сепаратистів, причетних до збиття авіалайнера рейсу MH17, та показала, як її можна застосувати для визначення геолокації на старих фотографіях.

Традиційні пошукові системи не достатньо оснащені для розпізнавання облич, адже вони повинні знайти делікатний баланс між результативністю пошуку зображень та міркуваннями конфіденційності. Для ефективного розпізнавання облич необхідні спеціальні інструменти.

Які варіанти доступні, та як вони різняться за функціоналом? Які етичні наслідки пов’язані з цією технологією? Давайте розглянемо відстеження людей у натовпі, пошук схожих фотографій людини та порівняння старіших фотографій з новішими. Для кожного випадку я наведу приклад та посилання на інструменти. А також обговоримо правові наслідки та найвдаліші приклади використання технології розпізнавання облич.

Відстеження людей у натовпі

Цей вид технології розпізнавання облич використовують для спостереження за окремими особами серед великої групи людей. Навіть не знаючи імені людини, можна її ідентифікувати, та відстежувати переміщення та дії в режимі реального часу. Це особливо корисно під час протестів чи масових публічних зібрань, де журналісту-розслідувачу важливо стежити за діяльністю певних осіб.

У контексті журналістських розслідувань ця форма відстеження людей надає цінну інформацію про динаміку подій та вплив кожного з учасників під час важливих зустрічей, конференцій або публічних форумів, протестів чи демонстрацій. Розуміння частоти появи на заходах і внеску окремої особи може пролити світло на рівень її залученості, її роль у групі та її потенційний вплив на процеси ухвалення рішень.

Приклад

Відстеження переміщень осіб, які брали участь у штурмі Капітолія в США 6 січня 2021 року, дозволило зрозуміти послідовність подій, виявити зв’язки та зібрати всі фрагменти пазлу докупи. Хоча цей метод не дозволяє безпосередньо ідентифікувати особу, він допомагає відстежувати переміщення та дії конкретних людей, висвітлюючи їхню роль у подіях.

Газета Washington Post створила відеохронологію заворушень у Капітолії, використавши кілька годин відео (частину з них редакція отримала ексклюзивно). У відео журналісти показали, як учасники заворушень увірвалися до будівлі Капітолія, змусивши законодавців евакуюватися. Для ідентифікації деяких учасників та оцінки того, наскільки близько вони підійшли до законодавців, WP використовувала систему розпізнавання облич. На графіках зображені хаос і насильство того дня. Аналіз інформації з відкритих джерел був найціннішим методом розслідування подій у Капітолії, й прислужився для виявлення та правового переслідування учасників заворушень.

Використання videoindexer.ai для відстеження людей, причетних до заворушень на Капітолії у США 6 січня. Зображення: знімок екрану.

Інструменти

Azure AI Video Indexer від Microsoft (безкоштовно до 40 годин) та інші професійні програми.

Принцип роботи

Щоб почати працювати з Video Indexer, завантажте відео на сайт. Обробка кожної хвилини відео триватиме приблизно дві хвилини. Після завершення ви зможете витягти чимало цікавої інформації. Наприклад, інструмент перевіряє місця, згадані у відео, і транскрибує текст.

Якщо натиснути кнопку «Відтворити далі» (Play next), ви побачите кожен епізод, де говорить та чи інша особа:

Зображення: скриншот, Azure AI Video Indexer

Також ви отримаєте повну розшифровку відеозапису.

Зображення: знімок екрану, Azure AI Video Indexer.

Ви можете завантажити цю стенограму, а потім скористатися спеціалізованими інструментами, такими як Wordtune або ChatGPT, щоб отримати коротке резюме розмови.

Зображення: скриншот WordTune

Пошук схожих фотографій однієї й тієї ж особи

Пошук фотографій певної особи у величезних базах даних допомагає ідентифікувати невідомих осіб. Знайшовши декілька зображень людини, можна зібрати більше деталей про її особу, дії та зв’язки. Аналіз фотографій і відео дозволяє побудувати хронологію, реконструювати події та повніше зрозуміти контекст історії.

Приклад

Зображення: Ekanskie Vestia, Knack

Бельгійські фактчекери з Knack використали інструмент розпізнавання облич PimEyes, щоб знайти чоловіка у військовій формі (у жовтій рамці), якого різні американські та британські ЗМІ помилково ідентифікували як російського генерал-майора у відставці, призваного на службу для участі у війні проти України. Інструмент не знайшов жодних результатів для обличчя цього чоловіка, але ідентифікував двох інших осіб на світлині. Подальше розслідування показало, що насправді цей чоловік — колишній російський прикордонник.

Інструменти

PimEyes (платний), FaceCheck (повільний), пошук осіб у VK або TikTok (нашпиговані рекламою).

Усім згаданим сервісам бракує прозорості щодо їхніх методів та місцезнаходження. Ця відсутність відкритості викликає занепокоєння щодо конфіденційності та безпеки даних. Користувачі не знають, як обробляються, зберігаються або поширюються їхні завантажені фотографії чи особиста інформація. Тому варто бути обережними під час використання таких сервісів, особливо під час роботи з конфіденційними даними чи особистою інформацією.

Як це працює

Усі чотири сервіси пропонують завантажити фотографію. Тут я вибрав фото очільника Чеченської Республіки Рамзана Кадирова.

Зображення: знімок екрану, FaceCheck

Зображення: знімок екрану, FaceCheck

PimEyes вимагає активувати підписку та стягує плату за доступ до вихідних фотографій після трьох безкоштовних спроб. Варіанти оплати включають місячну та річну підписки або одноразові платежі.

Порівняння старих фотографій із новими

Технологію розпізнавання облич також можна використовувати для порівняння старих фотографій із новими, щоб визначити, чи зображена на них одна й та сама особа. Такий метод особливо корисний під час розслідування справ, пов’язаних зі зниклими безвісти або особами, що переховуються від правосуддя, адже їхня зовнішність могла змінитися з часом. Порівнявши нові фотографії зі знімками минулих років, журналісти можуть підтвердити, чи дійсно це та сама особа, яка була зображена на більш ранньому знімку.

Зображення: скриншот, PimEyes

Приклад

Міліца Войнович (KRIK) та Стеван Дойчинович (OCCRP та KRIK) за допомогою технології розпізнавання облич з’ясували, що чоловік, знайдений мертвим у Парагваї, міг бути контрабандистом із Сербії.

Інструменти

Betaface (безкоштовно), Kairos (платно).

Як це працює

Зображення: скриншот, OCCRP

У програму Betaface завантажте дві фотографії, де, на вашу думку, зображена одна й та сама особа. Після цього натисніть на другу світлину та виберіть опцію «Порівняти обличчя» (Compare Faces). Збіг фотографій оцінюють за шкалою від 0% до 100%. Перевіряти далі варто ті світлини, що мають схожість понад 80%.

Професійні рішення для візуального розпізнавання

Face API від Azure, Rekognition від Amazon, Vision AI від Google Cloud (США), Face++ та Tencent Cloud (Китай) пропонують розширені можливості для розпізнавання зображень та облич. Вони дозволяють розробникам інтегрувати потужні функції візуального розпізнавання у свої додатки.

Наслідки

Технологія розпізнавання облич пов’язана з низкою проблем, зокрема питаннями конфіденційності, точності та потенційного зловживання. Такі інструменти можуть збирати персональні дані без згоди користувача, що призводить до проблем із конфіденційністю та захистом даних. Згідно з висновками юридичної консультації в галузі IT, у Європейському Союзі більшість згаданих інструментів суперечать Загальному регламенту з захисту даних (GDPR).

Етичні та правові проблеми:

• Проблеми конфіденційності: інструменти розпізнавання облич часто збирають і аналізують персональні дані без згоди користувача.
• Достовірність і надійність: технології розпізнавання облич не завжди є точними, надто коли йдеться про жінок та кольорових людей. Хибна ідентифікація може мати серйозні наслідки. Важливо розуміти обмеження технології та не покладатися виключно на інструменти для розпізнавання облич під час розслідування.
• Потенційне зловживання: журналісти повинні бути обізнаними про можливі зловживання цією технологією та забезпечити її етичне та відповідальне використання.

Коли використовувати ці інструменти?

Ось чотири сценарії застосування.

• Розкриття прихованої правди: відповідально, у межах правових та етичних норм, коли використання цих інструментів допомагає журналістам викривати приховані порушення або проливати світло на важливі суспільні проблеми. Приклад: викриття воєнної пропаганди.
• Розкриття схем і зв’язків: журналісти можуть виявляти потенційно незаконні моделі поведінки, зв’язки та мережі. Це може допомогти з інформуванням громадськості про глибинну динаміку подій, розкрити приховані цілі або виявити системні проблеми, що потребують уваги суспільства та детального вивчення. Приклад: штурм Капітолія у США.
• Підзвітність і притягнення до відповідальності: інструменти розпізнавання облич можна використовувати для притягнення до відповідальності, надаючи докази причетності конкретних осіб до злочинної діяльності або інших правопорушень. Приклад: документування зв’язків між політиками та злочинцями, зображеними на одній фотографії. 
• Суспільні інтереси та прозорість: За умови відповідального підходу та дотримання правових та етичних норм, журналісти можуть використовувати ці інструменти для розкриття важливої інформації, що сприяє громадському обговоренню, взаєморозумінню та прозорості дій привладних осіб. Приклад: перевірка фактів щодо містифікацій у соцмережах.

Як завжди, проконсультуйтеся зі своїм редактором або роботодавцем щодо того, як ви плануєте використовувати систему розпізнавання облич у вашому проєкті, і обговоріть, що підходить для вашої конкретної ситуації та регіону.

GIJN вітає передрук цієї статті для некомерційного використання, але просить вас дотримуватися наших правил.

Нідерландець Хенк ван Есс викладає викладає дослідження на основі відкритих джерел за допомогою інструментів інтернету та штучного інтелекту, розповідає про принципи пошуку в соціальних мережах. Ветеран своєї справи, він об’їздив Європу із семінарами з інтернет-досліджень. Серед його проєктів — «Цифрове розслідування» (штучний інтелект та дослідження), «Перевірка фактів в Інтернеті», «Довідник з журналістики даних» (безкоштовне завантаження) та виступи в якості спеціаліста із соціальних мереж та веб-досліджень.