Як очистити зображення для покращення результатів пошуку при GEOINT розслідуваннях

На вікторині Тілман Вагнер поділився цією фотографією та запропонував кілька цікавих запитань для аналізу:

Хто її опублікував і де?
Яка була нагода?
Чи брав участь Тілман, і якщо так, то яким чином?

Отже, з чого варто почати? Спершу потрібно визначити місце зйомки, щоб дати відповіді на запитання Тілмана. На зображенні є кілька підказок, які можуть стати гарною відправною точкою: текст на екрані написаний британською англійською (де слово “організація” пишеться через «s»), що натякає на ймовірну мережеву подію чи зустріч. Присутній знак WiFi, проте назва мережі надто дрібна для прочитання, інакше можна було б використати сервіс Wigle для більш глибокого аналізу. Швидких результатів це поки що не дає.

Одне з головних правил у геолокації (і дослідженнях загалом) полягає в тому, що чим унікальніший або характерніший об’єкт, тим він корисніший для ідентифікації місця зйомки. Безперечно, найбільш помітною ознакою є незвичайна будівля у формі піраміди, яка видніється з вікна. Якщо її вдасться знайти, можна буде визначити місце зйомки.

Це найбільш характерна риса на фотографії, і вона буде ключем до її геолокації.

Обрізання зображення та використання зворотного пошуку видається найочевиднішим способом знайти будівлю, але в цьому випадку такий підхід має суттєвий недолік. Коли люди дивляться у вікно, вони інстинктивно ігнорують такі деталі, як рами або штори, щоб зосередитися на об’єктах зовні. На жаль, алгоритми зворотного пошуку зображень ще не здатні на це: вони не розрізняють передній план і фонові елементи, які мають значення. Тож при спробі вирішити цю задачу таким методом результатом, ймовірно, буде низка збігів, що виглядатимуть приблизно так:

Пошукові системи зворотного зображення показують тут свої обмеження. Вони зосереджені на віконній рамі та шторах, але не на будівлі ззовні, яка нас цікавить. Отже, що можно зробити?

Видалення шумів із зображення

Щоб ефективніше провести зворотний пошук зображення, необхідно спростити його, прибравши зайві елементи переднього плану. Ідеальним рішенням для цього є сервіс Cleanup.pictures — він простий у використанні та дозволяє легко видаляти небажані деталі, наприклад, віконні рами. Замість того, щоб залишати порожні ділянки, інструмент автоматично заповнює видалені зони, ґрунтуючись на решті зображення, і вгадує, які деталі повинні бути відображені. Це ідеально підходить для наших цілей.

Перший крок — завантажити обрізане зображення на веб-сайт для подальшої обробки.

Далі використовуємо інструмент ластик, щоб виділити деталі, які хочемо видалити.

Інструмент Cleanup.pictures за допомогою “розумної гумки” видаляє небажані деталі зображення і заповнює порожні місця, орієнтуючись на незмінені частини. Завдяки цьому виходить “очищене” зображення, яке значно підвищує шанси на успіх у зворотному пошуку. Нижче показані результати пошуку зворотних зображень із прибраним переднім планом, що допомагає точніше визначити об’єкти на фоні.

Після видалення віконної рами вдалося отримати значно точніші збіги з будівлею на задньому плані. Виявилося, що це Національна бібліотека Латвії в Ризі. Переглянувши район на Картах Google, можна помітити, що єдина будівля, з якої могло бути зроблене це фото, — це Wellton Riverside Spa Hotel. Інші будівлі навпроти бібліотеки не мають скляних балконів, як на оригінальному зображенні, що підтверджує точність цієї локації.

Як підтвердження, швидкий огляд конференц-залів на веб-сайті готелю відкриває кімнату, яка збігається з кімнатою на фото Тілмана. Національну бібліотеку навіть видно з вікон.

Тож місце знайдено – як дізнатися про конференцію?

Пошук події

Щоб визначити подію, що могла відбутися за кілька днів до 26 жовтня у Wellton Riverside Spa, варто скористатися доступними методами з пошуку в соціальних мережах. Оскільки готель не публікує список минулих подій, а інструменти на кшталт Eventbrite обмежуються поточними та майбутніми заходами, є сенс звернути увагу на дописи з геотегами.

Соціальні мережі, зокрема Facebook і Instagram, мають функції пошуку за геолокацією, що дозволяє знаходити публікації, зроблені у певних місцях. Це може дати підказки щодо заходів, які проходили в Wellton Riverside Spa у зазначений період.

Instagram є особливо корисним ресурсом для таких досліджень. Незважаючи на обмеженість пошукових функцій, платформа дозволяє знайти дописи, відфільтрувавши їх за місцем розташування. Введення «Wellton Riverside Spa» у рядок пошуку відкриє публікації та хештеги, пов’язані з готелем. Це може допомогти знайти фотографії та інформацію про події, що проходили там, і, можливо, зв’язати конкретний захід із фотографією Тілмана.

Одне із зображень із геотегами веде до цього зображення, опублікованого 25 жовтня. Він посилається на хештег #MILSummit2022 – тому потрібно буде з’ясувати, чим саме був цей саміт.

Користувач також опублікував ще одну фотографію, схоже, зроблену на тій же події. Судячи з назви конференції — Baltic MIL Summit — та основних тем, які обговорюються на заході, можна зробити висновок, що це саміт, присвячений медіаграмотності, боротьбі з дезінформацією та перевірці фактів. Оскільки Тілман працює саме в цій сфері, це підтверджує, що напрямок дослідження правильний і пов’язаний із заходом, де обговорювалися подібні теми.

Під час дослідження Балтійського саміту MIL швидко з’ясувалося, що захід проводився у Wellton Riverside Spa в понеділок, 24 жовтня, під керівництвом Žinių Ekonomikos Forumas. На сторінці заходу у Facebook є сотні фотографій учасників конференції, що не тільки підтверджує місце події, але й надає додаткові докази — серед фотографій ми навіть знайшли те саме зображення, яке Тілман використав у своєму тесті. Це ідеальне підтвердження правильності обраного шляху!

Фотографії з події натякають на тісну співпрацю між DW Akademie і Балтійським самітом MIL, що проходив у Ризі, — галузі, в якій працює Тілман. Це посилює підозру, що Тілман міг би мати зв’язок із цією конференцією. Водночас, для підтвердження важливо звернутися до деталей: на сайті організатора, Žinių Ekonomikos Forumas, є публікація, присвячена саміту, а також доступний розклад заходів, де перераховані спікери та їхні теми.

Серед спікерів і учасників дійсно фігурують представники DW Akademie, але Тілмана серед них немає. Це важливий факт, оскільки, хоча DW Akademie була безпосередньо залучена до конференції, сам Тілман не значиться в списках доповідачів чи учасників. Також, переглядаючи численні фотографії на сторінці події у Facebook, можна помітити, що він не був зафіксований на жодному знімку, попри те, що багато інших учасників сфотографовані в деталях.

Відсутність його імені в офіційному розкладі та на фотографіях із заходу, ймовірно, означає, що він не був присутній на саміті особисто. Це може бути ознакою того, що, хоча його організація брала участь у саміті, його роль була дистанційною або організаційною, без фізичної присутності в Ризі.

На заході виступали деякі колеги Тілмана, і, хоча прямих доказів його особистої присутності немає, розклад вказує, що певні сесії транслювалися онлайн, тож є ймовірність, що Тілман міг приєднатися до них дистанційно. Однак це важко підтвердити без додаткових джерел.

Замість цього можна розглянути інший підхід: перевірити, як DW Akademie висвітлювала саміт на своїх інформаційних платформах. Односторонній зв’язок через Žinių Ekonomikos Forumas (ZEF) вже показує участь DW Akademie через фотографії конференції та розклад, але подальше дослідження власних каналів DW Akademie може допомогти уточнити деталі.

На веб-сайті DW Akademie є дві стрічки новин у соціальних мережах: X та Facebook. У публікаціях за 24–25 жовтня видно, що конференція була доступна для перегляду онлайн, що підтримує можливість дистанційної участі Тілмана. Окрім цього, значну увагу приділено презентації Лени Річе, яка представляла гру Go Verify як частину програми саміту, що підтверджується активною рекламою на Facebook.

Ці факти свідчать, що хоча безпосередніх доказів присутності Тілмана немає, його організація брала активну участь у події, і він, ймовірно, міг бути залучений дистанційно, враховуючи його професійний інтерес до тем саміту.

Повідомлення у X містить пряме посилання на гру Go Verify, яка є головною темою реклами Deutsche Welle навколо Балтійського саміту MIL. Перейшовши за посиланням і прочитавши про Go Verify, знаходимо знайоме ім’я внизу статті: