Система моніторингу onion-доменів

Відео: Ієрархія доменних імен. DNS. Як влаштований інтернет

Кожен резидент мережі може надати свої обчислювальні ресурси для організації Node-сервера - вузлового елемента мережі, який виконує функцію посередника в інформаційному обміні клієнта мережі. Існує два типи вузлів в даному даркнета: проміжні і вихідні (так звані exit node). Останні є крайньою ланкою в операції розшифровки трафіку, а значить, є кінцеву точку, яка може стати каналом витоку цікавої інформації.

Слід пам`ятати, що більшість доменів в даркнета - майданчики для ботнетів, і якщо Вам необхідно знайти, скажімо, перила (https://fplus.ru) для свого будинку, то тут Ви їх точно не знайдете - вам пряма дорога в "світлу частину "всесвітньої павутини.

Exit node в процесі свого функціонування

Наше завдання дуже специфічна: необхідно зібрати існуючі і, що найголовніше, актуальні onion-ресурси. При цьому не можна повністю довіряти внутрішнім пошукачам і каталогам сайтів, адже актуальність міститься в них інформації, а також її повнота залишає бажати кращого.

Однак рішення задачі агрегації актуальних сайтів лежить на поверхні. Для того щоб скласти список недавно відвіданих onion-ресурсів, необхідно відстежувати факт звернення до них. Як ми вже говорили, exite node є кінцевою точкою на шляху проходження зашифрованих пактів, а значить, ми можемо вільно перехоплювати пакети HTTP / HTTPS-протоколів Tor-користувача, який займається серфінгом в «традиційному Інтернеті».

Відомо, що HTTP-пакет може містити інформацію про відвідані раніше ресурсах. Дані знаходяться в заголовку запиту Referer, який може містити URL джерела запиту. У «традиційному Інтернеті» дана інформація допомагає веб-майстрам визначити, по яких запитах в пошукових сі-стем і з яких сайтів переходять користувачі підконтрольного веб-ресурсу.

У нашому випадку досить пробігтися по дампи перехопленого трафіку регулярним виразом, що містить рядок onion.