Индекс Исследователи темно веб, найти большинство из них содержит незаконные материалы

Интернет менее дикого запада, чем это было раньше, но есть еще уголки него, что являются скрытыми от глаз и довольно теневые. Например, Tor скрытые услуги включали многочисленные преступные предприятия, как Шелковый путь. Два исследователя из Королевского колледжа в Лондоне решил выяснить только, сколько из-Тор была посвящена нелегального контента. Результат? Большинство из этого.
Тор (который первоначально обозначало Луковый роутер) представляет собой сеть состоит из слоев зашифрованных реле, через которое пропускают данные. Каждый узел в сети знает, где пакет просто было и где это происходит дальше. Через несколько прыжков, источник пакета (почти) невозможно различить. Большинство людей используют Tor доступ к сайтам анонимно открытой сети Интернет, но есть также сайты, которые размещаются полностью внутри Tor, называемые скрытые услуги. Шелковый путь был скрытый служебный , но существует бесчисленное множество других. Именно эти сайты Дэниел Мур и Томас избавиться стремились количественно.
Это не простая задача, чтобы найти все скрытые услуги по Tor, не говоря уже взглянуть на данных, которые они хостинга. Скрытые сервисы эфемерны, часто переключения адресов и местоположений сервера без предварительного уведомления. В довершение всего, Tor адреса только длинные строки символов с доменом .onion в конце. Для того чтобы получить правильное образец все скрытые сервисы скрывается там, пара построил сценарий Python, что для обхода темную Интернет, начиная с популярных поисковых системах Tor Лук Сити и АХМИЯ.
Работа бота в том, чтобы очистить содержимое из каждой страницы и загружать его для анализа. Когда бот нашел ссылку на другой скрытый сервис (основной способ найти вещи на темной сети), было бы прыгать до мяча и очистить его тоже. Пара используется алгоритм обработки все содержимое собранной и сортировать его в категориях, как наркотики, социальной, порнографии, и финансовые. Сортировка была выборочную проверку и обнаружили быть очень точным в целом.
После того как сценарий изжила, были проиндексированы 5,205 живые сайты; в общей сложности 2723 страниц были классифицированы по содержанию. Страницы, содержащие менее 50 слов и тех, без содержания были сняты в категории "нет". Согласно анализу, 57% сайтов, размещенных незаконного контента, как препаратов и детской порнографии. Проект Tor оценкам насчитывается около 35000 из них скрытых услуги активные, так что это далеко от полного обследования, но достаточно, чтобы быть репрезентативной выборки.
Мур и избавиться говорят, что их цель с этим проектом было создание более умеренную точку зрения на роль шифрования . Политики в настоящее время требуют неосуществимых бэкдоры для шифрования, но Мур и избавиться сказать, что активисты приватность не в полной мере признать потенциал для злоупотреблений. Они не имеют решение в виду - они просто сделать эти данные доступными