Оборонное предприятие США DARPA работает над разработками новой поисковой системой работа которой будет направлена на поиск скрытого контента, в так называемом черном интернете, название этого проекта Memex и над ним работают семнадцать абсолютно независимых друг от друга разработчиков.
Основная задача этой работы, по словам ее руководителя Chris White, это создать абсолютно новый подход к интернету, не тот шаблонный алгоритм коммерческих поисковиков который основан лишь на потребительской рекламе и ранжировании и который способен проиндексировать всего лишь пять процентов всего интернета. Новый же проект должен будет охватить контент миллионов сайтов теневого интернета, на которые коммерческие поисковики даже не обращают внимания,а также тысяч недокументированных веб-ресурсов, которые функционируют в TOR-сетях, позволяющих устанавливать анонимное сетевое соединение и получать доступ к информации, заблокированной интернет-цензурой.
Начав индексировать скрытые сайты, можно будет выявить алгоритмы и закономерности теневого интернета и как результат помощь правоохранительным органам отслеживать незаконную деятельность.