Как войти в deep теневой интернет. Deep Web, или Невидимая сторона Интернета. Deep Web: как попасть? Что это такое

Поисковые системы безупречно справляются со своей задачей, через них действительно можно найти почти любую информацию.


Один только Google проиндексировал свыше триллиона страниц, но этого может быть недостаточно. Иногда требуется собрать данные, которых нигде нет, поэтому приходится использовать Deep Web .

Как провести глубокий поиск в интернете? Фраза Deep Web переводится, как глубокая паутина. Сайта для полного поиска нет, но есть несколько хитростей, помогающих отыскать всё что угодно.

К сожалению, даже уникальная информация не всегда распространяется в открытом доступе, да и поисковики могут что-то не индексировать.

Не получается найти в поиске, что делать?

Чтобы наполнять свой блог интересной информацией, мне часто приходится использовать альтернативные источники данных. Даже если использовать Яндекс и Google, этого может быть недостаточно.

Когда требуется «копнуть глубже», пригождаются следующие способы:

1. Первым делом найдите список поисковых систем и попробуйте провести поиск по каждой из них. Алгоритмы везде разные, поэтому результаты отличаются. Желательно использовать иностранные проекты и пользоваться переводчиками, так удается найти намного больше.
2. Поиск по базам данных – поисковые системы могут не индексировать базы данных, а в них часто находится много полезной информации (всё и в одном месте). Сначала попробуйте просто ввести запрос типа «База данных фарфоровой продукции». Если это не помогает, используйте специальные поисковики для баз данных и .
3. Архивы и библиотеки – могут располагать информацией, которой ещё нет в интернете. Книги в большинстве своем отсканированы, но почти в каждой библиотеке есть отдельный архив. Люди стали забывать о существовании реальных библиотек, но напрасно.
4. Закрытые сайты – могут хранить ценную информацию, а получить к ним доступ можно через . Это крупнейшая база данных, куда добавлены страницы сайтов за много лет. Здесь вы можете найти площадки, которые уже давно не работают, но тексты на них никуда не делись, они в архиве.
5. Приватная сеть – речь идет о сети Tor, в которую вы можете вступить, при использовании браузера с тем же названием. К примеру, некоторые владельцы сайтов ограничивают доступ к ресурсам, делая их закрытыми от людей, попадающих под разные категории, а здесь все они снимаются (скачивайте браузер на ).
6. После установки браузера Тор, обязательно посетите его энциклопедию. Она открывается только в одном браузере и в ней собрано огромное количество информации. Также проводите поиск через сервисы Torch и TorSearch.

В одиночку искать что-то всегда сложно, поэтому не забывайте, что можно попросить помощи у других пользователей. Используйте любые сайты (например, ), чтобы попросить людей, предоставить вам какую-нибудь информацию.

Провести глубокий поиск в интернете или воспользоваться Deep Web не сложно, а теперь вы знаете хитрости, помогающие найти ту информацию, которой нет в обычных поисковых системах.

Вам также будет интересно:
—
—
—

В Google и других поисковых системах можно найти только часть информации, содержащейся в Интернете. Данные, хранящиеся в так называемом «глубоком» и «темном вебе», для них закрыты. Эта огромная параллельная вселенная служит как законным, так и незаконным целям.

Тайные общества в Интернете?

Возможность прятать данные от поисковых систем используют как владельцы обычных сайтов, так и организаторы анонимных сетей, частично составляющих так называемый «темный веб» - сегменты мировой Глобальной сети, не связанные с Интернетом. Идея, которая лежит в основе анонимных пользовательских сетей, похожа на концепцию тайных обществ и масонских лож реального мира. Кстати, сама по себе она не имеет ничего общего с незаконной деятельностью. Принцип прост: тот, кто лично знаком хотя бы с одним членом ложи, может быть приглашен на общие встречи всех членов. Они проходят в общественно доступных местах, но только посвященные знают, что именно происходит, когда и где. В Интернете это выглядит так: анонимные сети используют те же технологии, что и другие онлайн-службы: веб-страницы, электронную почту, обмен файлами. В принципе, они могли бы быть доступны каждому - но лишь в том случае, если этот «каждый» использует определенное программное обеспечение и знает, что и кого ему нужно найти.

Анонимные сети зародились как ответ компьютерного сообщества на чрезмерное рвение правообладателей и властей по ограничению распространения цифрового контента и информации еще в конце 90-х годов прошлого века и с тех пор постоянно совершенствуются. После того как правоохранительные органы всего мира обратили свое внимание на файлообменные сервисы и начали преследовать их наиболее активных участников, владельцы таких ресурсов стали искать способы беспрепятственно продолжать свою деятельность и разработали скрытый аналог децентрализованных пиринговых сетей (Peer-to-Peer, P2P, «равный к равному»), таких как Napster, EDonkey или BitTorrent.

В файлообменных сетях P2P обычно существуют центральные серверы, называемые трекерами, которые позволяют всем пользователям находить друг друга и обмениваться файлами MP3, видео, программами, изображениями и любой другой информацией в цифровом виде, - естественно, не заботясь об авторских правах и других связанных с законностью деталях. В анонимных сетях таких серверов нет - вся информация хранится распределенно на компьютерах пользователей.

Анонимные сети и «темный веб»

К находящейся на просторах «темного веба» информации в большинстве случаев нельзя получить доступ через Интернет, поскольку такие сегменты глобальной Сети могут вовсе не иметь подключения к нему. Чтобы попасть в анонимные сети, потребуется установить специальное программное обеспечение, которое есть на CHIP DVD.

ANts P2P написана на языке программирования Java и позволяет всем желающим анонимно обмениваться файлами. Обмен трафиком осуществляется не напрямую, а через несколько узлов-посредников. Каждому участнику Ants P2P известен только адрес соседнего компьютера, поэтому узнать, кто и куда передает файл, нельзя. Передаваемые данные шифруются по алгоритму AES для большей безопасности.

Назначение: анонимный обмен файлами. Сайт: antsp2p.sourceforge.net

Bitmessage предназначена для обмена надежно зашифрованными сообщениями и задумывалась как альтернатива электронной почте и другим мессенджерам, данные из которых в любой момент могут оказаться в руках у спецслужб. Архитектура Bitmessage сходна с архитектурой сети Bitcoin, предназначенной для обмена денежными средствами, но оптимизирована для передачи сообщений. Обмен возможен не только между отдельными пользователями, но и группами. После того как Эдвард Сноуден обнародовал информацию о массовой слежке за пользователями Интернета со стороны спецслужб, Bitmessage стала по-настоящему популярной.

Назначение: анонимный обмен денежными средствами. Сайт: www.bitcoin.org

Дружеский обмен

В отличие от Интернета, некоторые анонимные сети доступны далеко не для всех. Их создатели ставили одну цель: избежать надзора со стороны властей, которые сами зачастую нарушают закон, следя за своими гражданами. Разработанная для этого система анонимности привлекла не только борцов за свободу информации и обмена мнениями, но и любителей различного нелегального контента и пиратских копий.

Созданные внутри Интернета скрытые сети по аналогии с P2P стали сокращенно называть F2F (Friend-to-Friend, «друг к другу»). Впервые этот термин был введен в обиход в 2000 году программистом Даниэлем Бриклином, который прославился как разработчик первойэлектронной таблицы для ПК. В отличие от некоторых сетей P2P, они не имеют центральных серверов, а пользователи не могут обмениваться файлами с кем угодно.

Чтобы входить в контакт со своими друзьями, каждый участник сети должен знать их адреса и иметь их цифровые визитные карточки (сертификаты). У непосвященных нет возможности отслеживать обмен файлами. Если у друзей отсутствует интересующая вас информация, то на помощь придет анонимный режим функционирования, который поддерживается большинством существующих F2F-сетей. В данном случае допускается установление соединения между незнакомыми пользователями. Адреса компьютеров и все личные данные их владельцев при этом остаются тайной.

Freenet как спасение от цензуры

Одной из наиболее популярных сетей типа F2F является Freenet (не путать с названием некоторых интернет-провайдеров). Благодаря специальному программному обеспечению она использует уже существующую инфраструктуру Всемирной паутины и обычных сетевых операторов с их доступом к Интернету - но в то же время всеми силами отгораживается от традиционной Сети.

Freenet предназначена не только для обмена информацией между отдельными людьми. Внутри этой анонимной сети существуют и классические веб-сайты, однако URL-адреса в привычном для пользователей Интернета понимании отсутствуют. Кроме того, здесь есть изолированная от Паутины система электронной почты, дискуссионные форумы (FMS и Frost) и аналог социальной сети (Sone). Вся информация, доступная во Freenet, хранится распределенно на жестких дисках компьютеров пользователей в зашифрованном виде, для доступа к ней используется сложная система маршрутизации. Все это гарантирует практически полную анонимность, но накладывает ряд ограничений. По сравнению с Интернетом сеть Freenet работает значительно медленнее. В ней пока недоступны некоторые современные технологии - например, динамическая генерация контента с использованием баз данных и скриптов, широко применяемая в Интернете.

Целью основателей проекта Freenet было создание такой глобальной сети, где все пользователи смогли бы сохранять анонимность и никому не было бы позволено решать, что приемлемо, а что нет. В этой сети поддерживается дух свободного обмена информацией и свободы слова; даже у создателей Freenet нет полного контроля над системой. В таких странах, как, например, Китай, людям особенно нужен свободный обмен информацией без страха перед репрессиями со стороны государства. Полная анонимность во Freenet и подобных ей сетях достигается только тогда, когда пользователи вступают в контакт друг с другом абсолютно целенаправленно. Но даже в том случае, если разрешить установку соединения с незнакомыми людьми, вычислить компьютеры, обменивающиеся информацией, будет невероятно трудно. Коммуникация между двумя партнерами зашифрована и идет не напрямую. Потоки данных передаются через компьютеры других пользователей. Постороннему человеку чрезвычайно сложно проследить связи между отдельными участниками.

Сайты внутри Freenet остаются невидимыми для традиционных поисковых систем и никакой прямой связи с Глобальной сетью не имеют. Попасть на них можно только в том случае, если вы установите на свой компьютер бесплатное программное обеспечение Freenet и подключитесь к сети. Также полностью анонимными остаются личные данные их создателей и адреса компьютеров, на которых они размещаются.

С течением времени сеть Freenet развивалась и быстро росла. В настоящее время существует каталог сайтов со свободным доступом, который называется Linkageddon. В нем нет функции поиска, и пользователям Freenet приходится просматривать нерассортированный массив с помощью прокрутки, встречая при этом самые неожиданные вещи. В списке, кроме запрещенного контента, попадаются страницы, которые предлагают пиратские копии. Здесь же, рядом с ресурсами, публикующими достоверную информацию, можно обнаружить страницу какого-нибудь сумасброда, который с псевдонаучной тщательностью повторяет всевозможные ложные измышления. Не исключено, что отсутствие цензуры широко используется кем-то для расследования незаконной деятельности.

Программа Frost, работающая внутри сети Freenet, предназначена для анонимного обмена мнениями, структурированными на манер форумов, и файлами. Графическая оболочка приложения напоминает обложку почтового клиента, а интерфейс переведен на несколько языков, в том числе русский. Для Frost характерны те же особенности, что и для сети Freenet. Сайт: www.freenetproject.org/frost.html

Альтернативы Freenet

Invisible Internet Project (сокращенно I2P, проект «невидимый Интернет») представляет собой клон Freenet.

Данная сеть создана с целью обеспечения анонимного доступа к различным услугам, среди которых блоги, обмен мгновенными сообщениями, электронная почта, сайты, сервисы передачи файлов и т. д. Как уверяют ее авторы, конечной задачей проекта I2P является способность функционировать в жестких условиях, даже под давлением организаций, обладающих значительными финансовыми или политическими ресурсами. Передаваемые по сети данные шифруются, а сама сеть является децентрализованной. К I2P-сетям можно подключиться не только с компьютера, но и со смартфонов или планшетов под управлением системы Android.

Назначение: многофункциональная анонимная сеть. Сайт: www.i2p2.de

Hyperboria представляет собой экспериментальную децентрализованную сеть, основанную на сетевом протоколе cjdns. Передача данных на физическом уровне может осуществляться как с использованием инфраструктуры Интернета, так и напрямую между маршрутизаторами, что позволяет создать полностью независимую от Интернета глобальную сеть с ячеистой топологией. Передаваемый по Hyperbolia трафик шифруется, однако сеть не является анонимной - существует возможность установить как адрес отправителя, так и получателя данных.

Назначение: анонимный обмен файлами и сообщениями. Сайт: retroshare.sourceforge.net

«Темный веб» без темных махинаций

Анонимные сети не обязательно должны быть площадкой для незаконной деятельности, считают Билли Хоффман и Мэтт Вуд. Оба работают в научно-исследовательском отделе ИТ-гиганта Hewlett-Packard. В 2009 году они впервые представили Veiled (англ. «скрытый») - новое программное обеспечение для организации пользовательских анонимных сетей.

«Мы убеждены, что анонимные сети могли бы распространиться гораздо более широко, если бы для пользователей не существовало барьеров в виде загрузки, установки и настройки программного обеспечения», - говорит Билли Хоффман. А если бы анонимные сети стали доступны для более широкой аудитории, сразу нашлось бы много возможностей их применения в законных целях, полагают специалисты.

Создавая Veiled, исследователи думали о том, как обезопасить от давления властей сайты, подобные WikiLeaks, публикующие конфиденциальные документы правительств. До сих пор владельцы проекта WikiLeaks используют обычные веб-серверы, которые из-за юридического или политического давления могут в один прекрасный день исчезнуть из Сети. Если бы все их материалы распространялись децентрализовано через анонимную сеть, противники WikiLeaks превратились бы в борцов с ветряными мельницами, поскольку документы, которые обращаются в анонимных сетях, хранятся не на серверах, а распределены небольшими частями среди разных пользователей. По такому принципу работает, например, упомянутая выше сеть Freenet.

Исследователи из HP хотят упростить анонимные сети и для этого используют в своей программе технологию обычного браузера. Veiled работает без загрузки и установки на таких устройствах, как iPhone, а также на компьютерах под управлением операционных систем Windows, Mac и Linux. На первый взгляд Veiled кажется не таким мощным, как зрелое и специализированное программное обеспечение для анонимных сетей, однако имеет все важнейшие функции, необходимые для анонимной сети, среди которых - шифрование всех данных, передаваемых участниками, и возможность общаться в чате. Хоффман и Вуд подготовили подробную документацию по Veiled, чтобы другие программисты могли воссоздать их замысел. Veiled хорош, но двое исследователей из HP никогда не станут публиковать эту программу. Причина - возможный правовой конфликт с компанией, в которой они работают. Тем не менее авторы выставили в Сети настолько подробную презентацию, что, по мнению Хоффмана, другие программисты смогут без труда разработать аналог Veiled.

«Глубокий веб»: больше, чем WWW

«Темный Интернет» также невидим для поисковых систем и их пользователей, но организован совершенно иначе, чем анонимные сети. Его формируют огромные базы данных с различной информацией и страницы обычного Интернета, в силу ряда причин недоступные для популярных поисковых систем. Пользователи могут получить доступ к ним лишь в том случае, если отправят к базе данных специальный запрос или зайдут на страницы, адреса которых им заранее известны.

Сейчас владелец каждого веб-сайта может сам определить, какая часть его контента должна попасть в индекс Google и других поисковых систем, и должна ли попасть туда вообще. Если владелец закроет доступ на свой ресурс для поисковых роботов, запретит незарегистрированным пользователям просматривать страницы или же не удосужится должным образом оптимизировать свой сервис, то его информация не появится в списках результатов поиска даже в том случае, когда на нее есть ссылки с десятков тысяч сайтов, проиндексированных поисковыми системами. При обычных обстоятельствах это гарантировало бы самое высокое место в результатах выдачи. Поисковые машины как бы слепы на один глаз - и показывают своим пользователям только часть того, что есть на просторах Интернета.

Хорошим примером «глубокого веба» являются каталоги библиотек. Хотя эти списки книг и журналов хранятся в основном на традиционных веб-серверах, доступ к ним разрешается только после регистрации, выполнить которую поисковые системы не в состоянии. Им остается лишь в некотором роде «посмотреть снаружи на запертую дверь» и идти дальше. То же самое относится к базам данных с информацией об авиарейсах, специальных медицинских материалах, различной производственной документацией, социальным сетям и т. д. Правда, Google, купив ITA Software (подразделение, разрабатывающее ПО для транспортной индустрии, ранее - независимая компания), решила хотя бы проблему с авиаперелетами: американские пользователи Google уже могут вводить поисковые запросы типа «самый дешевый рейс из Нью-Йорка в Лас-Вегас» и получать результат.

Иногда владельцы ресурсов, информация которых не должна попадать в Сеть, допускают технические ошибки, вследствие которых конфиденциальные сведения оказываются в результатах поиска (все эти данные также относятся к «глубокому вебу»). Подобный случай произошел 18 июля 2011 года, когда «Яндекс» проиндексировал часть SMS-сообщений, отправленных с сайта фирмы «Мегафон» абонентам сотового оператора. Как впоследствии пояснили специалисты «Яндекса», в разделе отправки SMS на странице «Мегафона» в момент индексации поисковой системой отсутствовал файл robots.txt, в котором содержатся команды поисковому роботу. В нем, в частности, должен быть обозначен запрет на индексацию конфиденциальных разделов сайта. Сейчас эта информация уже удалена из результатов поиска, но внимательные пользователи успели ее сохранить и выложить в файлообменные сети, где она доступна и по сей день. Однако это еще не полное погружение в «глубокий веб».

Сталкеры «глубокого веба»

Открыть доступ к недрам Интернета обещают такие поисковые системы, как CompletePlanet и Scirus. Они устроены иначе, чем Google и «Яндекс», и позволяют находить информацию в таких базах данных, перед которыми традиционные поисковые системы пасуют. Например, CompletePlanet, как утверждают ее создатели, предоставляет доступ примерно к 70 000 сложноиндексируемых баз, а Scirus поможет отыскать информацию в различных научных архивах с данными.

Их работа стала возможной благодаря передовым поисковым роботам (часть поисковой системы, ответственная за сбор информации на сайтах). Они, в частности, способны генерировать вполне осмысленные запросы к базам данных и заполнять за пользователя формы благодаря поддержке специфичных языков.

Традиционные поисковые системы тоже стремятся добраться до информации, которая находится в глубоком Интернете, что неудивительно - по оценкам экспертов, там ее содержится в тысячу раз больше, чем в поверхностном. Компания Google, например, разработала особый формат для карт сайтов, благодаря чему ее поисковые роботы посещают даже те страницы, ссылки на которые с других ресурсов отсутствуют. Разумеется, сперва такую карту должен создать владелец сайта. Постепенно поисковики будут индексировать все больше информации, находящейся в глубоком Интернете, и граница между «поверхностным» и «глубоким вебом» размоется. Но некоторая ее часть все равно останется недоступной для поиска - например, предоставляемый только по подписке платный контент.

Первый шаг в «глубокий веб»

Вы можете окунуться в «глубокий веб» даже без установки специального программного обеспечения - с помощью специальных порталов и поисковых систем.

Проект OAIster (oaister.worldcat.org), инициированный Мичиганским университетом, ищет документы в метаданных серверов более 400 учреждений по всему миру. Это библиотеки, научные организации, редакции журналов и т.д. OAIster интересен прежде всего ученым, ведь он обеспечивает доступ примерно к 18 млн групп данных.

CompletePlanet (www.completeplanet.com) ищет информацию там, где Google и «Яндекс» не в состоянии ее отыскать. Посетители сайта этого поискового движка получают доступ более чем к 70 000 баз данных «глубокого веба» и каталогу ресурсов.

Дооснащаем браузер

Чтобы попасть в некоторые закоулки «глубокого веба», необходимо дооснастить браузер. Для этого требуется установить дополнение - службу анонимизации Tor (www.torproject.org), которая позволяет пользователям оставаться незамеченными в Сети благодаря технологии Onion Routing («луковая маршрутизация»). Данные передаются в Интернет через целый ряд постоянно меняющихся прокси-серверов и шифруются. Tor можно использовать для анонимного выхода в Интернет и работы как с приложениями, использующими протокол TCP, так и с внутренними скрытыми сервисами, образующими «темный веб». Доступ к ним возможен только из сети Tor. Принцип на первый взгляд нехитрый, однако на самом деле все гораздо сложнее. В «темном вебе» нет URL-адресов в привычном для нас смысле. Например, адреса скрытых страниц в сети Tor представляют собой криптографические комбинации букв и чисел с доменным именем «.onion». Они часто меняются, так что их приходится каждый раз искать заново.

Много ли вы знаете об интернете? И как много о вас знает интернет?

Что такое deep web

Deep Web – теневой интернет, в основе которого лежит максимальная анонимность, полный отказ от провайдерских серверов, что делает невозможным определить кто, куда и что отправляет. Прежде чем попасть на какой-либо сайт через deep web, ваши данные в зашифрованном виде передаются через таких же участников сети как и вы, что делает передачу данных максимально анонимной, но довольно медленной. Deep Web сейчас напоминает по скорости тот самый, первый интернет с помощью dialup модемов.Понятие глубокий интернет (Deep Web) приобрело популярность совсем недавно и до сих пор не имеет четкого значения. В широком смысле это словосочетание обозначает информацию, скрытую от индексации поисковыми системами, и включает закрытые сообщества и форумы, запрещенные к индексации отдельные страницы сайтов, базы данных, а также зашифрованные сети для анонимного серфинга (под последними чае всего понимаются TOR и i2p). В более узком смысле глубокий интернет – это псевдодоменные пространства, созданные при помощи зашифрованных соединений, обеспечивающие анонимность пользователя, благодаря сокрытию выданного ему провайдером IP адреса.
Обычно интерес к глубокому интернету связан с желанием более-менее опытных пользователей найти в Сети что-нибудь тайное, скрытое от глаз большинства. Начинающие internet-сталкеры уверены в том, что глубокий интернет включает в себя массу интересной информации, которая лишь по недоразумению оказалась скрытой от глаз большинства. На самом деле, это мнение верно лишь отчасти, а так называемый Deep Web включает в себя как информацию, не нужную большинству законопослушных граждан (подавляющее большинство сайтов сети TOR и i2p), так и весьма интересные обсуждения и мнения людей, объединившихся в закрытое сообщество, чтобы отгородиться от людей с чуждыми им взглядами и мнениями или малоопытных новичков в их области деятельности (типичный пример – закрытые SMO или SEO форумы). Кроме того, закрытость некоторых сообществ делает их элитными в глазах других пользователей (яркий пример - закрытый коллективный блог Лепрозорий).

Масштаб

Размер глубокой паутины неизвестен. Существуют относительно достоверные оценки общего числа сайтов, ведущих к онлайн базам данных: около 600 тысяч таких сайтов во всём Вебе и около 30 тысяч в Рунете. Самое интересное что объём информации сосредоточенный в deep web в десятки раз превышает объём информации в обычном интернет пространстве.

Ниже приведу несколько ссылок на интересные (на мой взгляд ресурсы)

Https://onion.cab/ – поисковик по сети Тор и шлюз с интернетом.
http://www.deepweb.us/ – коллекция ресурсов М.Зиллмана п глубокому вебу.
https://www.wilsoncenter.org/sites/default/files/stip_dark_web.pdf – учебный материал с выверенными кликабельными ссылками на поисковые ресурсы Deep и Dark Web.
https://www.deepdyve.com/ - платный поисковик по глубокому вебу.
http://www.hozint.com/ - платформа для сбора информации о политической стабильности, безопасности стран, различных инцидентах и волнениях, собирающая и сканирующая информацию в глубоком вебе.
http://www.gwu.edu/~nsarchiv/search.html – архив национальной безопасности США при Университете Джорджа Вашингтона.
http://www.base-search.net/ – поисковик в невидимом вебе для открытых академических веб-ресурсов, принадлежащих лучшим университетам и исследовательским центрам США и Великобритании.
http://citeseer.ist.psu.edu/index – поисковик в невидимом вебе по различным публикациям, книгам, статьям в области компьютерных решений и информационных наук на английском языке.
http://www.findthatfile.com/ – наиболее полный поиск файлов в интернете. Позволяет искать файлы 47 форматов. Поиск можно вести по автору файла, его названию, фрагменту содержания. Поддерживает не только основные виды текстовых и табличных файлов, но и сжатые файлы, аудио- видео файлы и многое другое.

Http://www.deepwebtech.com/ – ведущий производитель «глубоких веб технологий», реализующих подход федеративного поиска, создатель ряда поисковиков в «глубоком вебе», решений для интернета и интранета.
http://www.ipl.org/ – поисковик по коллекциям, содержащим наиболее релевантные и интересные информационные ресурсы, созданные в результате добровольного объединения усилий тысяч студентов, добровольцев каталогизации и классификации информации и ведущих специалистов в области информационных технологий.
http://publicrecords.searchsystems.net/ – бесплатный поиск по более чем 50 000 самым обширным открытым базам данных. Например, может дать информацию о бизнес-заявках, имеющихся лицензиях и даже об участии в уголовных процессах, банкротствах и многом-многом другом интересном.
http://www.resourceshelf.com/ – является поддерживаемой сообществом исследователей и специалистов по сбору и каталогизации информации коллекцией по наиболее востребованным вопросам бизнеса и науки.
http://vlib.org/ – крупнейшая мировая виртуальная библиотека, объединяющая цифровые ресурсы многих стран, учебных центров, коммерческих организаций и т.п.
http://biznar.com/biznar/ – является наиболее современной системой использования федеративной технологии поиска в «глубоком вебе» в сфере бизнеса.
http://lookahead.surfwax.com/index-2011.html – первая система поиска в режиме реального времени в «глубоком вебе» с элементами семантического анализа. Позволяет схватывать новости и факты, недоступные другим системам. Интегрируется в браузеры.
http://infomine.ucr.edu/ – виртуальная библиотека интернет-ресурсов, содержит данные библиотек многих наиболее богатых и преуспевающих американских университетов.

Ни конечно множество сайтов недоступных в обычной сети например WikiLeaks, Piratebay, The Hidden Wiki и куча других сайтов, ка говорится: каждому найдется...

Как и кто использует Deep Web?

Тor-пользователи используют эту сеть путем подключения через серию виртуальных туннелей, а не прямого соединения, таким образом позволяя организациям и лицам обмениваться информацией через публичные сети, не раскрывая при этом свою приватность. Тor является эффективным для обхода цензуры в интернете, позволяя пользователям просматривать сайты, которые в обычном Интернете были бы запрещены.

Уголовники различных мастей, террористы, наркоторговцы, наёмные убийцы чувствуют себя вольготно на этих просторах, хотя время от времени информация и просачивается в СМИ.

Тor может также использоваться разработчиками программного обеспечения для создания новых и усовершенствования старых инструментов коммуникаций со встроенной защитой приватности.

Скрытые сервисы разрешают частным лицам создавать веб-сайты, не раскрывая IP-адрес и истинное местоположение вебмастера. Например, Тor используется для обсуждения социально-проблемных тем: формируются чат-комнаты и веб-форумы для жертв домашнего насилия или людей с определёнными заболеваниями.

Журналисты могут вольно и безопасно переписываться с диссидентами и обличителями режимов. Сотрудники неправительственных организаций (НПО) получают доступ к переписке с семьями, когда они находятся вне пределов своей страны, не оглашая широкой публике, что они работают с данной организацией.

Понятно, что такое место не могут обойти военные, спецслужбы, правоохранители для обеспечения секретности своих сообщений и задач. Они же и используют Deep Web при поиске террористов, прочих уголовных элементов и их противоправных действий.

Какая валюта используется в Deep Web

Часто используемой валютой в глубокой паутине черных рынков является биткоин, причём в физическом виде они не существуют, а для их приобретения используются компьютеры, а иногда и целые вычислительные центры.
От обычных валют биткойны отличает тот факт, что отследить их обладателей и цепочку транзакций нереально, что и делает их наиболее предпочитаемой формой расчетов для незаконных дел.

Скорее всего данное пространство в ближайшем времени будет подконтрольно надзорным органам, но время не стоит на месте и наверняка следует ожидать появления новых программ и браузеров, так как тайный Интернет позволяет обналичивать огромные деньги.

P. S. это мой первый пост, если что - извините...

Что такое Дип Веб (Deep Web)

Дип Веб (Deep Web) или как его еще называют «глубокая паутина » — это набор информационных ресурсов которые скрыты от обычных поисковиков.

Что такое ДИП ВЕБ (Deep Web) — значение, определение простыми словами.

Простыми словами, Дип Веб — это сайты которые невозможно найти в поиске с помощью обычного поисковика типа Google или Яндекс. Они, так сказать, находятся в глубоком подполье, и попасть на них может только тот, кто знает как это сделать.

Какой объем данных содержит Дип Веб (Deep Web)?

Согласно проведенным исследованиям было установлено, что лишь небольшая часть попадает в основной индекс поисковых систем. Оставшаяся часть остается неизвестной большинству пользователей сети интернет. По различным подсчетам количество контента спрятанного в глубоких сетях в сотни раз превышает объем общедоступных данных.

Как работает Дип Веб (Глубокая паутина)?

Для того что бы понять как сайты попадают в привычный нам поиск, следует понимать что такое и как это работает. Система работает следующим образом: у поисковых систем, есть свои поисковые роботы, которые постоянно сканируют все данные попадающиеся им на глаза. Но, такие «ищейки » работают по определенным правилам, которые при желании можно обойти, оставив свой сайт недоступным для сканирования.

Примеры того, как скрывают сайты:

• Частные сайты: сайты требующие регистрации и авторизации. Такие ресурсы дают доступ к информации только по паролю, оставаясь абсолютно закрытыми для всех, кто не имеет такового.
• Ограниченный доступ к контенту: сайты, которые ограничивают доступ к своим страницам в техническом плане. Например, используя стандарты исключений для роботов, и тому подобные технические препятствия.
• Не HTML материал: текстовое содержание закодировано в мультимедиа (изображения или видео ). Файлы, или определенные форматы файлов, не обрабатываются поисковыми системами.

Способов скрыть сайт, существует огромное множество. Как говориться, — «было бы желание».

Кто использует Дип Веб (Deep Web)?

Скрытые сети, содержащие огромное количество информации представляют собой бесценный ресурс для различных частных компаний, правительств и особенно киберпреступников. Так как Дип Веб принято считать местом, где люди имеют гораздо больше анонимности, это открывает огромные возможности по проведению различных нелегальных махинаций.

Чем торгуют в скрытом интернете?

В глубокой сети, можно приобрести на свой страх и риск:

• оружие;
• наркотики;
• украденные кредитные карты и личные данные;
• вредоносное программное обеспечение;
• запрещенное порно и даже рабов.

Это целый теневой мир, в котором размываются все правила и принципы.

Основной платежной валютой для расчета в Дип Веб является – , и ему подобные криптовалюты, что позволяет сохранять анонимность сделок.

Что я знал до этого о «тёмном интернете» - ну, что это такой скрытый сегмент сети, в котором не менее тёмные личности продают, покупают и показывают всё то, за что в обычном интернете уже давно может наступить уголовная ответственность. Наркотики, оружие, фальшивые паспорта, и всё вне радаров каких-либо контролирующих организаций, прямо как на планете Татуин. Вполне достаточно для того, чтобы загореться желанием изучить это злачное место.

Тёмный интернет (darknet)

Сегмент глубокого интернета (deep web), неиндексируемые поисковыми машинами и недоступные через стандартные браузеры сайты.

Самый популярный способ туда попасть - Tor (The Onion Router), луковый роутер, прогоняющий данные через множество собственных серверов и тем самым заметающий за пользователями все следы. Сервис был разработан для американских ВМС в 2004 году и стал ящиком Пандоры: его децентрализованность исключает возможность просто «выключить» систему.

Начать надо с главного - для меня интернет и технологии всегда были лишь инструментами по передаче контента. Их начинка и какие-то неочевидные возможности интересовали меня не больше, чем таковые у утюга или соковыжималки. VPN, Tor, IP2P, прокси - все эти волшебные слова я узнавал из общественно-политических, а не гиковских изданий. Первые разогнали волну интереса к теме год или два назад, когда Роскомнадзор только начал оформляться в серьезный цензурный орган. Актуальными стали инструкции по обходу блокировок, которые ведомство активно накладывало на интересные или политически неугодные ресурсы. Тогда выбор остановился на ZenMate, только для того, чтобы заходить на огороженный, кажется, по заявлению Алины Кабаевой, «Луч». Оказалось, что включённой эта штука изрядно тормозит соединение, да и культурхакерский журнал предсказуемо снизил темпы работы, поэтому вскоре я перестал включать висящую в правом верхнем углу иконку плагина.

Так вот, с тёмным интернетом всё еще хуже. Анонимность и безопасность требуют жертв, поэтому сёрфинг в выбранном мною для экскурсии браузере Tor мгновенно оживил в памяти карточки оплаты с божьими коровками времен доширокополосного интернета. Ощущение усиливается кондовым дизайном большинства «тёмных» сайтов - примерно так выглядел веб на мониторах героев «Хакеров» или «Секретных материалов». Но это только добавляет процессу шарма, мы же пришли сюда за контентом, а не комфортом.

Первым делом рука тянется к запретному плоду - вот же они, легендарные драг-маркеты Silk Road, Pandora, Agora. Там всё именно так, как и ожидаешь и в то же время боишься увидеть - прямо вот с ценами, описанием, фотографиями, отзывами счастливых покупателей

Структура интернета

ОБЫЧНЫЙ интернет

Вконтакте, FURFUR, Buzzfeed и всё то прочее, что мы привыкли постоянно использовать.

«Подводный» интернет

Имиджборды, FTP-cервера, маргинальные сайты с голыми подростками и другие клубы по интересам, выпадающие за грань обывательского сознания.

Необходимы прокси

Глубокий интернет

Заблокированные цензурными организациями сайты, хакерские форумы, сомнительный с юридической точки зрения контент.

Необходим Tor или альтернативные системы

ТЁмный интернет

Торговля наркотиками, оружием, документами и людьми, обмен секретными или опасными документами, запрещённые книги.

ЗАКРЫТЫЙ интернет (существование которого вызывает обоснованные сомнения)

Отчёты о тайных правительственных экспериментах, снафф, услуги киллеров.

О поисковиках можно сразу забыть. По крайней мере, о специальных, разработанных для поиска по дарквебу. Их не один и не два, но пользоваться ими - настоящее мучение, ни о какой релевантности и эффективности и речи не идет. Проще сразу обратиться к существующим спискам ссылок - например, Hidden Wiki или TORDIR. Свой вариант для начинающих есть и на Луркморе, но совсем уж маленький - неинтересно.

Первым делом рука тянется к запретному плоду: вот же они, легендарные драг-маркеты Silk Road, Pandora, Agora - список можно продолжать очень долго. Там всё именно так, как ожидаешь и в то же время боишься увидеть, - прямо с ценами, описанием, фотографиями, отзывами счастливых покупателей. Больше всего напоминает старый Ebay или форум поклонников японского денима до появления популярных специализированных магазинов. Разнообразие поражает - чувствуешь себя советским человеком в прибалтийской командировке, не иначе. Трудно поверить, что всё так просто. «А это вообще законно?». Но хватит: во-первых, незаконно, во-вторых - после третьего изученного рынка приедается, почти как с кроссовками.

Почему доблестные наркополицейские не закроют все эти лавочки? «Потому же, почему этого не происходит в реальном мире,» - отвечает Дмитрий Хомак, один из основателей Lurkmore. - Участковый обычно знает, где в подотчётном ему районе происходит всякое интересное, но не вламывается туда с оперативниками и ОМОНом. И дело не в коррупции, а в том, что мелких торговцев запретным товаром выгоднее держать на коротком поводке,и ждать, пока не приплывёт кто-нибудь крупный. Хотя всегда есть шанс нарваться на какую-нибудь полицейскую "операцию Чёрная Сеть"».

Что дальше по списку? Разумеется, порнография. Не то чтобы её очень не хватало в обычном интернете, но это же всё-таки «тёмный», «глубокий» - тут уж точно не придется долго искать чего-нибудь перверсивного. А вот и нет. Чертовы торовские поисковики на первые несколько десятков страниц запроса выдают ссылки на местный Pirate Bay. Окей, зарываемся в библиотеку ссылок и ищем кодовые теги в описании. И вот ужасная правда - их вовсе не так и много, даже куда меньше, чем всевозможных нелегальных коммерческих сервисов. Самое экстремальное, на что я наткнулся, - ресурс по типу порнтьюба, полностью посвящённый копрофилии и смежным сферам эротического. Даже сальные педофилы, якобы облюбовавшие даркнет, и те не не особо себя афишируют. Разве что на местных имиджбордах, в отличие от России и азиатских стран, не запрещён раздел loli. Нашлось и несколько порталов для любителей юных мальчиков, но, опять же, ограничивающихся рисованным контентом. За таким даже Милонов Tor установить поленится.

Самое экстремальное, на что я наткнулся, - ресурс по типу порнтьюба, полностью посвященный копрофилии и смежным сферам эротического

Пределы анонимности

Зато процветает в глубокой сети давно закрытый на поверхности Pink Meth - платформа, на которой пользователи выкладывают интимные фотографии своих бывших, чего уж там, партнёрш, неизменно сопровождая «слив» скринами и адресом страницы в facebook. Вообще, не отметить достаточно высокую концентрацию асоциальных типов в даркнете всё-таки нельзя. Популярные русскоязычные форумы забиты обсуждениями альтернативных видов заработка: шантажа интимными фотографиями, мошенничества в социальных сетях под видом экстрасенса или проститутки-индивидуалки. На другой ветке обсуждают возможность приобретения по почте гранатомёта чуть ли не на случай зомби-апокалипсиса. На фоне таких тредов забежавшие приобрести запрещённые вещества пользователи выглядят глупыми туристами на восточном базаре.

Что ещё можно приобрести в доменной зоне.onion? Не так много, но всё, что нужно герою боевика: огнестрел всех мастей (некоторые магазины целомудренно ставят под запрет лишь «оружие массового поражения»), паспорта, водительские права, кредитки, фальшивые купюры, золотые слитки и айфоны. Говорят, можно ещё купить киллеров, рабов или человеческие органы. Не нашёл. Зато обнаружил пару отменных трекеров, один из них специализируется на мондо-фильмах и шокьюментари, из которых, даже не будучи большим фанатом мёртвых тел, можно отобрать что-нибудь интересное. Другие просто без всяких проблем хранят контент, который в обычной сети правообладатели нещадно зачищают.

Планомерно добивая ссылки из казавшегося вначале огромным каталога, из любопытного я наткнулся ещё лишь на пару качественных библиотек, несколько сайтов-открыток с дабстепом и восьмибитной анимацией и определённое количество радикальных порталов вроде Кавказ-центра или КиберБеркута. Есть ещё пристанища анархистов (много) всех мастей и неонацистов (не так много), с любовным тщанием наполненные тоннами тематического контента. Самой продвинутой и подтянутой к современным стандартам дизайна выглядит платформа для обмена горячей информацией между журналистами, оппозиционными политиками и другими интересантами. Оно и понятно: процесс там организован серьёзно, администрация сайта берет 20% комиссионных с каждой сделки.

Популярные русскоязычные форумы забиты обсуждениями альтернативных видов заработка: шантажа интимными фотографиями, мошенничества в социальных сетях под видом экстрасенса или проститутки-индивидуалки

Все финансовые операции в Tor-вселенной осуществляются с помощью BitCoin. Децентрализованная криптовалюта - единственно разумный денежный эквивалент для покупки запрещённых продуктов.

Минфин РФ недавно опубликовал законопроект, по которому использование криптовалют будет наказываться штрафами до 50 тысяч рублей для физлиц и до 1 миллиона рублей - для юридических. Пользователи даркнет-форумов уверены, что ни о какой эффективной борьбе с криптовалютами в России и речи идти не может: у соответствующих отделов МВД просто не хватит компетентности.

Все оказалось примерно так, как и предупреждали: без особых потребительских намерений делать в тёмном интернете примерно нечего. Суперсекретные документы и отчёты об экспериментах над людьми, по-видимому, всё равно лежат на следующем, более глубоком уровне, ну а «Поваренную книгу анархиста» не составляет труда найти и «на поверхности». В процессе знакомства обнаруживается, что существует огромное множество экстремальных сайтов, для которых тоже совсем не надо включать Tor-браузер. Иллюзия абсолютной, аркадной свободы, конечно, очаровывает, но чары спадают, как только ты понимаешь, что тебе, в общем, и не нужны фальшивые водительские права гражданина Великобритании.

Уйдут ли в «тёмный интернет» молодые и свободные, чтобы избежать излишнего внимания всё более активных органов по надзору за сетью? Вряд ли. Для этого, по словам Хомака, должен произойти катаклизм, который сделает обычный интернет совсем уж непригодным для общения. Даже романтическая тяга к полной цифровой анонимности едва ли способна заменить удобство многомиллионных сервисов и медиа, сосущих из своих пользователей личные данные. Для чтения новостей, даже неподконтрольных чьей-либо цензуре, пока что не требуется Tor, а страницы 99% пользователей социальных сетей, горько признать, на самом деле не содержат ничего интересного. Да и, в конце концов, ну не всем же нам суждено стать героями боевика.