Как найти глубокую сеть

Здравствуйте, дорогие читатели! Сегодня я, мистер Whoer, расскажу Вам о таком феномене Интернета, как «Глубокая паутина» или «Глубокий Интернет» .

Системы поиска, например, Yandex или Google, за время своего существования проиндексировали свыше триллиона страниц в Мировой паутине. Но наряду с огромным количеством открытых (проиндексированных) данных существует информация, к которой сложно подобраться через стандартные системы поиска. Зачастую такая информация располагается только на веб-хостингах. «Глубокий Интернет» (по-английски – «deep web») содержит данные о скрытых сайтах, которые предпочитают быть «в тени» и не вызывать к себе интереса. Это могут быть ресурсы, доступ к которым осуществляется только по инвайтам, или пиратские сайты. Также не индексируются странички, поиск которых запретил непосредственно владелец, и сайты, доступные только для зарегистрированных пользователей, например, почти все социальные сети.

Важно понять, что перечисленные ресурсы не являются анонимными или зашифрованными ­– к ним можно получить доступ, но это возможно лишь зная прямую ссылку на них, потому что поисковики не индексируют веб-страницы, на которые нет гиперссылок, размещенных на других ресурсах Интернета.

Как попасть в глубокий интернет? Сайты глубокого интернета.

Итак, как найти, как зайти и как попасть в глубокий Интернет? Для нахождения «глубинных» ресурсов нужно использовать специализированные технологии поиска баз данных «Deep web».

В качестве примера бесплатных или частично платных сайтов (баз данных) приведем следующие: Science.gov (для научных данных), FreeLunch (для экономических), и даже Википедия есть в глубоком интернете!

TOR поисковики

Более простым методом поиска onion сайтов является использование специальных поисковых систем. Наиболее известным примером является поисковик Grams.

Даже по логотипу понятно, что поисковик тщательно имитирует Google, и надо отметить, неплохо с этим справляется. Поисковая выдача достаточно обширна, ссылки выдаются как на onion сайты, так и на обычные странички в Интернете.

Использовать поисковик очень просто – вводите в поисковую строку запрос, ставите галочку “show only onion sites” и кликаете на значок «лупы».

Алгоритмы ранжирования полученной выдачи, как кажется, полностью повторяют гугловские, за тем лишь исключением, что на данном ресурсе вы никогда не увидите рекламных блоков. Так что смело можно сказать, что найти нужную информацию в «глубоком» интернете с этим поисковиком довольно просто.

На втором месте топ сайтов onion поисковиков находится Fess. В отличие от Grams этот сайт onion использует tor-движок в своей основе, что позволяет ему более гибко индексировать именно TOR-сайты.

Если вы на сайте в первый раз, то рекомендуем сначала узнать, что такое Tor, прочитав статью на эту тему.

Тем не менее, следует отметить, что ни одна из перечисленных и опробованных нами поисковых систем не идут ни в какое сравнение с Google или Yandex. О ранжировании сайтов в выдаче по различным критериям поведения, обратным ссылкам и прочим факторам можно забыть – сайты показываются так, как решили программисты. Правда почти везде присутствует ручная фильтрация — например, Fess просит присылать на e-mail найденные пользователями списки onion сайтов.

Как ещё открыть onion сайты?

Осуществлять поиск баз данных можно и при использовании специализированных сайтов. Такого рода ресурсы «глубокого интернета», как, например, Публичная библиотека интернета, Infomine, DirectSearch, как правило, содержат перечни ссылок на скрытые источники информации. Для того, чтобы найти список поисковиков глубокого Интернета, рекомендуем воспользоваться сервисом «searchengineguide.com».

Также существует вариант получения недоступной через обычный поисковик информации с помощью ресурсов в академических библиотеках. Библиотеки высших учебных заведений, как правило, имеют оплаченный доступ к уникальным базам данных, содержащих информацию, которую невозможно отыскать с помощью простой поисковой системы. Можно поинтересоваться у работника библиотеки, к какой информации открыт доступ, или, (если Вы студент) используя читательский билет, получить доступ к университетским базам данных.

Прекрасной возможностью найти редкие данные являются сайты, хранящие архивные копии Интернета. Например, выполняя поиск данных в проекте TheInternetArchive, который собирает, накапливает и хранит цифровую информацию, Вы сможете отыскать массу интересного – архивы веб-сайтов, которые прекратили свое существование, копии выпущенных игр, а также аудио и видео записи и ссылки на глубокий интернет.

Частью «глубокого Интернета», иногда нарекаемой «Darknet» (Темная паутина), является глубокая сеть Тор, которая используется для общения, торговли и хранения информации, доступность которой должна быть строго ограничена. Чтобы получить доступ к такой сети, нужно воспользоваться специальным программным обеспечением (браузер Tor, с помощью которого можно просматривать веб-сайты в зоне .onion).

Активность в сети Tor по большей части является полулегальной (то есть не совсем законной). Этой сетью пользуются люди, которые предпочитают максимальный уровень защиты своих данных, а также журналисты, при общении с анонимными источниками. Доступ к сети Tor является легальным, но активность пользователя в ней не считается таковой.

Браузер Tor значительно усложняет задачу отслеживания интернет-активности пользователя, и у Вас появляется возможность посещать веб-страницы анонимно. «Глубокий интернет» содержит есть множество сообществ, которые предпочитают конфиденциальность, поэтому они доступны только посредством браузера Tor.

Некоторые особенности onion-сети:

– интернет-страницы в сети Tor зачастую бывают вне зоны доступа в течение нескольких минут, иногда недель или вообще могут исчезнуть навсегда, что обуславливает их ненадежность. Также страницы достаточно медленно загружаются по причине подключения к сети Tor путем использования компьютеров других пользователей с целью обеспечения вашей анонимности.

– Tor-браузер не гарантирует Вам анонимность в поддерживаемых им операционных системах iOS и Android, и, следовательно, их использование не рекомендуется. Для других интернет-браузеров возможности Tor являются ненадежными и, как правило, не поддерживаются структурой Tor.

Отметим, что большинство людей пользуются «глубокой паутиной» с целью незаконной деятельности. Чтобы избежать отслеживания вашей активности, а также вредоносных атак на ваш компьютер, следует принять следующие меры предосторожности:

— В левой стороне адресной строки браузера Tor кликнуть «S», далее выбрать «Запретить скрипты в глобальном масштабе»;

— в операционной системе Windows или Mac OS активировать брандмауэр;

— замаскировать объектив веб-камеры, например, заклеив его лентой или скотчем, во избежание несанкционированного включения камеры без ведома пользователя;

— ни в коем случае не закачивать файлы с интернет-страниц в сети Tor, даже простые документы doc или excel, и не обмениваться через торрент-трекеры файлами, что весьма и весьма небезопасно.

Использование обычных поисковиков в «глубокой паутине» не будет эффективным и не принесет желаемых результатов. Хотя, если Вы ищите очень популярный сайт из глубокой паутины, то обычный поисковик (типа yandex или google) вполне может справиться с такой задачей.

Тем не менее, множество ссылок на сайты глубокого интернета, которые могут быть полезны в «глубокой паутине», Вы найдете на популярнейшем её сайте – HiddenWiki – и без помощи поисковика. В «глубокой паутине» также существуют как легальные сервисы, которые во многом похожи на сервисы обычной сети, (к примеру, сервис обмена изображениями) так и более специфичные, (например, сайты по разоблачению противоправных действий или коллекции книг по антиправительственной тематике).

Используем TOR + VPN

Чтобы войти в глубокий интернет абсолютно анонимно, помимо TOR следует использовать VPN, который будет шифровать переданные пакеты не только в браузере, но и через все другие программы, и скрывать использование анонимных серверов. VPN от Whoer.net имеет множество других положительных качеств, таких как отсутствие рекламы и записи логов.

Заключение

Важно запомнить, что использование обычных поисковиков в «глубокой паутине» не будет эффективным и не принесет желаемых результатов. Хотя, если Вы ищите очень популярный сайт из глубокой паутины, то обычный поисковик (типа yandex или google) вполне может справиться с такой задачей.

Тем не менее, множество ссылок на сайты глубокого интернета, которые могут быть полезны в «глубокой паутине», можно найти только на популярнейшем её сайте – HiddenWiki. Помните, что в «глубокой паутине» также существуют как легальные сервисы, которые во многом похожи на сервисы обычной сети, (к примеру, сервис обмена изображениями) так и более специфичные, (например, сайты по разоблачению противоправных действий или коллекции книг по антиправительственной тематике).

Предлагаем перейти в комментарии и поделиться известными вам ссылками на onion сайты. До встречи на страницах нашего блога … или в «глубоком интернете» 😉

Предлагаем просмотреть наше видео, где мы также рассказываем что такое «глубокой интернет» и как туда попасть:

Информация, собранная в сети, выходит далеко за рамки Google и других поисковиков. Интернет состоит из множества пространств и слоев. Если проникнуть в глубины этого «океана», можно сделать самые неожиданные открытия и получить доступ к уникальным данным. Мы говорим о «Глубокой сети» (Deep Web) – той части сети, в которой находится неиндексируемый контент, который трудно найти с помощью обычных поисковых систем.

Кроме того, в «Глубокой сети» пользователь может обеспечить себе гораздо большую конфиденциальность. В этой статье мы расскажем, из чего состоит «Глубокая сеть» и как проникнуть в нее.

«Поверхностная сеть». Разница между «Глубокой сетью» и «Темной сетью»

Часто эти два понятия путают; в действительности они означают разные вещи. Если мы представим Интернет как айсберг, «Поверхностная сеть» (Surface web) будет его видимой верхушкой. Это привычный Интернет, где размещаются все веб-сайты, к которым мы можем получить доступ через любую поисковую систему, например, через Google или Bing.

Под поверхностным слоем находится «Глубокая сеть»: информация, которая находится в сети, но не была проиндексирована и поэтому не является общедоступной. Здесь хранится около 90% содержимого всей Всемирной паутины: от обычных страниц, имеющих платный доступ, до документов, хранящихся в Dropbox, Google Диске или наших электронных письмах.

В этой скрытой части «айсберга» мы найдем «Темную сеть» (Dark Web) – часть Deep Web (около 0,1% Всемирной паутины), которая была намеренно спрятана и доступ в которую возможен только через определенные приложения.

Как искать информацию в «Глубокой сети» и «Темной сети»

Как мы уже говорили, Deep Web и Dark Web содержат огромное количество ценной информации : тысячи баз данных с документацией и секретными расследованиями, финансовую информацию. Получить доступ к ним можно только через специальные приложения, которые не только позволяют погружаться в глубины сети, но и скрывают Ваше присутствие в сети.

Вот некоторые из них:

Браузер Tor

Tor (Tor Browser) – самый известный браузер для аботы с Deep Web. Он основан на Firefox, но имеет предустановленный прокси-сервер Tor и адаптированные расширения HTTPS Everywhere и NoScript. Чтобы защитить Ваш просмотр, он автоматически удалит cookies и историю просмотров.

Браузер Tor доступен для Windows, macOS, Linux и Android.

Также есть версия для мобильных устройств Apple с ОС iOS Onion Browser.

Whonix

Whonix основан на исходном коде Tor Browser, поэтому работает аналогичным образом. Однако он имеет систему, которая полностью скрывает IP-адрес пользователя , даже если кто-то обращается к нашей системе с правами администратора. Он является частью виртуальной операционной системы Whonix, поэтому также предоставляет доступ к другим инструментам.

Разработаны версии для Windows, macOS y Linux.

Invisible Internet Project

Invisible Internet Project работает как Tor Browser и может использоваться для Deep Web, но также для дополнительной защиты при обычном просмотре. Его соединения зашифрованы . Самый большой недостаток Invisible Internet Project в том, что его достаточно сложно настроить.

Вы можете скачать Invisible Internet Project для Windows, macOS, Linux и Android.

Не все в Интернете будет отображаться в списке результатов поиска в Google или Bing; есть много мест, к которым их поисковые роботы не могут получить доступ.

Чтобы исследовать невидимую сеть, вам необходимо использовать специализированные поисковые системы. Вот 12 наших лучших сервисов для глубокого поиска в Интернете.

Что такое невидимая паутина?

Прежде чем мы начнем, давайте выясним, что означает термин «невидимая паутина»? Проще говоря, это универсальный термин для онлайн-контента, который не будет отображаться в результатах поиска или веб-каталогах.

Официальных данных нет, но большинство экспертов сходятся во мнении, что невидимая паутина в несколько раз больше видимой. Учитывая, что только Google, Amazon, Microsoft и Facebook хранят между собой более 1200 петабайт, цифры быстро становятся ошеломляющими.

Контент в невидимой сети можно условно разделить на глубокую сеть и темную сеть.

Глубокая паутина

Глубокая сеть состоит из контента, для доступа к которому обычно требуется некоторая форма аккредитации. Например, библиотечные базы данных, почтовые ящики для входящих сообщений, личные записи (финансовые, академические, медицинские и юридические), облачные хранилища данных, корпоративные сети и т. Д.

Если у вас есть правильные данные, вы можете получить доступ к контенту через обычный веб-браузер.

Темная паутина

Темная сеть – это подраздел глубокой сети. Вам необходимо использовать специальный темный веб-браузер (например, Tor) для просмотра контента. Он более анонимный, чем обычная сеть, и поэтому часто является местом незаконной деятельности, такой как продажа наркотиков и оружия.

Лучшие поисковые системы для невидимых веб-сайтов

1. Пипл

Pipl позиционирует себя как крупнейшую в мире поисковую систему для людей. В отличие от Google, Pipl может взаимодействовать с доступными для поиска базами данных, каталогами участников, судебными записями и другим контентом для глубокого интернет-поиска, чтобы предлагать вам подробный снимок человека.

2. Машина обратного пути

Обычные поисковые системы предоставляют результаты только по самой последней доступной версии веб-сайта.

Wayback Machine другая. Он имеет копии более 361 миллиарда веб-страниц на своих серверах, что позволяет вам искать контент, который больше не доступен в видимой сети.

3. Виртуальная библиотека WWW

Виртуальная библиотека WWW – самый старый каталог в сети. Его основал Тим Бернерс-Ли, создатель всемирной паутины, еще в 1991 году.

Добровольцы вручную составляют список ссылок, создавая тем самым высококачественный индекс глубокого веб-контента по десяткам категорий.

4. DuckDuckGo

DuckDuckGo хорошо известна как частная поисковая система для видимой сети, но знаете ли вы, что компания также предлагает луковый сайт, который позволяет вам исследовать темную сеть?

Даже обычная поисковая система предлагает больше глубокого веб-контента, чем Google. Он объединяет результаты более чем 500 автономных поисковых инструментов, чтобы найти свои результаты. Если вы объедините обычный движок DuckDuckGo с версией .onion, вы сможете выполнять поиск в Интернете.

Луковый сайт можно найти по адресу http://3g2upl4pq6kufc4m.onion/.

5. USA.gov

Объем содержания USA.gov действительно впечатляет. Это портал для всех необходимых вам общедоступных материалов по каждому федеральному агентству и правительству штата, местного или племенного правительства.

Вы также найдете информацию о государственных должностях, займах, грантах, налогах и многом другом. Большая часть информации на сайте не будет отображаться в Google.

6. Справочник журналов открытого доступа

Справочник журналов открытого доступа – это поисковая система в глубоком Интернете, которая обеспечивает доступ к научным статьям. Документы доступны любому желающему бесплатно.

Текущее хранилище насчитывает почти 10 000 журналов с 2,5 миллионами статей по всем темам. Google Scholar может получить доступ к некоторой информации, но мы думаем, что DOAJ – лучший инструмент для исследования.

7. notEvil Dark Web

Если вы ищете поисковую систему в темной паутине, обратите внимание на notEvil Dark Web. У сайта есть доменное имя .onion, поэтому он недоступен через стандартный веб-браузер. Чтобы загрузить его, откройте темный веб-браузер, такой как Tor, и вставьте hss3uro2hsxfogfq.onion в адресную строку.

У него есть база данных, содержащая более 32 миллионов темных веб-сайтов, из которых можно извлечь, а это означает, что, если она существует, эта поисковая система, вероятно, сможет ее найти.

8. Элефинд

Elephind стремится предоставить единый портал для всех исторических газет мира. Это фантастический ресурс для исследователей – особенно семейных историков, специалистов по генеалогии и студентов.

Многие газеты на сайте размещены исключительно в глубокой сети; они не будут отображаться в Google. На момент написания доступно 3,6 миллиона газет.

9. Голос шаттла.

Для всех, кто интересуется гуманитарными науками, «Голос шаттла» является важным ресурсом. Сайт был запущен в 1994 году и сегодня может похвастаться одной из самых впечатляющих коллекций тщательно отобранного глубокого веб-контента.

Есть более 70 страниц аннотированных ссылок, охватывающих все, от архитектуры до философии.

10. Ахмия

Ahmia – это поисковая система в темной сети. Но есть одна особенность – это одна из немногих темных поисковых систем, доступных в обычной сети.

Конечно, любые ссылки и результаты не будут открываться, если на вашем компьютере не установлен браузер Tor. Тем не менее, это по-прежнему отличный способ познакомиться с тем, что доступно в темной сети, не подвергая себя рискам, присущим темной сети .

11. WorldCat

Как узнать, какие книги есть в разных библиотеках вашего района? Просмотр сайта каждой библиотеки в отдельности отнимает много времени и потенциально подвержен ошибкам.

Вместо этого попробуйте WorldCat. Эта поисковая система в глубоком Интернете содержит два миллиарда проиндексированных элементов из библиотек по всему миру, включая множество ссылок, которые обычно доступны только при поиске в базе данных.

12. Проект Гутенберг

Если вы ищете малоизвестные электронные книги без авторских прав в Google, вам придется пролистать несколько страниц, чтобы найти результат, содержащий ссылку для загрузки.

Project Gutenberg предлагает более 58 000 бесплатных электронных книг, которые вы можете проверить и загрузить.

Узнать больше о невидимой сети

12 поисковых систем, которые мы вам представили, должны обеспечить прочную основу для начала вашей охоты за контентом.

К сожалению, одна из самых известных систем глубокого поиска из прошлого, Deeppeep, больше не существует, но все сайты, упомянутые в статье, могут помочь воссоздать утраченные функции.

Темная сторона интернета оказывается не такой темной, как мы думали. Что это такое глубокая сеть? Наверняка вы часто занимаетесь серфингом в виртуальном мире, и уже знакомы с термином deep web.

в простых терминах глубокую сеть можно интерпретировать как сайты в Интернете, которые не отслеживаются поисковыми системами, такими как Google, Yandex и Safari.

В последние годы в Интернете появилось много статей, в которых поднимались вопросы о глубокой сети (deepweb) или темной сети (darknet). Второй термин, который часто определяется как темная сторона виртуального мира, которую очень жутко посещать.

Что здесь правда? И что еще более важно, действительно ли глубокая сеть – это то, что говорят люди? Ответ вы найдете в 5 фактах и мифах о deepnet здесь.

Глубокая сеть и темная сеть – два разных термина

Прежде чем перейти к другим забавным фактам, давайте сначала определим разницу между глубокой и темной сетью. Которые часто путают друг с другом.

Глубокая сеть – это информация в Интернете, которая не индексируется публично. Поэтому информация не будет отображаться в поисковой системе.

В то время как темная сеть – это небольшая часть глубокой сети. Создание темной сети основано на понятии защиты конфиденциальности. В дополнение к тому, что поисковая система не отслеживает сайты темной сети, у них есть скрытые адреса серверов.

И самый распространенный способ посетить его – использовать специальный браузер под названием Tor.

Сайтов в темной паутине не так много, как вы можете себе представить. Но в темной сети люди могут свободно путешествовать анонимно, не беспокоясь о том, что личная информация будет разглашена или украдена другими людьми.

Для сравнения, вашу личную информацию будет легче узнать другим при посещении обычных сайтов, чем сайтов в темной сети. Этот факт успешно используют преступники.

Однако из-за элемента анонимности также можно получить множество преимуществ. Например, врачи могут дать беспристрастный совет потребителям наркотиков, которые не хотят огласки. Репортеры, страны которых подавляют свободу прессы, могут найти там информацию.

На самом деле, согласно информации из проекта Tor, Военно-морские силы Соединенных Штатов часто используют темную сеть для деятельности своей разведки.

Между тем, темная сеть действительно может часто использоваться в преступных целях. Но ее связь с киберпреступностью слишком преувеличена.

Все, скорее всего, посещали глубокую сеть

Не верите? Еще более удивительный факт: вы, вероятно, пользуетесь глубокой сетью каждый день.

Когда вы хотите оплатить счет кредитной картой, вы должны зайти на свой банковский счет. Так вот, информация вашей учетной записи считается глубоким веб-контентом, потому что Google не будет ее индексировать.

Почему? Ради безопасности. Как клиент банка, вы наверняка не хотите, чтобы банковская информация отображалась на странице результатов поиска. Наверняка вы не хотите, чтобы ваш сосед знал баланс вашего счета. Вот почему банки требуют, чтобы вы входили в систему, чтобы поисковые системы не индексировали конфиденциальный контент.

Содержание глубокой сети больше, чем видимой

По текущим оценкам, поверхностная сеть (та часть Интернета, которую мы просматриваем) состоит из 1 миллиарда документов. В то время как глубокая сеть содержит 550 миллиардов документов.

Если вы посмотрите статистику, то глубокая сеть включает в себя 90% контента в Интернете. Между тем, darknet, которая является частью глубокой сети, покрывает лишь 0,1%. Однако поисковые системы постоянно развиваются и могут охватывать больше информации, которая считается глубоким контентом. Поэтому приведенные выше оценки могут измениться в будущем.

Тогда почему весь контент глубокой сети не обнаруживается Google?

Причина логичная. Это потому, что Google, безусловно, не хочет включать сайт о торговле наркотиками или другой контрабанде в список результатов поиска!

Глубокая сеть и темная сеть не управляются преступниками

Многие новости о глубокой сети путают ее с темной частью или той частью Интернета, которая является темной. Реальность в основном состоит в том, что данные глубокой сети легальны. Ею управляют частные лица и ведущие компании.

В то время как в темной сети, как мы знаем, вы найдете незаконный контент. Такой как незаконный оборот (наркотики, оружие, взломанные кредитные карты), кровь.

Но в основном существующий контент в темной паутине касается не только криминальной составляющей. К вашему сведению, с помощью поисковой системы вы действительно можете найти нелегальные сайты, подобные упомянутым выше.

Преступная деятельность в даркнете не исключает возможности того, что власти это почувствуют. Ссылаясь на страницу Wired, Росс Ульбрихт, фигура, известная своей торговлей наркотиками в даркнете, был арестован и брошен в тюрьму. Затем, в 2014 году, сайт о педофилах из Бразилии был закрыт, а 55 вдохновителей были арестованы.

Фактически, с 2011 года было арестовано более 300 человек, связанных с преступной деятельностью в темной сети.

Нет уровней, как показано на диаграмме айсберга

Самый популярный миф о глубокой сети, который обсуждался много раз, инфографика в виде айсберга. Это изображение не совсем неверно. Но разделение айсберга на несколько уровней, возможно, просто полная чушь. Не говоря уже о самом глубоком уровне Интернета, называемом Марианской сетью (имеется в виду самая глубокая часть океана, Марианская впадина).

А особенно то, что Марианская сеть хранит в секрете историю человечества. Происхождение Бога и жизни, местоположение острова Атлантида. А также важные архивы правительства мира, которые являются абсолютно секретными.

Удивительно, но многие поверили этой новости. Фактически, человек, создавший инфографику, четко объяснил, что он не знает, каково содержание Mariana Web. Он только объяснил, что это место очень опасно для исследователя. Потому что в случае поимки он может быть арестован ФБР.

И что еще более важно, исходя из менее информации и свидетельств. Мы все еще сомневаемся, существует ли Марианская сеть на самом деле или это всего лишь чье-то воображение.

Это 5 фактов, которые могут дать вам другое представление о глубокой паутине. Итак, в заключение, глубокая сеть – это не то же самое, что темная сеть, и на самом деле она содержит не только жуткие вещи. И что еще более важно, глубокая сеть не так страшна, как об этом сообщалось. Заинтересованы в ее посещении?

Действительно ли вы представляете себе, из чего состоит интернет? А был ли у вас опыт рабты с глубокой сетью?

Wikipedia.org: “Глубокая паутина (также известна как «Невидимая сеть», «Глубокая сеть»; англ. Deep Web😉 — множество веб-страниц Всемирной паутины, не индексируемых поисковыми системами. Термин произошёл от соотв. англ. invisible web.

Наиболее значительной частью глубокой паутины является Глубинный веб (от англ. deep web, hidden web), состоящий из веб-страниц, динамически генерируемых по запросам к онлайн-базам данных”.

“Поисковые системы используют специальных поисковых роботов (англ. web crawler), которые переходят по гиперссылкам и индексируют содержимое веб-страниц, на которых они оказываются, занося их содержимое и гиперссылки на них в свои базы данных. Найдя на проиндексированной веб-странице ссылки на другие страницы, поисковый бот переходит по ним и индексирует содержимое каждой из найденных страниц, находит новые гиперссылки и переходит по ним для индексации; в результате переходов по ссылкам, ведущим за пределы индексируемых страниц, количество проиндексированных веб-страниц постоянно увеличивается.

Попасть на веб-страницы, на которые нет ссылок с других страниц, поисковый бот не может, в силу чего содержимое этих страниц не индексируется. Как следствие, не зная URL сайта или веб-страницы «Глубокой сети», обычный пользователь попасть на них не сможет.

Также в «Глубокую сеть» попадают сайты, владельцы которых добровольно отказались от индексации поисковыми системами (например, с помощью файла «robots.txt»), а также сайты и веб-страницы, защищённые авторизацией от просмотра информации третьими лицами. В таком случае, не зная логин и (или) пароль к веб-странице, невозможно в полной мере просмотреть её содержимое или пользоваться веб-сайтом”.

“…Размер глубокой паутины неизвестен. Существуют относительно достоверные оценки общего числа сайтов, ведущих к онлайн-базам данных: около 300 тысяч таких сайтов во всём Вебе в 2004 году и около 14 тысяч в Рунете в 2006 году”.

Для чего может быть нужна “глубокая сеть”?

Здесь, как правило, хранится информация, не предназначенная для широкого использования. Данные компаний, государственных органов, каталоги. То, что может быть полезным при проведении расследований.

Несколько инструментов для поиска в “глубокой сети”:

Vlib.org – старейший каталог в интернете, начат Тимом Бернерс-Ли, создателем Сети.Библиотека с более 300 под-каталогами.

Doaj.org – поиск статей в журналах –  в настоящее время хранилище дает доступ к 9000 + журналов с почти 2,5 миллионов статей по всем предметам. Эта информация не может быть получена с помощтю Google.

Vos.ucsb.edu – каталог не индексируемых интернет-ресурсов по литературе, гуманитарным и культурным исследованиям.

Infoplease.com – информационный портал с множеством функций – огромное количество баз данных, электронных журналов, альманахов, книг, списков рассылки, каталогов исследователей.

Worldcat.org – мета-каталог 72000 библиотек в 170 странах может помочь вам найти бумаги, книги, диссертации, видео, мультимедийные средства и даже музейные экспонаты.

Как еще можно выйти в глубокую сеть?

Получить доступ к глубокой сети как к нормальному сайту с помощью нормального браузера невозможно. Нужен браузер наподобие Tor, который имеет доступ к ссылкам .onion.

Шаги по обеспечению доступа к Глубокой Сети:

Шаг 1. Нужно установить Tor

После установки запустите Tor

Шаг 2. Этого недостаточно, ваша безопасность еще не обеспечена. Вам нужно установить хороший VPN-сервис на компьютере.

Советы по обеспечению анонимности:

– не верьте никому в глубокой сети;

– закройте объектив вашей веб-камеры;

– если решите посетить ссылки глубокой сети, то нужно быть защищенным с помощью VPN + Tor;

– перед тем, как посещать глубокую сеть, убедитесь, что у вас запущено расширение для браузера Tor, которое называется “NoScript”, а также задействуйте его настройку “Forbid Scripts Globally” (запретить выполнение скриптов везде);

– если вы захотите еще дополнительную защиту, наберите “about config” в строке адреса, прокрутите вниз до строки “javascript_enable” и измените значение с “true” на “false”;

– если вы не будете пользоваться сервисом VPN, то ваш IP-адрес можно будет вычислить. Не пытайтесь навлечь неприятности, пользуясь бесплатными сервисами VPN. Лучше купите доступ к лучшим VPN-сервисам;

– последнее, но не менее важное – после открытия ссылки на скрытую вики, настоятельно рекомендуется прочитать статью под названием “How to exit the matrix” (как выйти из матрицы).