Запущен поисковик DeepDyve, который будет искать в Dark Web

DeepDyve Inc. сегодня объявила о том, что запущена бесплатная поисковая система, которая может быть использована для доступа к базам данных, научным журналам, т.е. к любой неструктурированной информации и другим источникам информации в так называемом Deep Web или Dark Web — той части Интернета, где традиционные технологии поиска не работают.

Новая поисковая система DeepDyve дает возможность поиска по Dark Web. На сегодняшний день это страницы, которые содержат информацию из области  биологических наук, патентов и данных Википедии. Поисковый движок  индексирует 500 миллионов страниц, говорит DeepDyve, который был известен как Infovell до изменения его наименования  11 ноября.

Компания заявляет, что вскоре начнет индексировать содержание страниц касательно  физических наук, области информационных технологий, экологически чистых технологий и энергетики. Это позволит ей к концу этого года расширить индексацию до более 1 миллиарда страниц.

Поскольку большая часть контента в Dark Web состоит из технических публикаций, баз данных, научных публикаций и неструктурированных данных, он был оставлен без внимания традиционными поисковыми системами. Чтобы решить эту проблему, DeepDyve имеет партнерские отношения с издательствами и другими поставщиками подобной информации для получения доступа к контенту, который игнорируется другими поисковыми движками.

В начале этого месяца Google Inc. объявила, что начинает кампанию по  разработке поисковых алгоритмов в Dark Web и добавила возможность поиска PDF документов.