Memex - тепер у великого брата є свій пошуковик

Як повідомляє CBS, агентство передових оборонних дослідницьких проектів DARPA Міністерства оборони США запускає новий спеціалізований пошукач Memex, орієнтований на роботу онлайн-ресурсами, які знаходяться поза полем зору популярних пошукових систем Google, Yahoo і Bing.

Невидимою Мережею, темним інтернетом або Deep Web сьогодні, як правило, називають приховані від звичайних пошуковиків сайти Tor, захищені паролями онлайн-форуми і ресурси, що вимагають обов`язкової реєстрації. Крім того, в Мережі існує також безліч серверів, що видають дані з будь-яких сенсорів, і величезна кількість баз даних (юридичних, судових, адресних та ін.), Які розміщуються на звичайному хостингу (до слова, докладніше про це тут - https://bitte-hosting.ru/), Але інформацію на них не зберігається в статичному вигляді і отримати її можна тільки після заповнення необхідних форм. Такі ресурси теж недоступні звичайним пошуковим системам на зразок Google і Bing, але становлять інтерес для правоохоронців, військових і органів безпеки.

Вперше про існування Memex представники DARPA оголосили рівно рік тому, в лютому 2014 го. Анонсуючи новий пошуковий інструмент, його творець і одночасно один з керівників проекту Memex Кріс Уайт зазначив наступне:

«Інтернет більше, набагато більше, ніж думають. За попередніми оцінками, через Google, Microsoft Bing і Yahoo ми отримуємо доступ приблизно до 5% міститься в Мережі контенту. Таким чином, зловмисники мають досить простору для тіньової діяльності ».

За словами Уайта, Memex виходить далеко за рамки традиційних поісквих систем і є найпотужнішим інструментом, який дозволяє фахівцям правоохоронних структур виявляти в «невидимої Мережі» різні ресурси, які спеціалізуються на рекламі торгівлі зброєю, наркотичними речовинами та іншої протиправної діяльності.

«Memex найпростіше уявити так: як я можу невидиме зробити видимим? - вважає директор інформаційно-інноваційного відділу DARPA Ден Кауфман. - «Люди в більшості своїй створюють в Інтернеті корисні і хороші речі. Однак живуть там і паразити, тому ми обмежуємо їх можливості використовувати Інтернет проти нас і робимо світ кращим ».

Тут варто нагадати, що відповідно до недавніх публікаціями в пресі, в тому числі і звітом Університету Карнегі-Меллона, сьогодні Memex в декількох версіях вже використовується правоохоронними органами США зокрема для розшуку і підозрюваних у викраденні і торгівлі людьми.

Назва Memex походить від словосполучення «memory index» (між іншим введеного в ужиток журналістами видання The Atlantic ще в 1945 році) і на даний момент позначає сукупність восьми open-source програм для пошуку, аналізу та візуалізації інформації, а також програмного забезпечення для серверів нижнього рівня, що виконує складні обчислення і обробку даних.