Вариант 3. Для того, чтобы поиск информации производился на профессиональном уровне, созданы специальные программы поиска, обработки и анализа, характеристики некоторых из них приведена ниже. Стоимость ряда программ такова, что их приобретает только средний и крупный бизнес, другие доступны по цене даже небольших компаниям и физических лиц. Далее представлены характеристики только некоторых из существующих поисково-аналитических программ.

Программа Аваланч (Avalanche)

Программа Аваланч (Avalanche) предназначена для мониторинга изменений, происходящих в Интернете. Она собирает информацию с вэб-страниц по заданному алгоритму и складывает эту информацию в собственную базу данных. В любой момент пользователь может провести поиск по этой базе, используя операторы Булевой Алгебры, подобные тем, которые используются в Яндексе при формировании поискового запроса в Интернете. Аваланч существует в двух модификациях по алгоритму работы и в нескольких модификациях по своим возможностям. Различия по алгоритму работы заключаются в том, что одна из них собирает с заданных адресов все подряд, а вторая – только страницы, на которых произошли изменения с прошлого посещения ее Аваланчем.

Аваланч состоит из паука и «умных папок». Паук посещает страницы, которые ему предписано посещать, проверяет изменения на них и складывает информацию в базу данных. «Умные папки» самостоятельно сортируют эту принесенную пауком информацию, делая ее удобной для работы. Есть еще такое понятие, как рубрики. Рубрики позволяют работать с базой данных по конкретным запросам, интересующим пользователя в данный момент. В целом, работа с Аваланчем выглядит следующим образом. Сначала прописываются источники, контент которых будет контролироваться. Это могут быть не только отдельные страницы сайтов, но и страницы поисковых машин, которые появляются по определенному поисковому запросу. Указывается глубина переходов со страницы по ссылкам. Так, например, с первой страницы Гугла или Яндекса во время испытаний паук переходил по каждой ссылке, расположенной на первой странице поисковика с результатами выдачи. А на той странице, куда он по такой ссылке перешел, он уже не ходил по ссылкам дальше. Это настраиваемая опция.[13]

В первоначальной версии программа была разработана компанией Андрея Масаловича по заказу Гарвардского Университета в начале 2000-х годов. Версия Avalanche 2.7 на сегодняшний день, по мнению ряда экспертов, является лучшей в мире программой для мониторинга сети.

Программа SiteSputnik (СайтСпутник)

Программа FileForFiles SiteSputnik (СайтСпутник) создана программистом из Волгограда Алексеем Мыльниковым в тесном контакте с ведущими практикующими специалистами российской конкурентной разведки и предназначена для поиска, сбора, мониторинга и анализа информации, размещенной в интернете. Особое внимание уделяется получению новой информации на интересующие темы. Программа позволяет:

– осуществлять поиск и сбор информации в видимом и невидимом интернете;

– выявлять новые ссылки по пакету запросов (полный и точный поиск);

– производить мониторинг и рубрикацию потоков новой информации, в частности, для СМИ;

– производить мониторинг и рубрикацию потоков комментариев к новостям, сообщениям и публикациям;

– производить мониторинг и рубрикацию обновлений контента ссылок;

– находить взаимные связи людей, фирм и других объектов.[14]

Программа SemanticForce

Платформа для мониторинга и анализа интернет, СМИ, социальных сетей, видео, форумов, блогов, вакансий и других видов онлайн-медиа. Уникальность системы состоит в наличии ряда инновационных поисковых и семантических технологий, а также интеграции с различными внешними системами, например, KLOUT, Copiny или Google Analytics. Архитектура платформы и ее аналитические возможности специально разработаны для мониторинга и анализа высокочастотных объектов в режиме реального времени.[15]

Вот мнение о программе специалиста в области конкурентной разведки Елены Лариной: «Остановлюсь на ключевых преимуществах системы. К ним относится широчайший охват онлайн СМИ, которых в настоящее время насчитывается 250 тыс. изданий из 150 стран мира. Отличная, на мой взгляд, едва ли не лучшая среди подобных сервисов, индексация Facebook и ВКонтакте. Другие социальные сети, конечно, тоже индексируются, но индексация двух крупнейших в России сетей является фирменной фишкой SemanticForce. С учетом того, что web все более и более уходит от слов к изображениям, нельзя не отметить глубокую оперативную и адекватную индексацию SemanticForce YouTube, Vimeo, Slideshare и содержащихся на сайте комментариев к видеоматериалам и презентациям. Надо сказать, что разработчикам системы удалось дотянуть свои спайдеры до форумов и сайтов, в том числе частично защищенных капчой.

Меня особенно порадовала возможность мониторинга вакансий, резюме, отзывов и комментариев на основных сайтах работ. Коммерчески привлекательным в продукте для страны, где все торгуют, выглядит и возможность мониторинга отзывов о товарах, практически на всех интернет-магазинах. Практически важным для работы является возможность добавления в мониторинг любого источника, доступного в интернете, как из числа онлайн СМИ, так и ресурсов работ, интернет-магазинов, форумов, блогов и проч.».[16]

Сервис croinform.ru

Одна из старейших в России групп компаний, занимающихся аналитическим обеспечением бизнеса и служб безопасности, а также правоохранительных органов НПК «Кронос-Информ» запустила новый сервис croinform.ru. В России действует уже достаточно много компаний, оказывающих услуги по проверке клиентов, конкурентов, контрагентов. Новый сервис имеет ряд отличительных особенностей.

Во-первых, он позволяет проверять в единой системе не только компании и индивидуальных предпринимателей, но и физические лица. В основе работы сервиса лежит информационный портал МБКИ, который представляет собой полностью автоматизированный информационный ресурс, объединивший федеральные коммерческие банки данных в единую информационную среду.

Во-вторых, портал тесно интегрирован с имеющимися во многих организациях уникальными сетевыми базами, под управлением СУБД линейки Cronos.

В-третьих, проверка и мониторинг ведутся по широкой группе интернет-ресурсов, включающей 12 федеральных реестров, 12 реестров лицензий и 13 информационных источников.

В-четвертых, помимо традиционных данных, связанных с выписками из государственных реестров, а также сведений, предоставляемых государственными порталами, новый сервис предусматривает получение годовой финансовой отчетности. Статистики по государственным контрактам и данных по внешнеэкономической деятельности, если таковая ведется.