SiteSputnik Station. Круглосуточный мониторинг информации с использованием нескольких компьютеров

[sitesputnik]

SiteSputnik Station. Круглосуточный мониторинг сайтов с применением нескольких компьютеров
Дата выхода публикации - 14.11.11г.

В версии 7.4.1 от 14.11.11 программы SiteSputnik Station реализована новая функция, позволяющая огранизовать круглосоточный мониторинг появления новой информации на заданные темы с использованием нескольких компьютеров. Эта функция увеличивает производительность и надежность процесса обработки информации и практически обеспечивающает его неуязвимость при нападении и различных атаках.

Описание новой функции.

Для этого потребуется картинка, которую можно увидеть, открыв из главного меню программы: «Параметры - Настройки - вкладка Station».



Новая функция реализуется при помощи двух операторов, применяемых в пакетах запросов (заданиях на выполнение мониторинга).

1. Оператор ^^Экспорт;

Он выполняет передачу (экспорт) чистых потоков, формируемых на конкретном компьютере, в папки локальной или глобальной сети интернета, прописанные в настройках. Толстая синяя стрелка на картинке указывает на окно, в котором прописываются экспортные папки. Третья и четвертая папки расположены в глобальной сети.

Пояснение.
Чистый поток - это полнотекстовая, очищенная от мусора новостная лента, сформированная из новой информации, появившейся на задействованных в пакете источниках (сайтах). Чистый поток становится доступным на других компьютерах. На его формирование уходит примерно 99% времени и других ресурсов.

Демонстрационные примеры чистых потоков на различные темы приведены на ссылках: "Прогнозы аналитиков", новости с "ТВ и Радио" источников, "банки, финансы, кредиты", "Владимир Путин".

2. Оператор ^^Импорт;

Он выполняет на конкретном компьютере прием (импорт) и передачу на анализ чистых потоков, сформированных при помощи оператора ^^Экспорт; на других компьютерах. Импорт происходит из папок локальной сети или глобальной сети интернета, прописанных в настройках. Толстая зеленая стрелка указывает на окно, в котором прописываются папки для импорта.

Результаты импорта и анализа (раскладывания по Рубрикам), приведенных выше потоков, представлены на ссылках: "Сколково", "Алексей Кудрин", "СургутНефтеГаз", "индексы Dow Jones и NASDAQ", "Альфа-Банк".

Пояснение.
Папки могут быть произвольные. Местоположение компьютеров не имеет значения.

Приоритет

Операторы ^^Экспорт; и ^^Импорт; "сильнее" переключателей "Включить экспорт потоков ..." (тонкая синяя стрелка) и "Выключить экспорт потоков ..." (тонкая зелёная стрелка). Это означает, что импорт и экспорт, прописанные в пакете, будут выполнены, независимо от того, установлена или не установлена в настройках галочка для этих параметров.

Планы на будущее

Реализация прописки папок для импорта и экспорта прямо в пакете, а не только в настройках программы. Это увеличит количество вариантов обмена информацией.

Что дают эти операторы
Примеры организации мониторинга.

Вариант 1. Упрощённое применение: десять для одного.
Предположим, что у Вас 11 СайтСпутников. Разобъём одну сложную задачу на 10 подзадач примерно одинаковых по времени выполнения. Пропишем для 10 СайтСпутников решение по 1 подзадаче, экспорт чистых потоков в одну папку "А" и старт в 03:00. 11-ому СайтСпутнику пропишем старт перед Вашим приходом на работу в 07:30 и импорт из папки "А".

Вариант 2. Для группы по интересам: один для десяти.
Возьмем сообщество СПКР. Предположим, что 10 членов сообщества имеют по одному СайтСпутнику. Выбирается папка на сайте сообщества. Она прописывается в настройках каждого СайтСпутника и в экспорте, и в импорте. В пакетах с "несекретным" мониторингом (источниками и запросами) прописываются операторы и ^^Экспорт; и ^^Импорт;. В "секретных" пакетах можно прописать только оператор ^^Импорт;. В результате такой организации работ каждый член сообщества будет практически "бесплатно" получать дополнительную информацию для мониторинга от своих коллег.

Вариант 3. Общий случай: десять для десяти.
Предположим, что Вам надо решать одну или несколько задач мониторинга появления новой информации, и в Вашем распоряжении имеется 10 компьютеров, оснащенных программой SiteSputnik Station. Применив Планировщик задач, Вы поручаете в течение недели каждому компьютеру в заданное время один или неколько раз в сутки выполнять один или несколько пакетов. В каждом пакете Вы прописываете экспорт, импорт или и экспорт и импорт чистых потоков в заданные в настройках папки. Количество папок - неограничено. Обмен информацией между компьютерами и пакетами прописан Вами. Организовав подобным образом работу компьютеров, можно обеспечить круглосуточный сбор, мониторинг и анализ информации для поставленных задач. Чтобы не заглядывать "внутрь" программ, результаты анализа информации (дайджесты) можно отправлять в клиентские папки, размещенные в локальной или глобальной сети интернета, или автоматически рассылать их по e-mail адресам.

Образно говоря, каждый из 10 СайтСпутников будет вращаться по своей орбите и передавать на Землю (в клиентские папки) собранную информацию.

Настоящая реализация программы SiteSputnik Station позволяет организовать указанные варианты работ.

Перерубрикация.

Экспортируя все чистые потоки в дополнительную архивную папку, можно в любое время проанализировать и разложить по любым Рубрикам новым и старым, собранную в сохранённых чистых потоках информацию. Рекомендуется сделать копию архивной папки, так как, параметр "Максимальный размер базы данных импортируемых потоков" (серая тонкая стрелка) "следит" за тем, чтобы базы данных потоков не разрастались ни в локальной, ни в глобальной сети и систематически удаляет устаревшую информацию.

Пакет для перерубрикации будет иметь вид:

^^Новости;
^^Импорт;
^^Рубрики\Путь1
^^Рубрики\Путь2
... ... ...
^^Рубрики\ПутьN

Прописывать источники не обязательно. Не забудьте перед запуском пакета указать в настройках в качестве импортируемой папки имя копии архивной папки. Большое значение в данном случае имеет способность программы СайтСпутник удалять дубли по контенту.

Возможно, Вы придумаете свою "импровизацию", подобную перерубрикации, на тему применения SiteSputnik Station.

Применение SiteSputnik Station.
О применении программы достаточно подробно написано в предпоследнем разделе первой публикации о программе SiteSputnik Station.

Подробнее о неуязвимости.
При помощи программы SiteSputnik Station можно решать достаточно серьёзные и ответственные задачи информационного обеспечения предприятия или другого объекта. Неуязвимость функционирования построенного программно-технического комплекса обеспечивается тем, что нет цели для атаки. Цель "размыта", она не сконцентрирована на одном сайте, сервере или компьютере. Папок импорта-экспорта может быть несколько, их несложно перемещать в веб-пространстве.

Обсуждение первых функций SiteSputnik Station.
Обсуждение данной темы открыто на форуме СПКР.

Подробнее о программе FileForFiles & SiteSputnik.
Полный список публикаций собран на странице.
Скачать программу можно здесь.
Copyright © Автор ИП Мыльников Алексей Борисович, г. Волгоград, 2011г. Все права защищены.