"Web Aggregation Tool" - ПО для сбора и обработки веб-данных. Сборка данных предполагает интеллектуальный поиск данных, проверку их на правильность, обработку, выделение целевой информации и каталогизированное ее сохранение для дальнейшего анализа.

Мы принимаем предложения использования этого ПО в Ваших проектах.

Авторские права

ПО было разработано мной в 2009 году.

Возможности ПО

К числу основных целевых возможностей WAT относятся:

• задание гибких правил сбора данных из практически любых веб-источников
• оригинальные алгоритмы сбора и анализа данных
• возможность веб-авторизации, js-навигации
• задание сценариев сбора, расписания сбора
• сбор данных в БД; поддержка распространенных СУБД
• визуальный и текстовый контроль сбора данных
• ведение отчетности; формирование пользовательских отчетов
• лексический и семантический анализ данных; гибкая настройка алгоритмов анализа
• интерфейс, позволяющий эффективно работать с ПО уже через полчаса после знакомства
• эффективная работа с большим числом источников данных

К числу недостатков следует отнести среднюю скорость работы и значительные требования к ресурсам ПК.

Инструменты разработки и трудоемкость

Для разработки ПО была использована  MS VS 2008 (VB.NET).

Трудоемкость разработки составила около одного рабочего месяца.

Применение

Разработанное ПО было эффективно применено сбора данных для внутренних нужд Finance Nature.

Скриншоты

Заключение

При эксплуатации ПО отмечено удобство пользования, возможность практического использования. Отмечено отсутствие прямых конкурентов в целевой сфере, возможность коммерческого применения. Решение о разработке признано удачным.

Планируется дальнейшая разработка и совершенствование данного ПО для решения существующих проблем и решения более широкого круга задач.