Автор admin

Интерфейс системы извлечения веб-данных

Система предлагает аналитику практически в реальном времени, а также  набор возможностей для отслеживания состояния, импорта, очистки, подготовки данных для дальнейшего анализа. Данные можно легко и удобно фильтровать и анализировать.

Система позволяет управлять всем процессом извлечения данных, регистрировать и отслеживать любые сбои, а также легко адаптируется к изменениям и обновлениям источника данных.

Отзыв

Data Extraction Engine — комплексная платформа извлечения данных из источников в сети Интернет.

Адрес

Задачи

Проектирование, дизайн, верстка, программирование.

Панель управления на главном экране отображает текущее состояние: общее количество записей в базе данных, количество синхронизированных на данных момент, количество записей  в очереди, сколько записей было синхронизовано за последние 24 часа и другие параметры.
Показывает, сколько записей имеют определенную задержку синхронизации.
 
Существует базовый интервал синхронизации, который обычно составляет 3 часа и зависит от настроек конфигурации. Атрибут Sync-Delay для каждой записи указывает, сколько из этих трехчасовых интервалов должно быть между синхронизациями. Если продукт синхронизируется и его атрибуты не изменились, значение задержки  увеличивается. Записи присваивается  большее значение задержки и она  обновляется только один раз в день.
Каждый прокси-сервер имеет 3-строчную статистику: за 1 час, 3 часа и 24 часа. Вы также можете увидеть количество запросов, выполненных за каждый интервал. Синяя линия означает, что все запросы получают положительный ответ.  Если половина строки красная (нулевой ответ), прокси блокируется на 1 час, после чего автоматически включается.
 
Качество прокси зависит от многих параметров: источника прокси, заданного пользовательского агента (и других заголовков) или целевого веб-сайта.
 
Один и тот же прокси-сервер может работать на Amazon.ca и получать  отказ на Amazon.com. 
Дизайн веб-интерфейса: системы извлечения данных, панель управления
 
Информация представлена в виде удобных списков с широкими возможностями фильтрации и анализа.
Дизайн веб-интерфейса: системы извлечения данных, экраны
Дизайн интерфейса веб платформы извлечения данных
Дизайн веб-интерфейса: системы извлечения данных, экран поиск

Инструмент позволяет манипулировать данными и выполнять сложные вычисления с использованием алгоритмов интеллектуального анализа данных и машинного обучения.

Движок  оперативно конфигурируется  и адаптируется к изменениям структуры источника данных.

Дизайн веб-интерфейса: системы извлечения данных, поиск категрии
Дизайн веб-интерфейса: системы извлечения данных, экран конфигурация
progressive web
progressive people

Дизайн / Разработка / Извлечение данных / eCommerce

Монолитный купол / Утепление ППУ / Торкрет-бетон

Новосибирск, Академгородок

работаем удаленно