BI Consult
  • Перейти на QlikSense
  • Перейти на QlikView
  • Перейти на Tableau
  • Перейти на Power BI
  • Контакты
  • +7 812 334-08-01
    +7 499 608-13-06
  • EN
  • Отправить сообщение
  • Главная
  • Продукты Business-Qlik
    • Дистрибуция
    • Розничная торговля
    • Производство
    • Операторы связи
    • Страхование
    • Банки
    • Лизинг
    • Логистика
    • Нефтегазовый сектор
    • Медицина
    • Сеть ресторанов
    • Энергетика
    • Фрод-менеджмент
    • E-Commerce
    • Фармацевтика
    • Построение хранилища данных
    • Создание Data Lake
    • Цифровая трансформация
    • Управление по KPI
    • Финансы
    • Продажи
    • Склад
    • HR
    • Маркетинг
    • Внутренний аудит
    • Категорийный менеджмент
    • S&OP и прогнозная аналитика
    • Геоаналитика
    • Цепочки поставок (SCM)
    • Process Mining
    • Сквозная аналитика
  • Платформы
    • Qlik Sense
    • QlikView
    • Tableau
    • Microsoft Power BI
    • Геоаналитика Qlik GeoAnalytics
    • Qlik NPrinting - рассылка отчетности QlikView/Qlik Sense
    • KliqPlanning Suite - бюджетирование в QlikView
    • ATK BiView-1C Коннектор (для Qlik/Tableau/PowerBI)
    • QlikView/Qlik Sense SAP Коннектор
    • QlikView R-Коннектор
    • Qlik Web Connectors - коннектор Google, Facebook, Twitter
    • Vizlib Qlik Sense extentions (библиотека экстеншнов)
    • Библиотека extention для Qlik
    • Qlik Alerting
    • Qlik Data Integration Platform - создание Data Lake
    • Qlik Data Catalog решение для Data Governance
    • ATK BiView документация
  • Услуги
    • Консалтинг
    • Пилотный проект
    • План обучения и сертификации
    • Подготовка специалистов по Qlik
    • Бесплатное обучение Qlik
    • Сертификация Qlik
    • Поддержка
    • Технические задания
    • Сбор требований для проекта внедрения BI-системы
    • Аудит приложений Qlik и Tableau
    • Разработка BI Стратегии
    • Styleguide для BI-системы
    • Как выбрать BI-систему
  • Курсы
    • Учебный курс по Qlik Sense
    • Учебный курс по Tableau
    • Учебный курс по Microsoft Power BI
    • Учебный курс Информационная грамотность (Data Literacy)
    • Учебный курс Современная архитектура хранилища данных
    • Учебный курс для бизнес-аналитиков
    • Учебный курс по NPrinting
    • Учебный курс по BigQuery
    • Учебный курс по Azure Databricks
    • Учебный курс по DWH
    • Учебный курс по Data Governance
    • Учебный курс по Data Science (ML, AI)
    • Учебный курс администратора Qlik Sense
  • Компания
    • Руководство
    • Новости
    • Клиенты
    • Карьера
    • Скачать
    • Контакты

Услуги

  • Консалтинг
    • Продуктивный и согласованный анализ закупок, продаж и маркетинговых активностей в Fashion-Retail
    • Тренинг «S&OP для производственно-торговых компаний»
    • Проект внедрения Qlik
  • План обучения и сертификации
    • Учебные курсы Qlik
    • Учебные курсы Tableau
    • Учебные курсы Microsoft PowerBI
  • Бесплатное обучение
  • Сертификация Qlik
  • Пилотный проект
  • Сопровождение и поддержка
  • Технические задания
  • Сбор требований для проекта внедрения BI-системы
  • Аудит приложений QlikView / Qlik Sense / Tableau
  • Разработка BI Стратегии
    • Становясь Data-Driven организацией: скрытые возможности и проблемы
  • Styleguide для BI-системы
  • Как выбрать подходящую современную BI-систему

Отраслевые решения

  • Дистрибуция
    • Business-Qlik Дистрибуция
  • Розничная торговля
    • Business-Qlik Розничная торговля
    • Business-Qlik Розничная торговля: DIY
    • Business-Qlik Розничная торговля: Fashion
    • Business-Qlik для сетей аптек
    • BusinessPack для Tableau: POS - Point of Sales Perfomance
  • Производство
    • Business-Qlik Производство
  • Операторы связи
  • Банки
    • Business-Qlik for Banking на базе QlikView/Qlik Sense
    • Бизнес-аналитика в банке
  • Страхование
  • Фармацевтика
    • Business-Qlik Фармацевтика
  • Нефтегазовый сектор
  • Лизинг
  • Логистика
  • Медицина
  • Сеть ресторанов
  • Энергетика
  • E-Commerce
  • Анализ мошенничеств (фрод-менеджмент)

Функциональные решения

  • Управление по KPI
    • Самоуправляемая компания
  • Финансы
    • Бюджетирование
    • Консолидация финансовой отчетности
    • Панель управления, KPI для CFO
    • Рабочий капитал
    • Финансовая отчетность по МСФО
    • Платежный календарь / прогнозный ДДС
  • Продажи
    • Анализ данных из CRM
    • Планирование
  • Склад
  • Категорийный менеджмент
  • HR
  • Маркетинг
  • Внутренний аудит
  • Построение хранилища данных
  • Геоаналитика, аналитика на географической карте
  • Цепочка поставок (SCM)
  • S&OP и прогнозная аналитика
    • Прогнозная аналитика
    • Прогноз спроса на основании данных о вторичных продажах
  • Разработка стратегии цифровой трансформации
  • Сквозная аналитика
  • Process Mining
Главная » Курсы » Учебный курс Современная архитектура хранилища данных

Сравнение нескольких ETL

MS SSIS

Преимущества

  1. Встроенные возможности по запуску SQL скриптов и исполняемого кода позволяет решать сложные бизнес-сценарии.
  2. Входит в Standard Edition MS SQL Server.
  3. Надежный инструмент разработки с интуитивно понятным интерфейсом.
  4. Дает широкие возможности по переиспользованию SQL-скриптов и ранее созданных пакетов.
  5. Позволяет автоматизировать подготовку однотипных пакетов загрузки с использованием специального языка BIML, что значительно ускоряет разработку.

 

Недостатки

  1. Потребуются дополнительные лицензии, если возникнет необходимость разворачивать SSIS на отдельном сервере.
  2. SSIS работает только в среде Microsoft Windows (версия MS SQL Server для Linux не готова к промышленному использованию).
  3. SSIS может быть развернут только на базе СУБД Microsoft SQL Server.
  4. SQL server и SSIS отлично функционируют, если имеют достаточное количество ресурсов. Если вы используете виртуальные серверы и можете легко добавлять CPU / RAM / Диски, то во что бы то ни стало, соберите их вместе и управляйте ресурсами, чтобы они не мешали друг другу. Если у вас нет возможности сделать это, лучше использовать SSIS на отдельном сервере.
  5. Не всегда просто решается проблема с коннекторами к БД третьих фирм.

 

Pentaho

Преимущества

  1. Простота использования и легкость обучения. Один и самых user-friendly интерфейсов на рынке ETL/
  2. Широкие возможности по преобразованию данных, применимы для сложных аналитических сценариев.
  3. Обладает очень эффективным механизмом логирования, позволяющему получить ответ практически в любой ситуации, связанной с ошибками работы.
  4. Open source

 

Недостатки

  1. Слабое распространение и как следствие небольшое количество специалистов на рынке труда.
  2. Низкая скорость чтения файлов формата JSON.
  3. Не такой богатый набор подключений к источникам в сравнении с аналогам

Сценарии, пригодные для использования:
Когда необходимо иметь дело с любым типом СУБД, от ввода данных до загрузки данных, Pentaho работает очень быстро.
Он также имеет много Bulk load шагов. В целом Pentaho специализируется на работе с табличными данными.
 

Менее подходящие сценарии:
Когда у вас есть схемы типа «звезда» с таблицами мостов или схемами с снежинками, вам, очевидно, потребуется много дополнительной работы в Pentaho.
Кроме того, работа с файлами не самая сильная сторона данного продукта.

 

Oracle Data Integration

Преимущества

  1. Осуществляет конвертацию данных из различных источников в целевой формат с использованием разнообразных правил бизнес-логики. Интегрируется с различными СУБД, также с Hadoop, облачными сервисами, плоскими файлами, веб-сервисами и т.д.
  2. В сочетании с Goldengate может быть использован для решения задачи консолидации данных в живом окружении как средство разработки решения по конвертации данных в целевой формат.
  3. ODI может работать на любой операционной системе.
  4. Высокая скорость интеграции вновь появляющихся типов данных
  5. Гибкость, простота кастомизации, множество доступных расширений. Нет необходимости разворачивать дополнительный сервер для решения задач по преобразованию данных, т.к. использует ресурсы целевого и исходного серверов для решения задач ETL.
  6. Наличие Big data коннекторов «из коробки» в версии 11.1.1.7

 

Недостатки

  1. Все еще сложный в освоении продукт, требующий большого объема тестирования перед установкой решения в «продуктив».
  2. Первичная настройка ресурсоемкий процесс с точки зрения машинных и человеко-часов, не всегда подходит для небольших проектов.
  3. Окружение для многопользовательской разработки оставляет желать лучшего.
  4. ODI studio крайне требовательно к объему оперативной памяти.
  5. Отсутствует возможность организовать «Continuous integration», что негативно сказывается на жизненном цикле процесса разработки.
  6. Управление безопасностью реализовано крайне слабо и требует улучшения.


Apache NiFi

Преимущества

  1. Чистая и продуманная реализация концепции программирования потока данных
  2. Он не зависит от источника данных и поддерживает источники разных форматов, схем, протоколов, скоростей и размеров.
  3. Логирование абсолютно всех производимых с данными операций.

 

Недостатки

  1. Очень минималистичный интерфейс.
  2. Нет функции мониторинга / отладки в режиме реального времени со статистикой по каждой записи.
  3. Малое число CDC процессоров с открытым исходным кодом для некоторых баз данных.

 

Применение Apache NiFi оправдано для целей построение хранилища данных сопряженного с потоковой обработкой входящих данных.

 

 

 

Узнать стоимость решенияЗапросить видео презентацию

Запросить видео презентацию Запросить доступ к демо стенду online

Задать вопрос

loading...

Решения

Анализировать ФинансыУвеличивайте ПродажиОптимальный Склад и ЛогистикаМаркетинговые Метрики

Клиенты

  • akron

    Анализ исполнения бюджета движения денежных средств (расходная часть)

    Компания завершила первый этап внедрения решения бизнес-аналитики в рамках комплексной программы цифровой трансформации бизнеса. Qlik Sense объединяет данные из всех ключевых учетных и производственных систем Группы (как ERP-системыИСА, так и MES-системы) и становится важным источником информации для принятия управленческих решений в режиме реального времени. В компании успешно внедрены дэшборды для аналитики склада, финансов, закупок, дефектов производственной линии и управления целевыми ресурсами, а также работе ИТ.

  • Газпромнефть
    Единая система фрод-менеджмента - автоматизированная информационная система, предназначенная для автоматизации процесса обработки и анализа данных учета технологических и бизнес-процессов с высокими рисками нанесения ОАО «Газпром нефть» материального и/или нематериального ущерба в результате мошеннических действий в автоматизированных системах.
  • Ascott Group

    Анализ и прогнозирование продаж, анализ каналов сбыта, планирование и управление продажами, анализ эффективности маркетинговых акций.

  • InterZet

    Анализ деятельности отдела маркетинга; сегментация клиентских баз; расчет специфичных показателей эффективности деятельности компании сегмента telecom

  • Решения
    • Дистрибуция
    • Розничная торговля
    • Производство
    • Операторы связи
    • Банки
    • Страхование
    • Фармацевтика
    • Лизинг
    • Логистика
    • Медицина
    • Нефтегазовый сектор
    • Сеть ресторанов
  • Продукты
    • Qlik Sense
    • QlikView
    • Tableau
    • Microsoft Power BI
    • ATK BiView-1C Коннектор (для Qlik/Tableau/PowerBI)
    • Vizlib Qlik Sense extentions (библиотека экстеншнов)
    • NPrinting
    • Геоаналитика Qlik GeoAnalytics
    • KliqPlanning Suite
    • Qlik WebConnectors
    • QlikView R Коннектор
    • QlikView/Qlik Sense SAP Коннектор
    • Alteryx
    • Qlik Data Catalog
    • Документация ATK BiView
  • Услуги
    • Консалтинг
    • Пилотный проект
    • Поддержка
    • План обучения и сертификации Qlik
    • Бесплатное обучение
    • Учебные курсы
    • Сертификация Qlik
    • Аудит приложений
  • Курсы
    • Учебный курс по Qlik Sense
    • Учебный курс по Tableau
    • Учебный курс по Microsoft Power BI
    • Учебный курс Современная архитектура хранилища данных
    • Учебный курс Информационная грамотность
    • Учебный курс для бизнес-аналитиков
    • Учебный курс по NPrinting
    • Учебный курс по Azure Databricks
    • Учебный курс по Google BigQuery
  • Компания
    • О нас
    • Руководство
    • Новости
    • Клиенты
    • Скачать
    • Контакты
  • Функциональные решения
    • Продажи
    • Финансы
    • Склад
    • HR
    • S&OP и прогнозная аналитика
    • Внутренний аудит
    • Геоаналитика
    • Категорийный менеджмент
    • Построение хранилища данных
    • Система управления KPI и BSC
    • Управление цепочками поставок
    • Маркетинг
    • Цифровая трансформация
    • Сквозная аналитика
    • Process Mining
QlikView Partner
LinkedInYouTubeVkontakteFacebook
ООО "Би Ай Консалт",
ИНН: 7811437757,
ОГРН: 1097847154184
199178, Россия,
Санкт-Петербург,
6-ая линия В.О., Д. 63, 4 этаж
Тел: +7 (812) 334-08-01
Тел: +7 (499) 608-13-06
E-mail: info@biconsult.ru