Qlever Solutions – на первом месте среди партнеров ГК Денвик! Рассказываем, в каких проектах используем Экстрактор 1С, и что нового в Релизе 3.6.x
Qlever Solutions предлагает своим клиентам Экстрактор как самое надежное и эффективное решение для автоматической выгрузки данных из 1С в проектах внедрения BI-систем и корпоративных хранилищ данных.
Для эффективного управления бизнесом важно иметь полное и актуальное представление о том, что происходит в компании. Большой объем ключевых данных о продажах, закупках, финансах и клиентах обычно хранится в приложениях экосистемы 1С.
Для аналитики все эти данные необходимо извлечь из источника 1С, и предоставить системе BI или корпоративному хранилищу данных DWH. Сложность процесса заключается в том, что 1C — закрытая проприетарная система, подключиться к которой для выгрузки данных напрямую нельзя.
Для решения задачи ГК Денвик разработали Экстрактор 1С от Денвик, который автоматизирует получение всех данных из 1С 8.2 и 8.3 и их доставку в таблицы БД ClickHouse или MS SQL без нарушения лицензионной политики 1С.
Читайте подробнее о разных способах выгрузки данных из 1С
Экстрактор 1С в BI от Денвик уже используют несколько дирекций АО МОСГАЗ (как часть корпоративной аналитической системы), ГК Галс-Девелопмент (в проекте DWH), The Act (в комплексных решениях DWH + BI), Zetter, SPAR и другие клиенты Qlever.
Лучший результат в рейтинге партнеров стал для нашей команды подтверждением профессионализма и стимулом для дальнейшего роста.
Благодарим коллег из Денвик за плодотворное сотрудничество и доверие!
Как работает Экстрактор 1С?
- Подключается к базе 1С, представляет собой Расширение к приложению 1С
- Извлекает нужные документы, справочники, регистры согласно Проекту — по настройкам, которые вы задаете для выгрузки одного или нескольких наборов данных
- Позволяет очищать данные от дублей и ошибочных значений, проводить дополнительные вычисления, шифровать информацию
- Выгружает данные в СУБД ClickHouse, PostgreSQL, Microsoft SQL
- Передает данные в DWH или BI (PIX BI, Analytic Workspace, Visiology, Power BI, Qlik Sense, Yandex Datalens, Apache Superset)
Преимущества экстрактора
- Поддерживает low-code/no-code подход, то есть позволяет решить задачи по выгрузке данных без привлечения программистов 1С, тем самым сокращая сроки и стоимость поддержки аналитического решения
- Умеет работать в регламентном режиме — осуществлять плановые настроенные выгрузки, например, каждый час
- Работает в режиме многопоточности, благодаря чему нам удалось достичь высокой скорости выгрузки даже больших объемов данных (1,3 млн записей в час)
- Поддерживает инкрементальную выгрузку — отслеживает и загружает только новые и изменённые данные из 1С
- Может трансформировать данные на лету — приведение типов, переименование полей, удаление лишнего
Подробнее о работе и возможностях Экстрактора читайте на сайте Денвик
Что нового в Экстракторе 1С? Релиз 3.6.x
Эксперты Денвик стремятся сделать свои программные продукты лучше и регулярно выпускают обновления для оптимизации и совершенствования продукта.
Расскажем кратко о свежих ключевых обновлениях в Экстракторе.
Denvic Control Center (DCC) для управления продуктами Денвик
В релизе 3.6.3.76 выпущен Denvic Control Center (DCC) — решение для централизованного управления всеми инсталляциями коннекторов от Денвик (Экстрактор 1С, Коннектор Битрикс24 в ClickHouse, Коннектор к SAP и др.) и мониторинга их работы.
DCC позволяет централизованно управлять большим количеством баз данных, в которых установлены Коннекторы, и закрывает большинство требований при выходе продукта на другие рынки.
Обладает следующей функциональностью:
- Мониторинг коннекторов
- Логирование исполнения проектов
- Сбор метаданных по коннекторам
- Оркестрация — внешнее управление исполнением проектов в коннекторах
- Формирование очереди для проектов Экстрактора 1С с помощью команды initial_project.
- Выгрузка схем данных, групп и «Снежинок» для Экстрактора 1С
DCC поставляется в рамках лицензии Enterprise или по отдельному запросу. Основными пользователями решения являются системные администраторы и технические специалисты.
В разработке функции Denvic Control Center:
- Централизованное хранение версий проектов Экстрактора 1С и их использование в качестве шаблонов для развертывания на других подключенных Экстракторах 1С
- Обновление Коннектора до нужной версии из репозитория при наличии активной лицензии
- Управление развертыванием Коннекторов
Db.Proxy.Service — сервис для работы с СУБД из 1С через http
Для организации взаимодействия Экстрактора 1С с внешними СУБД PostgreSQL, MS SQL Server, Greenplum, Oracle по http, а также для конвертации в формат Avro для выгрузки в Apache Kafka (Arenadata Streamin) в рамках релиза 3.6.1.9 выпущен proxy-cервис Db.Proxy.Service.
Db.Proxy.Service представляет собой Rest API-сервис, разворачиваемый на серверах Заказчика.
В релизе 3.6.3.76 для Db.Proxy.Service реализована поддержка SSL.
Параметры «ИсточникСобытия» и «Событие» для обработчиков
Обработчик события проекта — это предопределенный или созданный вами самостоятельно программный код, который выполняется в момент определенного события проекта.
В релизе 3.6.4.48 для обработчиков добавлены параметры:
- «ИсточникСобытия» — отражает измененный объект события
- «Событие» — идентифицирует конкретное событие
Данное усовершенствование реализовано для обеспечения точной идентификации события, вызвавшего обработчик, например, «ПередЗаписью», «ПриЗаписи» или «ПередУдалением».
Доработка позволяет инициализировать переменную «ИсточникСобытия», аналогичную параметру «Источник» из события «ПриЗаписи», в событии «ПередЗаписью». Это обеспечивает возможность сравнения с параметром «Источник» события «ПередЗаписью», что может быть полезно для отслеживания изменений объекта до и после записи.
Также реализована возможность передачи дополнительных данных из события «ПередЗаписью» в событие «ПриЗаписи» посредством дополнительных свойств объекта «ИсточникСобытия» (выступающего в роли посредника).
Детали реализации данной функциональности представлены в примере листинга обработчика регистрации изменений:
Управление ключами лицензирования — активация сервера и базы вручную
В рамках релиза 3.6.3.76 добавлена возможность активации сервера и базы вручную.
При нажатии на ссылку «Управление ключами лицензирования» разворачивается таблица серверов и баз, а также кнопки для управления:
- Обновить
- Активировать
- Деактивировать
Для активации сервера вручную необходимо нажать кнопку «Активировать» и указать имя сервера, который вы хотите активировать.
Подробную информацию о новых релизах вы можете узнать в документации Продукта
***
Экстрактор 1С в BI от Денвик — полноценное, универсальное решение для безболезненной выгрузки любых данных из 1С, которое сокращает затраты на поддержку БД и загрузку программиста 1С.
После выгрузки с помощью Экстрактора от Денвик данные можно использовать для дальнейшей аналитики и визуализации показателей эффективности продаж, маркетинга, производства и других результатов деятельности компании.
Qlever Solutions обладает одной из самых обширных в России практик разработки и поддержки BI-решений. Мы разрабатываем аналитические приложения и помогаем в интеграции систем бизнес-аналитики с внешними платформами, в том числе, с 1С.