Denvic tools: режем косты на data-driven
Рост объемов данных компаний требует повышения цифровой зрелости.
Особенно остро эта проблема проявляется у организаций, работающих с 1С ERP и BI системами, а также с большими объемами информации.
Вы когда-нибудь задумывались, почему компании с одинаковыми ресурсами принимают решения с разной скоростью? Почему одни успевают адаптироваться к рынку за считанные дни, а другие тратят недели и месяцы — и все равно отстают? Ответ часто скрыт не в самих данных, а в разрозненности систем и в методиках обработки данных.
Проблемы: сложные интеграции, устаревшие механизмы и неконтролируемый рост TCO («total cost of ownership», «совокупная стоимость владения»).
Количество задач по работе с данными растет, но строятся они преимущественно на::
- скриптах внутри 1С;
- пакетах SQL-запросов «вручную»;
- самописных выгрузках и загрузках;
- сторонних разрозненных инструментах без общего управления.
Отсюда — типичные трудности, которые фиксируют ИТ-департаменты:
- Несогласованность и разрозненность данных
Управленческая отчетность опаздывает, собирается из разных источников, а данные приходится собирать вручную. - Ненадежность процессов работы с данными
Скрипты «падают», их сложно поддерживать, изменения структуры данных источников ломают всю дальнейшую цепочку обработки данных. - Высокая стоимость сопровождения
Каждая правка в обработке данных требует привлечения разработчиков — TCO растет пропорционально количеству потоков/треков данных. - Отсутствие единого контроля
Отсутствие контроля метаданных информационных систем, полноценного логирования и своевременных уведомлений. - Зависимость от отдельных специалистовв
Знания о логике хранения и преобразования данных концентрируются в руках нескольких сотрудников.
Проект должен оставаться полностью управляемым и легко передаваться новому специалисту без остановок и нарушений работы.
Вам знакома эта ситуация ?
Тогда Вы точно понимаете, насколько важны сокращение времени реализации проектов и снижение совокупной стоимости владения (TCO) для руководителей подразделений и владельцев бизнеса. Это обеспечивается с помощью интуитивно понятных инструментов визуального программирования, которые легко передаются между специалистами и работают в тесной интеграции, обеспечивая целостность и управляемость процессов.
Экосистема в IT представляет собой совокупность информационных систем, сервисов, данных и технологических решений, которые взаимодействуют и функционируют как единое целое.
В случае с нашим программным продуктом — экосистема подобно классическому пониманию, является слиянием нескольких продуктов, каждый из которых решает локальную задачу: по извлечению, трансформации, загрузке данных, реализует единый стандарт работы с данными, оркестрацию процессов, шлюз информационной безопасности.
Решение: low-code-экосистема управления данными «Denvic Tools»
Компания «Денвик Аналитика» разработала единый набор инструментов, которые решают все ключевые задачи по работе с данными — от извлечения из 1С до построения аналитических витрин.
Экосистема объединяет:
- Экстрактор 1С — инструмент для быстрой, безопасной и эффективной выгрузки данных из любых конфигураций 1С.
- Denvic Visual Transformer (DVT) — визуальный инструмент для построения, настройки и оркестрации процессов трансформации данных.
- Инжектор 1С — low-code продукт, для быстрой загрузки данных в 1С, обеспечивающий безопасность работы.
- Коннектор Bitrix24 — асинхронная выгрузка объектов CRM в хранилище.
- Denvic Control Center (DCC) — единый центр управления, мониторинга и аудита.
Платформа включена в реестр отечественного ПО.
| | Мы создали не набор точечных скриптов, а экосистему: каждый компонент решает свою задачу и работает в едином управляемом контуре, — подчеркивает Денис Смирнов, генеральный директор «Денвик Аналитика». | |
Архитектура экосистемы
Ниже — основные компоненты и их функциональные роли.
Экстрактор 1С — гибкая и быстрая выгрузка любых данных из 1С во внешнюю базу данных
Программное решение для быстрой, безопасной и автоматической выгрузки данных из систем 1С или Excel в внешние базы данных и хранилища.
Оно позволяет компаниям получать актуальные данные без привлечения программистов, обеспечивая структурированную информацию для дальнейшего анализа и визуализации.
Полученные данные можно использовать для анализа в BI-системах: Yandex Datalens, Power BI, Visiology, Fastboard, Pix, AW, ArenaData, Loginom и других.
Инструмент встраивается в 1С и обеспечивает:
- Поддержку всех популярных конфигураций 8.2 / 8.3 (включая сильно кастомизированные);
- Многопоточную выгрузку больших объемов;
- Инкрементальность — выгружаются только изменения;
- Полную безопасную изоляцию базы 1С;
- Передачу данных в ClickHouse, PostgreSQL, MS SQL;
- Использование как on-premise, так и в облаке.
- Данные в СУБД можно использовать для отслеживания показателей бизнеса и построения любых отчетов в BI-системах
Пример использования:
Компания ведет учет в 1С (ERP/УТ/КА) и использует BI-систему для управленческой аналитики.
Экстрактор 1С:
- автоматически выгружает изменения по продажам, складам и финансам в PostgreSQL или ClickHouse;
- обновляет данные каждые 5–15 минут без блокировок 1С;
- BI-система (Power BI / Yandex DataLens / Visiology и др.) строит дашборды по выручке, маржинальности и остаткам в режиме near-real-time.
Результат: руководство получает актуальные показатели бизнеса, аналитика масштабируется, а 1С остается учетной системой, а не источником отчетной нагрузки.
Экстрактор 1С необходим, если:
- Вы используете внешние BI-системы при работе с 1С;
- Вы хотите получать данные 1С без участия программиста;
- Вы нуждаетесь в актуальных данных в любой момент времени;
- Вам нужно быстро доставать большие данные из 1С.
| | Экстрактор 1С обеспечивает доставку данных в приемнике без потери их целостности. Для бизнеса это уменьшает риски, связанные с принятием решений на основе неверных данных, — Степан Пыстин, технический директор. | |
Denvic Visual Transformer: визуальные трансформации, которые видны и эффективно работают
DVT — low-code ETL-сервис для визуализации данных. Он позволяет настраивать выгрузки и трансформации из любых источников через последовательность шагов: подключение, чтение таблиц, джоины, фильтры, агрегирование, вычисляемые поля и выгрузка.
Что делает: «готовит» данные для последующих потребителей: дата-аналитиков, маркетологов, CTO, ML-инженеров, логистов и многих других.
Пример: объединяем таблицы с заказами и товарами, округляем даты до недельного периода, рассчитываем валовую прибыль и выгружаем готовую витрину. Все делается визуально: блоки соединяются стрелками, формулы добавляются как «кубики».
Представьте, что трансформация данных — это как игра в конструктор: блоки, стрелки, фильтры, агрегаты, вычисляемые поля.
Эффект: аналитик без навыков программирования может построить отчет за 10-15 минут вместо нескольких дней.
Такой подход дает три практических преимущества:
- Прозрачность: любой этап трансформации виден и документирован;
- Скорость: правки делаются визуально, без разработки и необходимости вмешиваться в код и технические нюансы;
- Поддерживаемость: аналитик видит всю логику и может быстро воспроизвести проблему.
Для компаний это означает:
- отсутствие зависимости от разработчиков;
- быстрое внесение изменений;
- полную прозрачность логики.
| | DVT визуализирует процесс преобразования данных, позволяя контролировать промежуточные результаты и снижать затраты на эксплуатацию, — поясняет Степан Пыстин (технический директор компании Денвик Аналитика). | |
Практический пример: объединение таблиц по коду товара, округление дат, расчет валовой прибыли и выгрузка витрины в ClickHouse — все выполняется в интерфейсе DVT без единой строки кода.
Инжектор 1С — загрузка данных в 1с без программирования
Инжектор обеспечивает корректную загрузку объектов в базу 1С с предварительной проверкой их существования.
В процессе загрузки автоматически выполняется обновление уже имеющихся экземпляров и создание отсутствующих объектов.
Контроль структуры данных и сценариев загрузки осуществляется на стороне Инжектора, что гарантирует целостность данных, соответствие метаданным 1С и предсказуемость процесса интеграции.
Схема решения:
Поддерживает:
- загрузку документов, справочников, движений;
- автоматическое сопоставление элементов;
- каскадное создание недостающих объектов;
- гибкие правила проверок;
- работу по расписанию.
Сценарии работы гибкие: ручной запуск, по расписанию или событийный.
Здесь мы сокращаем операционные затраты за счет автоматизации ввода данных в 1С.
Загрузка выполняется централизованно и корректно, без ручных операций, что снижает трудозатраты сотрудников, ускоряет обработку данных и минимизирует риски ошибок, связанных с человеческим фактором.
Что делает: отправляет подготовленные данные в 1С, соблюдая все правила и структуру.
Как работает Инжектор 1С:
Хранилище (ClickHouse / PostgreSQL) → Инжектор 1С → 1С
Пример: Закрытие периода и расчет себестоимости выполняются за пределами 1С на данных, предварительно выгруженных Экстрактором.
Полученные результаты затем загружаются обратно в 1С в виде готовых проводок, что снижает нагрузку на систему и ускоряет выполнение регламентных операций.
Простая аналогия (IT): Расчеты выполняются на отдельном вычислительном сервере, оптимизированном под аналитику (DVT), а Инжектор выступает как надежный деплой-механизм: он аккуратно и контролируемо переносит готовые результаты в продуктивную систему (1С), не перегружая ее и не нарушая целостность данных.
Простая аналогия (производственная): Себестоимость рассчитывается в отдельном расчетном цехе, где есть все ресурсы для сложных вычислений. Инжектор затем доставляет в основное производство уже готовые полуфабрикаты — точные и проверенные проводки, — чтобы основная линия (1С) работала быстро и без простоев.
Эффект: нет ручного копирования, ошибки сведены к нулю.
Области применения Инжектора 1С:
- Переход со старой конфигурации (8.2 УТ10) 1C на новую (8.3 УТ11);
- Переход с импортозамещенной системы (SAP) на 1С;
- Постоянная интеграция внешней ИС с 1С (СКУД, MES, WMS, Сайт и др.);
- Сверка данных Источника с 1С и корректировка данных на стороне 1С (например Бух и УТ).
- Инструмент востребован при миграциях (УТ10 → УТ11, SAP → 1С), интеграции с внешними сервисами, сверках.
Коннектор Bitrix24 — управляемая выгрузка CRM-данных
Инструмент для быстрой и автономной (без привлечения программиста) выгрузки данных из Bitrix24 в ClickHouse, MySQL и PostgreSQL для построения отчетности и аналитики на основе CRM-данных.
Все ключевые сущности Bitrix24 — задачи, пользователи, подразделения и другие объекты — синхронизируются с внешними БД, обеспечивая прозрачность, контроль и воспроизводимость загрузок.
Благодаря коннектору данные не потеряются, а процессы станут управляемыми и прозрачными.
Инструмент осуществляет извлечение данных из Bitrix24, включая основные сущности: задачи, пользователей, подразделения и другие объекты CRM, с последующей передачей данных во внешние хранилища.
Обеспечивается регулярная синхронизация бизнес-сущностей Bitrix24 с целевыми базами данных и аналитическими структурами, формируемыми за пределами Bitrix24.
Пример: В компании выстроен контур управленческой аналитики для продуктовой и операционной команд. Коннектор автоматически и без написания кода извлекает бизнес-сущности — сделки, лиды, задачи, сотрудников и подразделения — из прикладных систем.
При этом коннектор не выполняет трансформацию и не передает данные напрямую в DVT, а отвечает исключительно за корректное, полное и воспроизводимое получение данных.
Это похоже на архитектуру современного дата-центра: коннекторы играют роль специализированных сборщиков телеметрии и журналов событий, которые аккуратно и без искажений снимают данные с рабочих систем и складывают их в надежные хранилища и очереди.
Коннектор позволяет в режиме low-code / no-code организовать регулярную выгрузку ключевых бизнес-сущностей — сделок, лидов, задач, сотрудников и организационной структуры — с гарантией целостности и трассируемости данных. Полученная информация централизованно хранятся в СУБД, очередях и других системах хранения.
Denvic Control Center — центральный «командный пункт» экосистемы
DCC — «командный центр» платформы, где регистрируются все инсталляции, проекты и события.
Функции:
мониторинг всех проектов и потоков; детальная система логов; аудит изменений; управление версиями (version control); интеграция с Airflow, Loginom, Spark; сбор метаданных 1С для каталога данных.
DCC позволяет ИТ-службе управлять всей экосистемой как единым механизмом.
Бизнес-эффект и экономические результаты
По данным компании, внедрение экосистемы сокращает:
- время подготовки отчетности — в 3–5 раз;
- количество инцидентов, связанных с данными — до 40%;
- расходы на сопровождение — на 30–50%;
- зависимость от 1С-разработчиков — в разы.
Пример расчета:
Организация с 50 сотрудниками экономит ~80 часов аналитического времени в месяц, что эквивалентно 80 000 руб. только на одном потоке данных.
Ключевые сценарии применения:
- построение витрин данных для BI;
- миграция с устаревших конфигураций 1С на соверменные;
- консолидированная отчетность;
- интеграции «много источников — много получателей»
- импортозамещение зарубежных ERP систем
- интеграция 1с с произвольными информационными системами.
Планы развития платформы
В дорожной карте компании:
- расширение DVT до полноценного визуального ETL-оркестратора;
- параллельные вычисления и распределенная обработка;
- развитая подсистема Data Quality;
- интеграция с отечественными облаками;
- инструмент визуального мониторинга SLA данных.
О компании «Денвик Аналитика»
«Денвик Аналитика» — российский разработчик решений для управления данными и интеграций между 1С, BI и корпоративными системами. Все продукты включены в реестр отечественного ПО, поддерживают работу on-premise и в облачных инфраструктурах.
Компания специализируется на построении аналитических платформ, хранилищ данных, ETL-процессов и автоматизации потоков данных для организаций среднего и крупного бизнеса.
Страница продукта Экстрактор 1С
Страница продукта DVT (Visual ETL)









