Выгрузка данных из 1С Фреш: способы, ограничения и автоматизация

При работе с 1С Фреш возникает необходимость выгрузки данных — для их переноса, резервного копирования или дальнейшей обработки.
В отличие от локальных версий 1С, этот облачный сервис построен на основе технологии разделения данных по областям.

В одной конфигурации могут работать сразу несколько организаций или подразделений, при этом каждая из них видит только свою область. Такое устройство напрямую влияет на процесс выгрузки информации. Доступ к данным определяется не только выбранным способом экспорта, но и правами пользователя — без них база просто не отдаст нужные документы.

В этой статье разберем, как устроена технология 1С Фреш, какие ограничения могут возникать при выгрузке данных и с помощью чего их можно обойти.

Как устроена технология 1С Фреш

Важно различать два понятия: 1С Фреш как облачный сервис и технологию разделения данных.

1С Фреш — это платформа, которая работает по модели SaaS и позволяет использовать «1С:Предприятие 8» через браузер. В ее основе лежит механизм разделения данных, который может применяться не только в облаке, но и в локальных версиях 1С.

Суть технологии заключается в том, что данные разных организаций изолируются внутри одной базы с помощью специальных разделителей — областей данных. Для этого в таблицы добавляется служебное поле: «организация» или аналогичный идентификатор. По нему система автоматически определяет, какие записи доступны пользователю, и скрывает остальные. При этом вся информация физически находится в той же базе.

В отличие от классических механизмов ограничения доступа — RLS и других, где фильтрация задается в запросах, здесь разделение встроено на уровне самой структуры данных. Система изначально дает работать только с доступной областью информации, без необходимости дополнительной выборки. Такая архитектура обеспечивает стабильную работу сервиса даже при большом количестве пользователей.

Как устройство технологии 1С Фреш влияет на выгрузку данных

Архитектура 1С Фреш позволяет нескольким организациям работать в одной системе и не пересекаться друг с другом по данным. При этом доступ к информации всегда определяется областями данных и правами пользователя. Если у него есть доступ к одной области, он сможет получить информацию только из нее. Данные из других областей система ему просто не покажет. Поэтому для 1С Фреш действует базовый принцип: нет прав — нет данных.

Этот принцип распространяется на любой способ выгрузки — через интерфейс, отчеты, API или программные инструменты.
И именно из него вытекают основные ограничения:
— нельзя получить все данные без расширенных прав;
— сложно собрать информацию по нескольким организациям в едином виде, если она распределена по областям;
— при автоматизации требуется дополнительно учитывать модель доступа и структуру данных.

Поэтому стандартной выгрузки из 1С Фреш на практике часто недостаточно. А ее ограничения связаны не столько с инструментами экспорта, сколько с самой архитектурой системы.

Способы выгрузки данных из 1С Фреш и их ограничения

В 1С Фреш для выгрузки данных существует несколько способов. Формально все они позволяют получать информацию из системы, но в большинстве случаев имеют ограничения, которые усложняют работу с данными.

Способ	Как работает	Ограничения
Excel / отчеты	Пользователь формирует отчет или список в интерфейсе 1С и выгружает его в Excel	данные нужно выгружать вручную; нельзя автоматически обновлять выгрузку; при каждой выгрузке приходится формировать полный объем данных; возможны дубли и потеря изменений при повторной выгрузке
Универсальный отчет	Встроенный инструмент 1С, который позволяет выбрать объекты или периоды и сформировать по ним выгрузку	нет инкрементальной выгрузки — получения только новых или изменённых данных, нельзя отслеживать изменения; при регулярной выгрузке могут возникают дубли; высокая нагрузка на систему при больших объёмах информации — снижается скорость получения данных
OData / API	Система предоставляет доступ к данным через интерфейсы для интеграции с внешними сервисами: BI, хранилища данных и другие	нельзя формировать произвольные выборки и запросы, в том числе сложные выражения и разыменование; при отсутствии фильтров данные каждый раз извлекаются полностью, а их настройка требует дополнительной разработки; не отслеживаются изменения данных, из-за чего при регулярной выгрузке приходится повторно загружать большие объемы информации. Например, за несколько месяцев; при больших объемах выгрузки снижается стабильность: OData не справляется с крупными выборками и может завершаться с ошибками; для организации доступа требуется публикация базы в веб-среде
Программные способы	Разрабатывается собственный код для получения данных из системы	сложная реализация; нужно учитывать архитектуру и доступы; высокая стоимость разработки и технической поддержки

Ни один из способов не позволяет удобно получать информацию для аналитики, интеграций и регулярной выгрузки. Приходится или мириться с ограничениями или выстраивать дополнительные процессы ее получения и обработки.
На практике это приводит к тому, что по мере роста задач такие инструменты перестают справляться с требованиями бизнеса.

Как обойти ограничения стандартной выгрузки данных

Из ограничений стандартных способов выгрузки становятся понятны требования к процессу получения данных:
— поддерживать инкрементальную выгрузку — передавать только новые и измененные записи, а не весь массив целиком;
— выгружать информацию выборочно: по объектам, периодам или организациям, с возможностью гибко задавать параметры выборки;
— получать ее автоматически по расписанию;
— сохранять историю изменений данных;
— предоставлять простой и понятный интерфейс для настройки и поддержки процессов выгрузки без сложной доработки;
— исключать дубли и потери изменений при регулярной выгрузке.

Обеспечить: согласованность, консистентность, целостность, непротиворечивость и прослеживаемость данных.

Решить эти задачи позволяют специализированные инструменты.
Один из них — Экстрактор 1С.
Это решение для автоматического извлечения данных, передачи их во внешние системы для аналитики и интеграций.

Экстрактор учитывает особенности архитектуры разделённой базы 1С Фреш:
— работает с областями данных и правами доступа;
— позволяет выгружать все доступные данные — если у пользователя есть соответствующие права.

Экстрактор снимает ограничения стандартных способов выгрузки данных. Вместо ручного экспорта, разрозненных отчётов или собственной разработки кода пользователь получает автоматизированный процесс извлечения данных. Результат выгрузки можно использовать вне 1С — для анализа, построения отчётности и сопоставления с данными из других систем, например CRM или веб-сервисов.

Демонстрация работы Экстрактора 1С

Инструмент для автоматической выгрузки данных из 1С Фреш

Экстрактор 1С — это инструмент, который снимает основные ограничения работы с данными в 1С:Фреш и делает их готовыми для аналитики и интеграций.

Он обеспечивает:
— автоматическую выгрузку только новых и измененных данных и их обработку в многопоточном режиме;
— контроль целостности информации, исключение дублей за счет их нормализации при загрузке;
— выполнение выгрузки по расписанию без участия пользователя, а также запуск через REST-сервис;
— извлечение информации с учетом прав доступа и структуры разделенных данных, в том числе выгрузка из нулевой области;
— автоматическое создание необходимых структур данных в системах-приемниках.

Если данные в BI отстают или не сходятся — проблема почти всегда в выгрузке из 1С.

Разберём на вашем примере и покажем:
— где “ломается” выгрузка из 1С
— какие данные теряются
— как это исправить без ручных процессов

Найти проблему в данных

Автор статьи:

Игнатова Ольга

Контент-маркетолог

Контент-маркетолог линейки инфраструктуры Denvic Tools

Редактор статьи:

Сидоров Александр Интернет-маркетолог

Продуктовый маркетолог линейки инфраструктуры Denvic Tools, event-маркетолог

Возникли вопросы?

Напишите нам — мы подскажем и поможем подобрать лучшее решение под вашу задачу.

Оставьте заявку

Другие статьи

Все статьи

Как точно считать маржу по товарам и каналам: аналитика 1С без искажений

В статье разбираем, как перейти к точной аналитике по SKU и каналам, учесть все расходы и получить реальную картину прибыли. Показываем а...

Подробнее

Миграция данных 1С без остановки бизнеса: как спроектировать поэтапный переход и не потерять данные

Почему миграция превращается в итерационный процесс и как спроектировать переход с параллельной работой двух контуров? В статье — для ИТ-...

Подробнее

Аналоги Informatica: как выбрать ETL‑инструмент под реальные задачи бизнеса

Когда enterprise‑платформа избыточна, а когда её с успехом заменяют визуальные ETL? Разбираем классы инструментов, критерии выбора и прим...

Подробнее

Эффективная миграция данных 1С: методики, инструменты, кейсы

Разбор профессиональной методики миграции данных 1С:Документооборот: подготовка базы, перенос данных между версиями и конфигурациями,...

Подробнее

Экстрактор 1С и ATK BIView: технологическое сравнение коннекторов для BI

В статье подробно описывается архитектура работы коннектора Экстрактор, его возможности интеграции с BI-платформами, особенности работы с...

Подробнее

Все статьи

Назад к списку

Выгрузка данных из 1С Фреш: особенности технологии, ограничения архитектуры и способы их обхода

Как устроена технология 1С Фреш

Как устройство технологии 1С Фреш влияет на выгрузку данных

Способы выгрузки данных из 1С Фреш и их ограничения

Как обойти ограничения стандартной выгрузки данных

Инструмент для автоматической выгрузки данных из 1С Фреш

Если данные в BI отстают или не сходятся — проблема почти всегда в выгрузке из 1С.

Возникли вопросы?

Другие статьи