Мониторинг розничной торговли
Данные кассовых чеков ФНС: динамика цен по брендам, сетям и муниципалитетам, оборот и объёмы продаж, присутствие местных товаропроизводителей на полке.
52 категории социально значимых товаров
ГКУ «Центр цифровой трансформации РТ» · Республика Татарстан
Татсфера. Управление регионом на основе данных
Платформа полного цикла разработки аналитических решений: сбор данных с любых источников, хранение структурированных и неструктурированных форматов, разработка моделей искусственного интеллекта, обработка и визуализация в конструкторе аналитических панелей — в режиме реального времени.
130 млнкассовых чеков в месяц поступает по данным ВПД ФНС России
5,4 млрдтоварных позиций в год — чеки, выпущенные на территории республики
19 млрдзаписей в хранилище данных платформы
98,75 %удовлетворённость слушателей программы повышения квалификации
Что это
Одна платформа вместо десятка разрозненных систем
Данные органов власти РТ разрознены, доступ к ним сложен, а управленческая отчётность формируется долго. Татсфера объединяет весь путь данных — от извлечения из источника до дэшборда на экране руководителя — и поддерживает форматы CSV, JSON, XML, AVRO, ORC, Parquet и подключение к PostgreSQL, MySQL, Hive, Greenplum, Dremio и другим СУБД.
Фабрика данных
Извлечение и преобразование
Пакетный и потоковый приём данных из региональных и федеральных ИС, оркестрация процессов, каталог данных и единый бизнес-глоссарий показателей.
Apache Airflow · NiFi · SFTP · адаптер СМЭВ
Хранение
Озеро данных и аналитическая СУБД
Хранение данных в исходном формате в распределённой файловой системе и массово-параллельная обработка больших объёмов с шифрованием данных и соединений.
Apache Hadoop · Arenadata DB · Spark
Виртуализация
Данные без перемещения
Единая точка доступа к региональным данным без необходимости физически переносить их в централизованное хранилище. Доступ по JDBC/ODBC.
Dremio · Apache Drill
Каталог
Каталог данных и бизнес-глоссарий
Автоматическая классификация источников, интеллектуальный поиск по всему ландшафту, методология расчёта показателей и владелец у каждого атрибута.
Informatica EDC · Informatica Axon
Аналитика
Конструктор отчётов и DS-блокноты
Дэшборды для смартфона и больших мониторов, виджеты по прямой ссылке, выгрузка в Excel/CSV/PDF. Блокноты на Python, Java и Scala с GPU-узлами для ML.
Apache Superset · Apache Zeppelin
Инфраструктура
Оркестрация, мониторинг и ИБ
Управление кластером через веб-интерфейс, контроль жизнеспособности компонентов, ролевая модель доступа, SAML 2.0 и OpenID Connect.
Arenadata CM · Prometheus + Grafana · Avanpost FAM · ЕЦП «Ак Барс»
01
Сбор и обработка любых видов данных
Структурированные и неструктурированные данные по известным протоколам обмена; форматы CSV, JSON, XML, AVRO, ORC, Parquet.
02
Единое окно и self-service
Виртуализация данных скрывает гетерогенность источников и сложность ИТ-ландшафта — пользователь работает с данными из одной точки.
03
Модели данных «как есть» и «как должно быть»
Физическая, логическая и концептуальная модели предметных областей; формирование датасетов и дэшбордов.
04
Разработка моделей искусственного интеллекта
Блокноты на Python, Java, Scala и подключение вычислительных узлов с графическими процессорами для обучения моделей.
Прикладные решения
Реальные задачи ведомств, решённые на данных платформы
Каждое приложение собирается на конструкторе и работает с одной и той же цифрой для всех уровней управления — от министерства до главы района.
Аналитика товарных потоков
Потребность в товарах по муниципалитетам, товары, ввозимые из соседних регионов, потенциальные конкуренты, промышленные парки, меры господдержки и продовольственный баланс.
Инвестиционные ниши и рынки сбыта
Анализ обращений граждан
Тепловая карта решённых заявок, статусы и категоризация, муниципальный разрез, сезонность и прямой переход к заявке в исходной системе.
Контроль сроков и ненормативных отказов
Аналитика задолженности ЖКХ
Тепловая карта долга по муниципалитетам и управляющим компаниям, динамика начислений и оплат по месяцам, разрезы до дома, лицевого счёта и услуги.
По данным ГИС МЖФ РТ
Доступность электронных талонов
Анализ электронной очереди здравоохранения: нехватка специалистов по учреждениям, недоступные для населения услуги, контроль своевременности размещения талонов.
Формат «Было / Стало»
Дэшборд Главы района
Рабочее место руководителя: здравоохранение, торговля, туризм, обращения жителей, ЖКХ и социально-экономическое развитие — на одном экране.
6 доменов · «одна и та же цифра»
Мониторинг земельных отношений
Отображение информации с координатной привязкой: кластеры, точки и полигоны на картографической подложке для управления земельным фондом.
Геовизуализация на подложке
Интеллектуальный анализ процессов
Process Mining услуги «Установление статуса многодетной семьи» по всем муниципалитетам: где время оказания выше среднего и на каких этапах теряется время.
98 % времени — этап «Проверка заявления»
Мониторинг цен
Динамика потребительских цен по регионам ПФО и муниципалитетам с разрезом по категориям — от продовольственных до непродовольственных товаров.
Обновление данных — ежедневно
Ценность для региона
Что получает государство, работая на данных
Татсфера — это «данные как услуга»: пользователь быстро получает доступ к данным, анализирует их и извлекает полезную информацию — без запросов, согласований и ручных выгрузок.
01
Единое окно доступа
Разрозненные данные ИС республики и федеральных систем — из одной точки, в режиме реального времени.
02
Скорость отчётности
Управленческие отчёты формируются конструктором, а не ручной обработкой выгрузок.
03
Снижение затрат
Общая инфраструктура вместо дублирующих хранилищ в каждом ведомстве.
04
Защищённость данных
Ролевая модель, минимизация полномочий, хеширование паролей, логирование всех действий.
05
Интеграция и ИИ
Совместимость с технологиями искусственного интеллекта и открытый стек для сторонних команд.
06
Люди и компетенции
Центр компетенций по управлению данными: обучение госслужащих, архитектурный надзор, каталогизация.
Центр компетенций по управлению данными
На базе ГКУ «Центр цифровой трансформации» сформирован Центр компетенций, который сопровождает ведомства на всём пути работы с данными.
- Архитектурный надзор — единые правила и стандарты данных
- Каталогизация данных — учёт и классификация источников
- Разработка прикладных решений — дэшборды под задачи ведомств
- Повышение квалификации госслужащих — обучение работе с данными
Внедрение
Как запустить прикладной проект
Технологический стек платформы открыт и стандартен: к проектам привлекаются команды из любого региона без дополнительного обучения, а конкуренция подрядчиков снижает стоимость работ.
Источники данных
Определяем перечень информационных систем и файлов, из которых собираются показатели.
Мощности и размещение
Расчёт вычислительных ресурсов и выбор площадки: облако или оборудование заказчика.
Соглашение о взаимодействии
Договорённости с поставщиками данных о составе и порядке передачи.
Пользователи и права
Круг пользователей, ролевая модель и разграничение доступа к данным.
Обучение
Подготовка специалистов: SQL, дата-лаборатория, конструктор отчётов.
Запуск в эксплуатацию
Выход приложений в эксплуатацию и передача сопровождения.
Роли в проекте: ЦЦТ РТ → функциональный заказчик → подрядчик.