Бизнес глоссарий
- Добавлено предупреждение при попытке отредактировать не последнюю версию термина Глоссария
- Доработан функционал сравнения черновика термина с оригиналом, теперь сравнение отображается при попытке согласовать термин Глоссария по стандартному/быстрому процессу
- В контекстное меню черновика добавлена функция актуализации, которая обновляет дату и время последней активности по черновику. Функция доступна только автору черновика
- Исправлена проблема обработки спецсимволов при поиске терминов Глоссария и объектов универсальных реестров
- Исправлена проблема при расчёте полного пути у терминов Глоссария
Архитектурные изменения
- Изменено отображение пользовательских полей с типом Boolean, теперь они выравниваются по левому краю в фильтрах, форме и на странице термина Глоссария, ранее они отображались по центру
Оптимизация
- Исправлена проблема при удалении обратной связи между объектами универсальных реестров
Бизнес глоссарий
- Исправлено отображение связанных с объектами универсальных реестров таблиц и терминов Глоссария
- Добавлена возможность отображения дополнительных полей (пользовательских) у каждого термина на странице фильтров по терминам Глоссария
- Добавлено отображение идентификаторов терминов при создании связи между терминами Глоссария
- Исправлена работа фоновой задачи по расчёту полного пути иерархии для терминов Глоссария
Каталог данных
- Исправлено закрытие формы после успешного создания коннектора к БД
Архитектурные изменения
- Добавлено дополнительное логирование для всех фоновых задач, логи записываются в БД DataGovernance и Каталога данных
- Задача рассылки по неактуальным черновикам зарегистрирована и теперь доступна в панели администратора
Оптимизация
- Исправлено отображение обратных связей между объектами универсальных реестров
- Исправлена обработка иерархии при импорте терминов Глоссария и объектов универсальных реестров
- Исправлено автообновление поля “Дата последней активности в черновике” при прохождении черновиком процесса согласования
- Исправлена валидация email контактов при импорте объектов универсальных реестров
Бизнес глоссарий
- Исправлено отображение связей терминов Глоссария с объектами универсальных реестров
- Исправлена ошибка при импорте терминов Глоссария при ситуациях, когда в приложении настроены одноимённые пользовательские поля для разных реестров
- Исправлена работа фильтров при экспорте терминов Глоссария. Ранее фильтры работали при экспорте работали иначе чем при фильтрации списка терминов и результат экспорта отличался от результата фильтрации списка терминов
- Исправлен импорт/экспорт объектов универсальных реестров и терминов Глоссария. Ранее в поле Родительский объект экспортировался не полный путь по родителям, а также полный путь не учитывался при импорте
Каталог данных
- Добавлены дата и время сбора аналитик для каждой таблицы Каталога данных
Архитектурные изменения
- Добавлена возможность удалять уведомления с использованием фильтра по дате (от и до)
- Исправлено создание нового пользовательского поля в панели администратора, ранее интерфейс не позволял создать пользовательское поле без группы, её можно было удалить только при повторном редактировании настроек пользовательского поля
- Добавлено поле Дата и время последней активности для черновиков, а также добавлена задача на рассылку авторам не актуальных черновиков электронных писем с просьбой завершить работу с черновиком. После установки релиза задача требует настройки в панели администратора
Оптимизация
- Исправлена работа валидатора уникальности пользовательского поля при работе с черновиком. Ранее при валидации не исключался редактируемый объект, что приводило к ошибке валидации
- Исправлено отображение должности пользователя в блоке комментариев
Бизнес глоссарий
- Добавлена возможность дублировать пользовательские поля на основной панели термина Глоссария (под названием)
- Добавлена возможность осуществлять фильтрацию терминов Глоссария по пользовательским полям с пустым значением
- Добавлена регулярная задача для расчёта полного пути термина Глоссария. Задача рассчитывает полный путь по родительским терминам и по категориям и записывает результаты в соответствующие поля в таблице терминов в БД
- Удалена кнопка Сохранить и согласовать из формы редактирования черновика термина Глоссария/объекта универсального реестра. Вместо неё в контекстном меню черновика есть кнопка “Быстрое согласование”
Архитектурные изменения
- Добавлена возможность создать пользовательское поле с валидацией уникальности в рамках реестра
- Добавлена возможность создать не редактируемое пользовательское поле. Стандартный пользователь может единожды задать значение для поля. В дальнейшем редактировать поле может только Администратор
- Добавлен валидатор, не позволяющий добавить более одного поля с одинаковыми бизнес названиями в один реестр
- Категории и объекты универсальных реестров добавлены в Административную панель
Каталог данных
- Добавлен валидатор уникальности для сущности “Таблица” Датакаталога для избежания ситуация дублирования таблиц при сканировании коннектора к БД
- Исправлено отображение примера данных таблицы Каталога данных в случаях, когда в таблице есть колонки, содержащие данные типа json
- Исправлено отображение страницы при переходе на крайние правые вкладки страницы таблицы Каталога данных
- Исправлено изменение статуса задачи на сканирование коннектора к БД в реальном времени при запуске задачи и при редактировании задач
- Исправлено удаление задачи на сканирование коннектора к BI
- Исправлена работа иерархии коннектора к БД когда пользователь находится на вкладке “Задачи на анализ” на странице коннектора к БД
- Исправлено редактирование владельцев и ответственных за коннектор к БД
- Исправлена работа задач на сканирование таблиц и колонок коннектора к ClickHouse
- Исправлено автозаполнение полей Владельцы и Ответственные при открытии формы редактирования коннектора к БД
Оптимизация
- Исправлен поиск S2T
- Исправлена работа поиска и фильтров по Глоссарию и Универсальным реестрам в случаях передачи пустых параметров в API
- Исправлено отображение кнопки “Раскрыть” в иерархии универсальных реестров. Ранее кнопка могла отображаться при отсутствии дочерних элементов
- Исправлен текст ошибки валидации, которая возникает при попытке импортировать объект универсального реестра из Excel с указанием несуществующего пути по родительским объектам
- Исправлена визуальная часть DataLineage по таблице Каталога данных. Скорректированы стили, исправлен переход на таблицу по прямой ссылке, исправлена проблема не читаемости DataLineage из-за невозможности приблизить рабочую область
- Исправлена подсветка активного универсального реестра, в котором на текущий момент находится пользователь
- Исправлена работа иерархичного фильтра по категории для объектов универсального реестра. Теперь для выбора доступны только категории реестра, объекты которого необходимо отфильтровать
- Исправлена работа иерархичного поля выбора родительской категории в форме создания/редактирования категории и объекта универсального реестра. Теперь для выбора доступны только категории/объекты реестра, в котором производится создание/редактирование
- Исправлено отображение связей термина с отчётами и с таблицами Каталога данных в случаях, когда автор связи с таблицей/автор отчёта неизвестен
- Исправлена работа переключателя “Показать удалённые объекты” на странице универсального реестра
- Исправлено отображение пользовательских полей без группы на странице объекта универсального реестра
- Исправлена “бесконечная загрузка”, возникающая при ошибках валидации в Глоссарии/универсальных реестрах
- Исправлена работа кнопки “Сохранить и согласовать” в форме создания/редактирования термина Глоссария/объекта универсального реестра
- Оптимизирован метод сбора размеров таблиц для коннектора Greenplum
Список изменений:
- Добавлен функционал конструктора реестра объектов, позволяющий создавать необходимые реестры (процессов, интеграций и т.п) со своей структурой, аналитикой, воркфлоу согласования и возможностью настройки сквозных связей с другими реестрами объектов УД.
- Добавлен новый тип коннекторов (брокер сообщений) в Дата каталог – Apache Kafka.
- Добавлена возможность дополнить страницу схемы коннектора к БД в Датакаталоге необходимой аналитикой (работает по аналогии с созданием полей в Бизнес-глоссарии)
- Большое количество исправлений по интерфейсной части: скорректирована иерархия в глоссарии, добавлено округление размеров таблиц и количества строк в таблицах для упрощения восприятия интерфейса Дата каталога, а также переработан сбор размеров таблиц.
- Реализован функционал парсинга скриптов для построения DataLineage
- Доработана визуализация DataLineage в каталоге данных: добавлены фильтры, возможность экспорта DL, переход на карточку объекта из DataLineage
Список изменений:
1. Добавлен коннектор к Форсайт.
2. Список модулей системы в “шапке” интерфейса Глоссария/Датакаталога/Реестра запросов заменён на слайдер со списком модулей.
3. Вкладки “Описание” и “Основная информация” на странице термина Глоссария были объеденены в единый раздел.
4. Добавлена возможность изменять расписание любых регулярных задач в системе через панель администратора.
5. Добавлена возможность скачать шаблон для импорта справочника для справочного параметра в Реестре запросов.
6. Добавлены инструкции по работе с интерфейсом Реестра запросов, они доступны на главной странице интерфейса.
7. Удалена возможность удалить регулярную задачу на анализ коннектора к БД/BI во время выполнения данной задачи.
8. Исправлена ошибка профилирования в коннекторе ClickHouse.
9. Исправлен импорт справочника для справочного параметра в Реестре запросов.
10. Исправлен “сброс” активной вкладки на странице соединения к БД при обновлении страницы.
11. Исправлено отображение количества строк по таблице, ранее если значение не определено то отображалась строка “undefined”.
12. Исправлено отображение истории запусков задачи на анализ для коннекторов к БД/BI.
13. Исправлена подсветка активного элемента в иерархии коннектора к БД.
14. Добавлена кнопка “Домой” в левую панель интерфейса страницы коннектора к БД. Кнопка позволяет вернуться со страницы схемы/таблицы на страницу коннектора.
15. Исправлен переход на дашборд Apache Superset при клике по его ссылке на его детальной странице в интерфейсе Датакаталога.
Список изменений:
1. Реализован функционал зависимых справочников в карточке объекта (появилась возможность задавать зависимости между значениями)
2. Реализована возможность каскадного удаления зависимых объектов Глоссария.
3. Значительно оптимизирована производительность блока фильтров, решены проблемы долгого ожидания результата.
4. Решены проблемы производительности глоссария при появлении очереди запросов
5. Устранен значительный объем выявленных в процессе эксплуатации проблемы
Список изменений:
- Разработан личный кабинет пользователя в RT.DG
- В Каталоге данных реализован коннектор к teradata
- В каталоге данных реализованы фильтры для сканирования метаданных источника
- Актуализирована версия UI Kita, устраняющая мелкие баги в интерфейсной части
- В глоссарии реализована возможность отображения всего списка черновиков
- Реализована возможность отправки уведомлений об изменении показателя не по каждому показателю(при активации изменения), а накопительным итогом за день/неделю
- Добавлен иерархичный виджет выбора родительской категории в форму создания/редактирования термина Глоссария
- Добавлена возможность согласования термина Глоссария без запуска процесса согласования при наличии у пользователя соответствующих прав
- Добавлена возможность добавить предустановленный фильтр по группе для опций в полях Владельцы и Ответственные в форме создания/редактирования термина.
- Добавлена возможность восстанавливать через админ панель логически удаленные объекты.
- В фильтрах глоссария добавлен иерархичный фильтр по категории
- Переработан формат логов ошибок импорта терминов Глоссария на “человекочитаемый” язык. Добавлена возможность выгрузки списка ошибок в Excel файл
- Реализована возможность настройки ADFS авторизации
Список изменений:
- Изменена всплывающая подсказка в форме создания нового отчёта, теперь вместо общего сообщения о необходимости заполнить все обязательные поля выводится перечень конкретных полей, которые осталось заполнить для сохранения формы.
- Добавлена сортировка терминов по релевантности при применении поиска в списочном виде Глоссария.
- Добавлен учёт фильтров, поиска и сортировки по релевантности при применении поиска в функцию экспорта терминов Глоссария.
- Добавлена валидация поля CSV при импорте терминов Глоссария. Ранее значение, указанное в поле CSV, не проходило валидацию на соответствие справочнику возможных значений данного поля.
- Добавлена подсказка по формату ввода имени пользователя в окне авторизации, актуально при интеграции с корпоративным LDAP.
- Добавлено формирование “обратной” связи в случае, когда от одного термина Глоссария добавляется связь к другим терминам Глоссария.
- Фильтры по пользовательским полям в списочном виде Глоссария отсортированы по алфавиту.
- Исправлена обработка пользовательских полей с типом CSV при импорте терминов Глоссария.
- Исправлена обработка дат при импорте терминов Глоссария.
- Исправлен фильтр терминов Глоссария, ранее фильтр не применялся если пользователь указывал больше одного фильтра по пользовательским полям.
- Исправлены фильтры терминов Глоссария по Владельцам и Ответственным пользователям.
- Исправлена сортировка версий в виджете версий терминов Глоссария. Ранее, в некоторых случаях, список версий выводился в некорректном порядке.
- Исправлено редактирования подключения Clickhouse в Датакаталоге, ранее интерфейс работал некорректно при возникновении такой ситуации.
- Исправлен “спам запросов” при вводе поискового запроса в списочном виде Глоссария.
- Исправлен переход на страницу термина Глоссария из результатов сквозного поиска.
- Исправлено отображение списка черновиков терминов Глоссария, ранее самые нижние черновики были недоступны для выбора.
- Исправлено обновление списка черновиков терминов Глоссария, ранее только что созданный черновик не отображался в списке черновиков.
Список изменений:
- Изменена сортировка пользовательских полей в шаблоне для импорта терминов Глоссария в соответствии с сортировкой в интерфейсе (название группы полей, порядок отображения поля).
- Исправлено наплывание текста при маленьких разрешениях экрана в таблице связей термина с таблицами датакаталога.
- Исправлены фильтры в списочном виде Глоссария.
- Редизайн списочного вида Глоссария, вместо таблицы теперь выводится список терминов.
- Добавлена возможность удалять вложения терминов Глоссария.
Список изменений:
- Исправлен фильтр S2T по источнику/приемнику.
- Удалён фильтр S2T “Есть объект в ЦХД”.
- Добавлена рассылка на участников этапа согласования черновика когда этап становится активным.
- Исправлен экспорт терминов с заполненным пользовательским полем с множественным выбором, ранее экспорт таких терминов приводил к ошибке.
- Оптимизирован реестр отчётов, ранее интерфейс зависал если в БД хранится большое количество пользователей.
- Исправлена проблема с отображением страницы термина Глоссария после добавления в него связей с другими терминами.
Список изменений:
- Исправлен экспорт терминов Глоссария с установленными фильтрами
- Исправлена ошибка при поиске в модуле S2T
- Исправлено неявное поведение интерфейса при согласовании последнего этапа в процессе согласования черновика термина Глоссария, ранее при возникновении ошибки пользователь не получал никаких сообщений.
- Добавлена рассылка на Владельцев и Ответственных за термин Глоссария при его создании/изменении/логическом удалении/физическом удалении
Список изменений:
- Добавлена группировка пользовательских полей на странице объекта данных (термин Глоссария, таблица Дата Каталога) и в форме редактирования объекта данных.
- Добавлена страница согласующего пользователя, на которой выводятся все этапы согласования, ожидающие решения от пользователя, просматривающего страницу, переход на страницу доступен из шапки интерфейса.
- Добавлена история согласования термина, доступна в виде вкладки на странице термина Глоссария, на которой отображается процесс, в рамках которого был согласован черновик текущей последней версии термина.
- Добавлен DataLineage для таблиц Дата Каталога на основе S2T.
- Исправлен ряд мелких замечаний по визуальной части.
Список изменений:
- Добавлена возможность включать/отключать возможность редактировать черновик для согласующих пользователей в рамках этапа согласования термина.
- Добавлена возможность в рамках этапа согласования указать согласующих пользователей из поля черновика/оригинального объекта, например владельцев и ответственных.
- Добавлено новое действие для согласующих пользователей в процессе согласования термина, а именно “Вернуть на этап назад”, данное действие возвращает черновик на этап назад по процессу согласования.
- Связь термина с таблицами Дата Каталога интегрирована в процесс согласования, теперь любое изменение связи термина с Дата Каталогом создаёт черновик, который в дальнейшем необходимо согласовать согласно сконфигурированному процессу.
- Изменено поведение черновика термина после его создания автором, ранее черновик сразу отправлялся на согласование, теперь автор может редактировать его неограниченное количество раз и в дальнейшем отправить на согласование, также автор может снять черновик с согласования.
- Добавлены должности согласующих в виджет согласования на странице черновика термина, а также в список ответственных и владельцев на странице термина/черновика термина.
- Добавлен DataLineage для таблиц Дата Каталога. На текущий момент заполнение связей на стороне интерфейса автоматическое путём интеграции с системами заказчика.
- Добавлена возможность редактировать состав справочников пользовательских полей в модуле Интерфейс справочников.
- Исправление ранее выявленных дефектов.
На текущий момент он установлен на контурах Росатом, Евраз, dgdemo4, dgdemo5, dgdemo7. Актуализированы сборки Росатом, Евраз и общая сборка в Нексусе.
Список изменений:
- Добавлен коннектор Clickhouse в Дата Каталог
- Интеграция Реестра отчетов и Дата Каталог, добавлена возможность привязки таблиц из Дата Каталога к отчётам из реестра DG с уточнением до конкретной колонки при необходимости, функция привязки доступна из карточки отчёта, привязанные отчёты отображаются в карточке таблицы Дата Каталога
- В карточку таблицы Дата Каталога добавлен перечень терминов, которые привязаны к ней
- В Глоссарий добавлен фильтры по пользовательским полям
- Добавлены пользовательские поля для таблиц Дата Каталога, работают по аналогии с пользовательскими полями Глоссария, но настройка осуществляется из отдельной админки, <домен>/dcadmin
- Доработан сквозной поиск, соединили сквозной поиск DG со сквозным поиском DC, теперь это единый интерфейс, переход на него доступен через кнопку в шапке интерфейса, подсветка теперь работает с учётом опечаток, ранее работала только по полному совпадению, также скорректирован переход на карточку объекта при клике по результату поиска, ранее с этим были проблемы в старой версии Дата Каталога
- Добавлена функция профилирования, доступна из карточки таблицы Дата Каталога
- В RichText редактор добавлена возможность ссылаться на термин Глоссария, работает по аналогии с функционалом отметки пользователя, для отметки пользователя используется символ @, для отметки термина используется символ #. Пока что реализовано без возможности перехода на карточку термина из описания, в котором присутствует отметка термина
- Множество мелких багфиксов, тут уже конкретно не скажу, есть отдельный файл где ведём эту информацию
- Добавлена возможность тегировать колонки таблиц Дата Каталога, в карточке Дата Каталога на вкладке с перечнем колонок добавлен признак наличия у колонки тега с закрытыми/персональными данными.