На недавней конференции HighLoad++ Foundation 2022 мы рассказывали о создании Data Detective(DD) - собственного каталога данных Тинькофф. Тогда нам не хватило времени рассказать все, что мы хотели.
Для нас было важно сделать DD максимально гибким для любых видов метаданных с детальным lineage. Возник вопрос: как добиться универсальности инструмента?
Анастасия объяснила, как устроен DD «под капотом» и как мы воплощали наши мечты и хотелки в реальность. Мы подробно поговорим:
- о модели данных нашего каталога, благодаря которой удалось достичь гибкости;
- архитектуре продукта и ее эволюции;
- проблемах, с которыми мы столкнулись, и способах их решения.
Доклад будет полезен тем, кто уже внедрил каталог данных или думает о разработке и внедрении этого инструмента.
Дайджесты, статьи и анонсы митапов: t.me/itstinkoff
Блог на Хабре: l.tinkoff.ru/habr-tinkoff
Наши вакансии: l.tinkoff.ru/its-career