1C+Kafka(JSON)+KafkaCut пример как работает выгрузка истории изменений в Kafka через новый объект ИсторияИзменений
Жүктеу.....
Пікірлер: 13
@user-js1zh2gk8s3 жыл бұрын
Этот кейс очень прям хорошо заходит в схему 1с - kafka - elastic, со всеми плюшками последнего ) спасибо за прикладной кейс!
@xrollup3 жыл бұрын
Просто супер! Риторический вопрос к началу ролика - неужели кто-то думает что он сможет избежать необходимости освоения инструментов работы с потоками?
@xrollup3 жыл бұрын
Алексей, подскажите пожалуйста - по несколько необычному сценарию использования Kafka - хочется изготовить хранилище для разработчиков. В которое будут литься изменения из базы 1С (справочники, документы, регистры сведений). База большая (больше 2 Тб) возникла проблема при подготовке базы для разрабов - нужна рабочая копия но не со всеми данными, а с неким "слепком" или работающей частью (разрабы раскиданы по блокам, т.е. например разрабам складской логики данные о продажах нужны лишь чуть-чуть - а вот остатки склада, да, нужны - условный пример). Вот нутром чую что Kafka ляжет в этот сценарий (книжка Стпофорда вдохновила очень). Понятно что тут нужен будет набор "сливов" с параметрами - для ролей разрабов - для направления "шлангов с данными" в пустые базы разрабов, но сомневаюсь - верна ли вообще идея. Можете прокомментировать пожалуйста?
@frostmaind
2 жыл бұрын
Смотрите в сторону zfs. У нас прод база 2ТБ+. Реплика для dev клонов, лежит на zfs и занимает 500ГБ, за счет lz4. С этой реплики сделано 8 клонов для разрабов, которые дополнительное место не требуют. Итого для 8 баз разрабов с головой хватает 1ТБ. Создание новой базы (клона) занимает 5 сек работы скрипта.
@user-tv8kh6kx1q Жыл бұрын
Какое событие в 1С срабатывает для отправки данных в KafkaCut После записи на форме?
@AlexVasilenko19774 жыл бұрын
Алексей, задний фон стоит поменять, уж очень по-домашнему ;)
@SilverbulletersOrgSocial
4 жыл бұрын
сами же просили убрать ;-)
@lordbezeus80
4 жыл бұрын
@@SilverbulletersOrgSocial Нормально всё с фоном.
@olegkopylov3486
3 жыл бұрын
Да хоть на унитазе, главное больше живых примеров
@volall4 жыл бұрын
сервис интеграции только с 1с версии 8.3.17 пока народ перейдет на нее - это несколько лет пройдет.
@volall4 жыл бұрын
Историю изменений можно организовать и через RabbitMQ + какое то хранилище ?
@SilverbulletersOrgSocial
4 жыл бұрын
Ну это же глобус который натягивается... Но если бы прямо сейчас пробовать то мы бы взяли вот это github.com/influxdata/telegraf/tree/master/plugins/inputs/rabbitmq И втыкнули бы redash.io/data-sources/influxdb
@volall
4 жыл бұрын
@@SilverbulletersOrgSocial у нас есть zabbix и там influxdb, попробую связать как выйду на работу. influxdb - неплохо смотреть и через power BI или Графана. область для экспирементов большая.
Пікірлер: 13
Этот кейс очень прям хорошо заходит в схему 1с - kafka - elastic, со всеми плюшками последнего ) спасибо за прикладной кейс!
Просто супер! Риторический вопрос к началу ролика - неужели кто-то думает что он сможет избежать необходимости освоения инструментов работы с потоками?
Алексей, подскажите пожалуйста - по несколько необычному сценарию использования Kafka - хочется изготовить хранилище для разработчиков. В которое будут литься изменения из базы 1С (справочники, документы, регистры сведений). База большая (больше 2 Тб) возникла проблема при подготовке базы для разрабов - нужна рабочая копия но не со всеми данными, а с неким "слепком" или работающей частью (разрабы раскиданы по блокам, т.е. например разрабам складской логики данные о продажах нужны лишь чуть-чуть - а вот остатки склада, да, нужны - условный пример). Вот нутром чую что Kafka ляжет в этот сценарий (книжка Стпофорда вдохновила очень). Понятно что тут нужен будет набор "сливов" с параметрами - для ролей разрабов - для направления "шлангов с данными" в пустые базы разрабов, но сомневаюсь - верна ли вообще идея. Можете прокомментировать пожалуйста?
@frostmaind
2 жыл бұрын
Смотрите в сторону zfs. У нас прод база 2ТБ+. Реплика для dev клонов, лежит на zfs и занимает 500ГБ, за счет lz4. С этой реплики сделано 8 клонов для разрабов, которые дополнительное место не требуют. Итого для 8 баз разрабов с головой хватает 1ТБ. Создание новой базы (клона) занимает 5 сек работы скрипта.
Какое событие в 1С срабатывает для отправки данных в KafkaCut После записи на форме?
Алексей, задний фон стоит поменять, уж очень по-домашнему ;)
@SilverbulletersOrgSocial
4 жыл бұрын
сами же просили убрать ;-)
@lordbezeus80
4 жыл бұрын
@@SilverbulletersOrgSocial Нормально всё с фоном.
@olegkopylov3486
3 жыл бұрын
Да хоть на унитазе, главное больше живых примеров
сервис интеграции только с 1с версии 8.3.17 пока народ перейдет на нее - это несколько лет пройдет.
Историю изменений можно организовать и через RabbitMQ + какое то хранилище ?
@SilverbulletersOrgSocial
4 жыл бұрын
Ну это же глобус который натягивается... Но если бы прямо сейчас пробовать то мы бы взяли вот это github.com/influxdata/telegraf/tree/master/plugins/inputs/rabbitmq И втыкнули бы redash.io/data-sources/influxdb
@volall
4 жыл бұрын
@@SilverbulletersOrgSocial у нас есть zabbix и там influxdb, попробую связать как выйду на работу. influxdb - неплохо смотреть и через power BI или Графана. область для экспирементов большая.