Как работает Asset selection в Dagster?

Asset selection в Dagster позволяет запрашивать и просматривать активы внутри графа lineage данных. docs.dagster.io Можно выбирать восходящие и нисходящие уровни графа, использовать фильтры для сужения выбора и функции для возврата корневых или конечных активов заданного выбора. docs.dagster.io

С помощью Asset selection можно: docs.dagster.io

• выбрать набор активов для просмотра в интерфейсе Dagster; docs.dagster.io
• определить задачу на Python, ориентированную на выбор активов; docs.dagster.io
• перечислить или материализовать набор активов с помощью CLI Dagster. docs.dagster.io

Некоторые особенности работы Asset selection:

• Выбор одного актива. master.dagster.dagster-docs.io Для выбора используется ключ актива. master.dagster.dagster-docs.io
• Выбор активов с несколькими компонентами ключа. master.dagster.dagster-docs.io Если ключ содержит несколько компонентов, например префикс, между ними нужно вставить символы слеша (/). master.dagster.dagster-docs.io
• Выбор нескольких активов. master.dagster.dagster-docs.io Для выбора используется список ключей активов, при этом активы не должны зависеть друг от друга. master.dagster.dagster-docs.io
• Выбор всех восходящих зависимостей. master.dagster.dagster-docs.io Чтобы выбрать актив и все его восходящие зависимости, перед ключом актива в запросе нужно добавить символ звёздочки (|*). master.dagster.dagster-docs.io

Пользователь

Время добавления