SYSTEMS_DESIGN_ONLINE Telegram 32
Выложили запись доклада Александра Шелютина на тему «4 лайфхака, которые помогут вам эффективно использовать конвейеры Airflow»

На конференции «Systems Design» Александр Шелютин, опытный Data Engineer с 6-летним стажем, рассказал о важности создания шаблонных DAG на основе конфигурационных и коллективных файлов для повышения эффективности работы с AirFlow. Он также выделил значение генерации автоматических сущностей AirFlow и создания событийных пайплайнов AirFlow.

Тайм-код доклада:
00:00 О спикере
01:09 Что такое AirFlow?
05:54 1. Создавайте шаблонные DAGи на основе конфигурационного файла
13:08 2. Создавайте шаблонные DAGи на основе коллективного файла конфигурации
18:20 3. Генерируйте автоматически, на основе сущностей AirFlow
23:45 4. Создавайте событийные (event-driven) пайплайны Airflow
29:50 В чем разница оркестрации и хореографии?
32:15 Что является событием в тестировании доменной безопасности? Почему не удавалось это сделать по расписанию?

Посмотреть можно на нашем YouTube-канале



tgoop.com/systems_design_online/32
Create:
Last Update:

Выложили запись доклада Александра Шелютина на тему «4 лайфхака, которые помогут вам эффективно использовать конвейеры Airflow»

На конференции «Systems Design» Александр Шелютин, опытный Data Engineer с 6-летним стажем, рассказал о важности создания шаблонных DAG на основе конфигурационных и коллективных файлов для повышения эффективности работы с AirFlow. Он также выделил значение генерации автоматических сущностей AirFlow и создания событийных пайплайнов AirFlow.

Тайм-код доклада:
00:00 О спикере
01:09 Что такое AirFlow?
05:54 1. Создавайте шаблонные DAGи на основе конфигурационного файла
13:08 2. Создавайте шаблонные DAGи на основе коллективного файла конфигурации
18:20 3. Генерируйте автоматически, на основе сущностей AirFlow
23:45 4. Создавайте событийные (event-driven) пайплайны Airflow
29:50 В чем разница оркестрации и хореографии?
32:15 Что является событием в тестировании доменной безопасности? Почему не удавалось это сделать по расписанию?

Посмотреть можно на нашем YouTube-канале

BY Systems Design: онлайн-конференция по проектированию информационных систем для бизнеса




Share with your friend now:
tgoop.com/systems_design_online/32

View MORE
Open in Telegram


Telegram News

Date: |

Telegram is a leading cloud-based instant messages platform. It became popular in recent years for its privacy, speed, voice and video quality, and other unmatched features over its main competitor Whatsapp. How to Create a Private or Public Channel on Telegram? Other crimes that the SUCK Channel incited under Ng’s watch included using corrosive chemicals to make explosives and causing grievous bodily harm with intent. The court also found Ng responsible for calling on people to assist protesters who clashed violently with police at several universities in November 2019. When choosing the right name for your Telegram channel, use the language of your target audience. The name must sum up the essence of your channel in 1-3 words. If you’re planning to expand your Telegram audience, it makes sense to incorporate keywords into your name. Among the requests, the Brazilian electoral Court wanted to know if they could obtain data on the origins of malicious content posted on the platform. According to the TSE, this would enable the authorities to track false content and identify the user responsible for publishing it in the first place.
from us


Telegram Systems Design: онлайн-конференция по проектированию информационных систем для бизнеса
FROM American