Data Engineer поневоле

Follow Data Engineer поневоле
Share on
Copy link to clipboard

Подкаст о Data Engineer-ах. Рассказы о сложностях практического Data Engineer-инга, основанные на опыте автора при создании системы аналитики для IOT/WebScraping данных на azure. Упоминаются: azure data explorer, azure data fabric, azure data lake storage, azure data lake analytics и многое другое.

Hodza Nassredin


    • Oct 24, 2019 LATEST EPISODE
    • infrequent NEW EPISODES
    • 23m AVG DURATION
    • 4 EPISODES


    Search for episodes from Data Engineer поневоле with a specific topic:

    Latest episodes from Data Engineer поневоле

    3: ETL и EventHub

    Play Episode Listen Later Oct 24, 2019 30:53


    Обсуждаем и сравниваем ETL системы на примере Apache NIFI и StreamsetsDataCollector. Далее разбираемся в работе EvenHub-ов.

    2: Форматы и схемы

    Play Episode Listen Later Sep 17, 2019 16:25


    Продолжаем обсуждение форматов файлов и схем данных. Рассматриваются: выведение схемы данных, проекция сложных типов данных в колонки, преимущества колоночных форматов, кратко о методах сжатия данных. Dremel made simple with Parquet https://blog.twitter.com/engineering/en_us/a/2013/dremel-made-simple-with-parquet.html Avro specs https://avro.apache.org/docs/1.8.1/spec.html

    dremel
    1. Форматы файлов

    Play Episode Listen Later Sep 10, 2019 16:31


    Обсуждаем разные форматы файлов для хранения данных

    0. Пилотный выпуск

    Play Episode Listen Later Sep 5, 2019 32:01


    Подкаст о Data Engineer-ах. В пилотном выпуске краткая информация обо мне и о чем планируется говорить. Упоминаются: azure data explorer, azure data fabric, azure data lake storage, azure data lake analytics и многое другое.

    data engineers

    Claim Data Engineer поневоле

    In order to claim this podcast we'll send an email to with a verification link. Simply click the link and you will be able to edit tags, request a refresh, and other features to take control of your podcast page!

    Claim Cancel