Результаты поиска по запросу: Apache Airflow и конвейеры обработки данных (Бас Харенслак, Джулиан де Руйтер)

онвейеры обработки данных управляют потоком данных с момента их первоначального сбора до консолидации, очистки, анализа, визуализации и многого другого. Apache Airflow предоставляет единую платформу, которую можно использовать для проектирования, реализации, мониторинга и обслуживания...

Apache Airflow для аналитиков данных Какие темы затронем Разберем что такое пайплайн и зачем нам DAG Изучим основы Airflow и напишем первый скрипт Разберемся с архитектурой и интерфейсом Установим свой Airflow в Docker Погрузимся в best practices по разработке Что после? После курса полученных...

О профессии: Онлайн-образование в IT-школе TeachMeSkills предлагает курсы по профессии Data Engineer, которые станут отличным стартом для тех, кто хочет стать инженером данных. Инженер данных, играет ключевую роль в обработке и анализе больших объемов данных. Твой результат в конце курса: 1...

Чему вы научитесь Airflow Python Docker для локальной и продуктовой разработки Gitlab CI/CD Элементы алгоритмического трейдинга Требования Знание Python на среднем уровне Понимание Docker и его использование Понимание сути трейдинга и основных концепций Git на среднем уровне Описание Этот...

Книга посвящена передовым методам построения конвейеров данных, сбору данных из множества разнообразных источников и преобразованию их для аналитики. Дано введение в конвейеры данных, раскрыта их работа в современном стеке данных. Описаны стандартные шаблоны конвейеров данных. Показан процесс...

Научитесь создавать проекты в области обработки данных и машинного обучения, используя возможности ChatGPT. Вы научитесь: Узнаете об основах науки о данных и машинном обучении. Использовать возможности ChatGPT и добавите мощный инструмент в свой техностек. Узнаете о Matplotlib и Seaborn — двух...

При работе любого корпоративного приложения образуются данные: файлы журналов, показатели, информация об активности пользователей, исходящие сообщения и другие. Правильное управление этими данными не менее важно, чем сами данные. Если вы архитектор, разработчик или инженер-технолог, но вы пока...

Технология хранения и обработки больших данных Hadoop (Тимур Машнин) Apache Hadoop - это платформа для распределенной обработки больших наборов данных на кластерах компьютеров с использованием простых моделей программирования. В этой книге вы познакомитесь с общей архитектурой платформы...

Данная методика работает как в масштабных исследованиях по генеалогии, так и при работе по сбору сведений биографии отдельных людей. Позволяет выстраивать систему из уже собранных фактов, благодаря которой находятся не только решения в сложных поисковых задачах, но и становится видна...

Apache Arrow – это программная платформа с открытым исходным кодом, предназначенная для разработки приложений, эффективно выполняющих обработку и анализ табличных данных за счет размещения в оперативной памяти. В обновленном втором издании представлен обзор формата Arrow с акцентом на его...

Описание книги Показаны математические методы обработки информации в дискретной форме. Пособие построено на концепции интеграции предметных областей математики и информатики. Рассмотрены элементы теории множеств и отношений, элементы комбинаторики, вероятностные методы обработки данных. Для...

Инструментарий для помощи программисту/аналитику для доступа и обработки данных [infostart] Набор обработок(методов) для выгрузки данных, обработки и подготовки их для дальнейшего использования во внешних программах, таких как excel, power bi и др. 1. Создание представлений (Views) таблиц в...

Программа "Профессия Data Engineer": 1 курс "Старт в Data Engineering" - Автоматизируете процессы сбора, очистки и анализа реальных данных без разработчиков (ETL) - Освоите инструменты: Git, SQL, базовый Python - Научитесь работать с хранилищами данных (DWH) 2 курс "Python: основы языка" -...

В ходе программы предусмотрен сбор профессионального портфолио. Вы не только набьете руку на новых проектах, но и сможете еще более качественно представить собственную кандидатуру на рынке труда. Старт: май 2023 | Формат: онлайн вебинары с преподавателем | Длительность обучения: 10 месяцев 8...

В ходе программы предусмотрен сбор профессионального портфолио. Вы не только набьете руку на новых проектах, но и сможете еще более качественно представить собственную кандидатуру на рынке труда. Старт: май 2023 | Формат: онлайн вебинары с преподавателем | Длительность обучения: 10 месяцев 8...

В ходе программы предусмотрен сбор профессионального портфолио. Вы не только набьете руку на новых проектах, но и сможете еще более качественно представить собственную кандидатуру на рынке труда. Старт: май 2023 | Формат: онлайн вебинары с преподавателем | Длительность обучения: 10 месяцев 8...

В ходе программы предусмотрен сбор профессионального портфолио. Вы не только набьете руку на новых проектах, но и сможете еще более качественно представить собственную кандидатуру на рынке труда. Программа "Профессия Data Engineer": 1 курс "Старт в Data Engineering" - Автоматизируете процессы...

IT-индустрия меняется постоянно и быстро. Чем быстрее и напряжённее программа обучения, тем проще вам будет влиться в реальную работу и следовать за изменениями. Наша программа охватывает весь спектр Hard Skills, которые нужны на позиции аналитика. Для кого эта программа: - Старт карьеры. У...

О чем буду рассказывать: Какие ПД могут обрабатываться в рамках образовательной деятельности без согласия. На что обращать внимание при подписания согласия. Электронный дневник, ГТО и другие системы обработки данных - на что обратить внимание? Обязательно разберём ваши вопросы. Плюс файл с...

Описание: Пособие содержит необходимый теоретический материал и примеры реализации данных, которые используются для неформального описания и реализации алгоритмов. Приведены и исследованы алгоритмы внутренней и внешней сортировки, алгоритмы поиска. Все рассмотренные методы сопровождаются...