Канал, посвященный анализу данных с помощью Python. Не столько про машинное обучение, сколько про подготовку/очистку/предобработку данных, использование Python для получения данных из API, парсинга веб-сайтов, автоматизации различной рутины
Узнайте, как готовить данные в Greenplum®
🗓Когда: 7 февраля в 12:00 (МСК)
На вебинаре архитектор Yandex Cloud расскажет о том:
🔹как выбрать оптимальную модель данных для хранилища;
🔹как хранить, загружать и обрабатывать данные в Greenplum: heap и append-optimized таблицы, индексы, сжатие, партицирование и шардирование данных, подключение к внешним источникам с помощью механизма PXF;
🔹как выявлять типовые проблемы производительности: анализ мониторинга и настроек кластера, чтение и анализ планов запросов;
🔹как оптимизировать производительность;
🔹как выполнять обслуживание кластера Greenplum.
Также спикер проведёт короткую Q&A-сессию. Присылайте вопросы в чат трансляции — спикер ответит на них в прямом эфире.
Участие бесплатное, нужно только ➡️ зарегистрироваться
Pandas на самом деле предельно прост
Но как и при использовании любого инструмента, который с виду кажется простым, всегда возникают какие-то ограничения, которые мешают решить поставленную задачу
У только что освоивших import pandas as pd бывает, что они знают какого вида табличку хотят получить на выходе, а как её получить — не знают и в итоге впадают в ступор, потому что знают синтаксис, но не знают внутрянки
Для того, чтобы эффективно использовать Pandas и максимально пользоваться его потенциалом, важно понимать основные структуры данных Series и DataFrame, так как они являются строительными блоками работы с данными в Pandas
Написал про это целую статью с кучей примеров
datalytics.ru/all/ugl…y-dannyh
Бесплатный онлайн-вебинар «Алгоритмы любви. Machine Learning в Social Discovery» от Social Discovery Group
Social Discovery Group формирует будущее dating-индустрии. Уже более 250 млн пользователей по всему миру пользуются нашими приложениями, отправляя 75 млн сообщений ежедневно. За этим успехом стоит команда опытных аналитиков и дата-инженеров, создающих алгоритмы для общения и знакомств, и мы поделимся с вами некоторыми секретами.
❣️Наши эксперты расскажут о том, как мы привлекаем трафик на наши платформы и удерживаем пользователей с помощью системы рекомендаций по контенту. Мы поделимся нашим опытом создания In-House DSP, познакомим вас с алгоритмами подбора партнеров и покажем, как машинное обучение помогает миллионам людей находить любовь в Интернете.
⏱️Вебинар пройдет 9 февраля в 19:00 (GMT +4) в онлайн-формате. Язык вебинара: английский.
📝Участие бесплатное по предварительной регистрации на сайте:https://socialdiscoverygroup.com/about-us/events/algorithms_of_love
🔥 Аналитика данных с SQL - блог ведущего дата саентиста, Ozon tech.
Здесь разобраныреальныепрактическиезадачи по работе с данными с собеседований крупных компаний.
Дата Сайентист с глубокими знаниям баз данных, пишет код намного эффективнее коллег с базовыми навыками.
SQl hub - это первоисточник материала, который появляется в платных курсах и блогах по программированию.
Рекомендуем подписаться!
A/B-тестирование — незаменимый инструмент при проверке гипотез, но есть ряд причин, по которым оно может привести к ошибкам
Ребята из OzonTech в своей статье рассмотрели шесть распространенных причин, из-за которых система принятия решений через A/B-тестирования может давать неверные выводы. Узнайте, что нужно учитывать, чтобы ваши эксперименты работали и, таким образом, приносили пользу бизнесу. Мы рассмотрим методологию и процесс A/B-тестирования, а также проблемы и заблуждения, которые могут привести к провалу. Если вам кажется, что вы не обладаете достаточными знаниями о том, как проводить и правильно оценивать эксперименты, то вам будет полезна эта статья
habr.com/ru/comp…g/712306
Немного не по теме моего канала, но нет сил молчать. Недавно я поняла, что некоторые сервисы строят пузырьковые диаграммы, как бог на душу положит. И провела маленькое исследование, в котором сравнила результаты наиболее популярных датавиз сервисов и программ. Хочу его попозже дополнить еще QGIS и Gephi, если будет интерес. Если есть еще идеи — ю а вери велкам.
Опубликовала у себя на тильде
Хотите понять, как проводить A/B-тесты и интерпретировать их результаты? Тогда не пропустите бесплатный вебинар по предиктивной аналитике от MyTracker.
На вебинаре мы поговорим о том, что такое A/B-тесты, как их правильно провести, какими метриками и критериями оценивать результаты и многое другое. Дополнительно мы будем моделировать разные сценарии А/Б-тестов с помощью jupyter notebook и оценивать статистическую значимость результатов.
Вебинар проведёт Александр Смирнов, программист-исследователь команды предиктивной аналитики MyTracker.
https://vk.cc/cl2ew
🔥 Хотите перейти в область дата-инжиринга и работать с большими данными?
👉 Сделайте первые шаги в этом направлении на открытом уроке онлайн-курса «Data Engineer» в OTUS! 27 января в 20:00 мск пройдет вебинар «Elasticsearch как NoSQL хранилище документов». Глубокое понимание этого инструмента — ключевой момент для его правильного применения.
💻 В результате урока вы:
🔸 Изучите классификацию NoSQL СУБД
🔸 Узнаете про отличительные черты Elasticsearch и его применимости к разным задачам
🔸 Узнаете, почему Elasticsearch — одних из наиболее популярных инструментов для создания поисковых датасетов в современном мире
🔸 Поймете, чем так хорош Elasticsearch и задумаетесь об его внедрении в вашей команде
🟢 Чтобы записаться на мероприятие, пройдите вступительный тест: https://otus.pw/k9XX/Реклама. Информация о рекламодателе на сайте www.otus.ru.
Хотите узнать простой и понятный алгоритм для построения графиков по данным используя язык R?
Приходите 🗓 31 января в 20:00 на открытый урок «”Слои” в ggplot2» от OTUS. Урок будет полезен аналитикам данных и исследователям, финансовым аналитикам, экономистам и всем, кто работает с данными и их визуализацией.
На занятии вы:
- Узнаете как строить графики в R с помощью библиотеки ggplot2 слой за слоем.
- Познакомитесь с разными типами визуализаций, фасетированием и многим другим.
👨💻 Открытый урок проведет преподаватель Дмитрий Володин, Analytics Engineer в TrafficStars. Он использует R в своей работе как для разведочного анализа, так и для BI задач.
Регистрируйтесь на занятие — https://otus.pw/GthL/
Открытый урок является частью онлайн-курса «Язык R для анализа данных» от OTUS
❓Хотите перейти в BI-аналитику?
Сделайте первые шаги на пути к новому этапу в карьере уже 30 января в 20:00! Приглашаем вас на открытый урок «Подготовка данных для дашборда в Pandas» в OTUS.
Вебинар состоится в рамках онлайн-курса «BI-аналитика» для продуктовых и маркетинговых аналитиков, аналитиков данных, Product Owner’ов и Project Manager’ов, Data Scientist’ов, Data Engineer’ов и выпускников, которые хотят работать в области BI-аналитики.
✅На занятии вы узнаете про методы предобработки и “очистки” данных для дальнейшего построения дашбордов в Python Pandas.
➡️Какой результат мы получим?
Преобразуем учебный набор данных, очистим его от пропусков и дубликатов, посмотрим различные способы трансформации (группировка, транспонирование строк/столбцов и т.д.).
➡️Пройдите вступительный тест, чтобы определить уровень своей подготовки и записаться на урок: https://otus.pw/dLi7/Реклама. Информация о рекламодателе на сайте www.otus.ru.
Яндекс Практикум разработал практический курс по аналитике для тех, кто работает с продуктом. В нём можно набить руку на исследованиях, ad-hoc запросах и А/В тестах для реальной сферы бизнеса.
Научитесь растить продукт на основе данных за 2,5 месяца. После курса студенты смогут:
— разбираться в метриках продукта, рассчитывать их и влиять на них;
— проводить продуктовые исследования, сегментировать пользователей и определять, какой сегмент что покупает;
— считать юнит-экономику и находить точки роста в продукте;
— готовиться к A/B-тестам, интерпретировать результаты и улучшать анализ.
Проекты на курсе будут из разных сфер: онлайн-кинотеатр, маркет-плейс или сервис доставки еды. Каждые 2-3 недели студенты будут получать обратную связь от менторов — ведущих аналитиков российских компаний. Они поделятся кейсами и дадут советы по вашим проектам.
→Начать учиться
Надоели скучные видео уроки, по которым невозможно учиться?
Команда python-программистов из Devman понимает, как важно получать реальный опыт во время обучения. Просмотр видео не научит вас самостоятельно писать код и не даст вам опыт коммерческой разработки, который так нужен работодателям. Именно поэтому команда Devman создала программу, которая гарантирует качественный трек от новичка до мидла.
Во время обучения вы получите:
– Опыт коммерческой разработки в CV;
– 50+ небольших и 9 полноценных проектов;
– Трехмесячную оплачиваемую стажировку;
– Опыт прохождения собеседований, в том числе технических;
– Трудоустройство в компаниях-партнерах или помощь с подбором вакансий.
Курс длится 13 месяцев, а у вас есть возможность попробовать первую неделю обучения без предварительной оплаты и определиться со своими возможностями в профессии.
За подробностями переходите по ссылке → bit.ly/3CUFIRHРеклама. ООО Девман 2VtzqufN6Cj
Тинькофф проведет митапы в Ростове-на-Дону, Краснодаре и Сочи 🚙
Серия оффлайн встреч IT’s Tinkoff on the Road подходит к концу. С митапами о разработке, архитектуре и soft-скиллах побывали уже в семи городах России. Маршрут начали в Сибири, а завершают его на юге страны. Последние на пути:
— Ростов-на-Дону — 25 января;
— Краснодар — 27 января;
— Сочи — 8 февраля.
На встречах в этих городах: будут делиться кейсами, обсуждать технологии, а после докладов пройдет неформальный и полезный нетворкинг. Выбирайте удобный город и регистрируйтесь.
Подробнее о серии митапов IT’s Tinkoff on the Road можно прочитать на этой странице:https://vk.tinkoff.ru/otr_tinkoff
📊 Сможешь ли ты стать дата-инженером?
📌 Пройди тест и узнай — https://otus.pw/7t2Mp/💻 Ответьте на 20 вопросов и проверьте, готовы к обучению на онлайн-курсе «Data Engineer» в OTUS. Дата-инжиниринг — новый уровень для разработчиков и админов СУБД.
✅ На курсе вас ждет:
✔️ Живые вебинары с опытными практиками
✔️ Решение прикладных задач и создание своего продукта
✔️ Real Case Studies: примеры внедрений, использования инструментов, оптимизации и разбор ошибок
✔️ Во время обучения вы освоите работу с Architecture, Data Lake, DWH, MLOps и сможете самостоятельно решать задачи в сфере Big Data.
🔥 Пройдете тест — получите демо-ролик о занятиях на курсе, Welcome-скидку и доступ к открытым урокам:
👉Elasticsearch как NoSQL хранилище документов
👉Clickhouse vs. Greenplum. Какую MPP-базу данных выбрать?
Реклама. Информация о рекламодателе на сайте www.otus.ru.
Курс «Английский для аналитиков» от Яндекс Практикума
Для специалистов, которые хотят изменить свою профессиональную жизнь и работать в международной команде. Обучение построено вокруг рабочих ситуаций и полезных для карьеры навыков:
• Самопрезентация. Рассказ о своей роли, задачах, сфере ответственности на поведенческом интервью и в неформальной беседе.
• Работа в команде. Стендапы, планирование спринтов, демонстрация навыков командной работы на собеседовании.
• Общение с заказчиками и исполнителями. Сбор требований у стейкхолдеров и постановка задач для разработчиков.
• Презентация результатов работы. Выступление на митапах, неформальное общение с коллегами из отрасли.
• Обсуждение решений по проекту. Генерация и аргументация идей, участие в мозговых штурмах.
• Рефлексия и самоанализ. Ретроспектива, ревью, ответы на сложные вопросы.
Запишитесь на бесплатную консультацию. Определим ваш уровень языка, расскажем про обучение и ответим на все вопросы
🚀 Один из важнейших инструментов MLOps — это MLFlow.
▶️ 12 января в 20:00 мск в рамках онлайн-курса MLOps от OTUS пройдёт открытый урок «MLFlow и переобучение ML-моделей».
✅ На открытом уроке вы узнаете:
🔹 Как экспериментировать сразу с несколькими ML-моделями, с разными гиперпараметрами и при этом не захлебнуться в разнообразии экспериментов.
🔹 Как, проводя регулярное переобучение, получить возможность сравнивать качество работы моделей и выбирать лучший результат.
🔹 Как не потерять накопленный опыт и воспроизводить более ранние эксперименты.
🔹 Как выбирать лучшие варианты для отправки в Prod / Staging среду, при этом делиться информацией и принимать совместное решение в команде.
💻 Спикером выступит преподаватель OTUS Данила Слепов. Он проектирует AI-системы, разрабатывает архитектуру MLOps платформ.
➡️ Для регистрации на вебинар пройдите вступительный тест: https://otus.pw/4mWY/Реклама. Информация о рекламодателе на сайте www.otus.ru.
Как прокачаться DevOps-инженеру
Популярность облачных технологий растёт, а значит повышается спрос на DevOps-инженеров. Но даже опытному специалисту бывает непросто разобраться в специфике провайдера.
Yandex Cloud решила помочь индустрии и подготовила серию курсов для DevOps-инженеров. Они помогут изучить все этапы подготовки облачной инфраструктуры и построения CI/CD-процесса для контейнерного приложения — от создания среды разработки до продакшна.
Как всё устроено: курсы построены по принципу case-study — вы погрузитесь в реальную задачу бизнеса и шаг за шагом придёте к её решению.
Кому подойдёт: специалистам middle- и senior-уровня.
Сколько стоит: все курсы можно проходить бесплатно. Кроме того, вы получите стартовый грант для решения практических заданий в облаке.
Выбирайте курс и начинайте учиться
➡️ Хочу на курс
Станьте востребованным Python-разработчиком уже в 2023 году.
Записывайтесь на курс от Хекслета и получайте скидку 10% и подарок на выбор: депозит 20 000 ₽, базовая подписка на 5 месяцев или премиум-подписка на 1 месяц.
Можете порадовать не только себя, но и близкого человека. Воспользуйтесь уникальным предложением для двоих: купите вторую профессию со скидкой 40%.
Оцените формат и решите, стоит ли продолжать. Вводные ознакомительные курсы профессии доступны бесплатно сразу после регистрации!На профессии «Python-разработчик» вы:
✔️ Научитесь работать с сетевыми запросами и овладеете навыком проектирования архитектуры приложений.
✔️Освоите самый популярный веб-фреймворк Django.
✔️ Решите более 310 задач в браузере, создадите 4 проекта для портфолио на GitHub и выполните 150 тестовых заданий от наших партнёров.
✔️Научитесь работать с чужим кодом и оформлять пул-реквесты в Open Sours проектах.
Успейте оставить заявку до 31 декабря, чтобы получить новогодние подарки🎁