Обложка канала

Клуб CDO

1243 @cdo_club
Открыть

Сообщество профессионалов в области работы с данными и ИИ

  • Клуб CDO

    Evolving Data Strategy at Major Canadian Bank Вынес эту небольшую статью в отдельный пост, потому что содержание показалось мне достаточно интересным. Коллеги описывают реальный кейс с конкретными примерами формулировок типа "что такое data-продукт", принципами формирования стратегии Data Mesh и тп dzone.com/article…ian-bank
    Evolving Data Strategy at Major Canadian Bank

    Evolving the data strategy represents a transformational shift requiring organizational, cultural, and behavioral changes.

    DZone

  • Клуб CDO

    И еще немного про рекомендации Рекомендации на Авто.ру, крупнейшей в России площадке для автомобилистов, существовали уже давно. Однако рост бизнеса, новые сценарии на сайте и в приложении требовали пересмотреть архитектуру ML-сервиса, сделать его с одной стороны простым и масштабируемым, а с другой пригодным для совсем разных сценариев. В докладе расскажу про архитектурные компоненты рекомендаций, какие подходы к рекомендациям уже внедрили и какие продуктовые решения на его основе уже улучшают опыт пользователей. https://www.youtube.com/watch?v=N6hRn7Lmduw
    Вадим Кохтев | Как мы перезапускали рекомендации Авто.ру

    В этом видео: Рекомендации на Авто.ру, крупнейшей в России площадке для автомобилистов, существовали уже давно. Однако рост бизнеса, новые сценарии на сайте и в приложении требовали пересмотреть архитектуру ML-сервиса, сделать его с одной стороны простым и масштабируемым, а с другой пригодным для совсем разных сценариев. В докладе расскажу про архитектурные компоненты рекомендаций, какие подходы к рекомендациям уже внедрили и какие продуктовые решения на его основе уже улучшают опыт пользователей. Спикер: Вадим Кохтев, Руководитель ML, Яндекс Вертикали Трек Яндекс на Data Fest 2023 → https://ods.ai/tracks/practicalML_yandex Хаб Яндекса → https://ods.ai/hubs/yandex Активности Яндекса для ML в tg → https://t.me/yadatadojo Яндекс для разрабочтков в tg → https://t.me/Yandex4Developers Наши соц.сети: Telegram: https://t.me/datafest Вконтакте: https://vk.com/datafest

    YouTube

  • Клуб CDO

  • Реклама

  • Клуб CDO

    Unified Streaming And Batch Pipelines At LinkedIn: Reducing Processing time by 94% with Apache Beam

    Co-Authors: Yuhong Cheng, Shangjin Zhang, Xinyu Liu, and Yi Pan

    Linkedin

  • Клуб CDO

    Коллеги из Ассоциации ФинТех провели большое исследование кейсов и трендов использования методов ИИ в финансовых организациях РФ. Во вложении метериал, а ниже те моменты, которые показались мне наиболее интересными: - В настоящее время около 90% методов и инструментов искусственного интеллекта, которые используют российские финансовые компании, основываются на методах машинного обучения (то есть почти все процессы в банках). - 47% участников российского рынка планируют внедрить генеративные предобученные трансформеры уже к концу года (это то, что касается LLM). Более 80% (21 из 26) мировых трендов в области ИИ в финтехе актуальны для отечественных компаний. Кроме того, в России присутствует один уникальный тренд, связанный с импортозамещением. А вот методы «Федеративное обучение» и «Трансферное обучение» оказались наименее актуальными для отечественного рынка. Хотя некоторые участники реализуют эти методы, говорить о возникновении тренда пока рано. Тем не менее, их можно рассматривать как потенциальные инструменты для преодоления определенных ограничений, связанных с нехваткой данных для обучения моделей ИИ.

    Ключевые_выводы_применение_технологий_искусственного_интеллекта.pdf

    application/pdf

  • Клуб CDO

    Как оценить уровень data-культуры в компании? Ваня Леонтьев, лидер направления аналитики в СберМаркете, рассказывает, как удалось оцифровать такую сложную концепцию как Data Driven’ность и почему её вообще нужно измерять — разве не достаточно просто чувствовать! 🌝 Внутри: 🔹 Почему у data-культуры обязательно должна быть своя метрика 🔹 О каких вариантах измерения мы думали и на каком остановились? 🔹 Секретная формула под названием Data Driven Index. Как считаем сейчас и как планируем развивать? 🔹 Как драйвить data-культуру в компании, чтобы это давало результаты? Читайте на Хабре!

  • Клуб CDO

    Six Reasons Why Data Mesh Will Fail Пост закрыт пейволом, поэтому коротко сюда перенесу основные проблемные моменты, которые отмечают авторы: - Not all data is valuable - Data productization is one more thing to do - There’s not enough data competence around - Unfettered federated governance won’t work - Then there’s this central self-service platform - Most people don’t find data sexy medium.com/@hannes…86c89bdd
    Six Reasons Why Data Mesh Will Fail

    No one does wrong on purpose.

    Medium

  • Клуб CDO

    У кого был такой?

  • Клуб CDO

    Дайджест статей A New Era of Data Analytics: Exploring the Innovative World of Data Lakehouse Architectures dzone.com/article…innovati Data Engineering: концепции, процессы и инструменты https://habr.com/ru/articles/743308/ Как мы пришли к созданию своего BI решения на NLP для получения отчетов прямо в мессенджер habr.com/ru/comp…s/750802 Анализ данных клиентов и прогнозирование оттока пользователей на Python habr.com/ru/comp…s/750822 How to manage real-time data in the digital age www.datasciencecentral.com/how-to-…ital-age Is Your Latest Data Really the Latest? Check Your Data Update Mechanism dzone.com/article…k-the-da
    A New Era of Data Analytics: Exploring the Innovative World of Data Lakehouse Architectures

    This article delves deeper into the architecture and components of Data Lakehouses, exploring the related technologies that power this groundbreaking solution.

    DZone

  • Клуб CDO

    Ассоциация ФинТех провела Круглый стол «Искусственный интеллект: тренды и перспективы». Участники обсудили применение технологий ИИ и их роль в государственном управлении и финансовом секторе, основные тренды и барьеры внедрения искусственного интеллекта в России, обозначили наиболее перспективные модели и технологии для российского рынка, поделились результатами исследований. https://www.youtube.com/watch?v=Juj6Nrki2PQ
    Круглый стол «Искусственный интеллект: тренды и перспективы»

    Ассоциация ФинТех провела Круглый стол «Искусственный интеллект: тренды и перспективы». Участники обсудили применение технологий ИИ и их роль в государственном управлении и финансовом секторе, основные тренды и барьеры внедрения искусственного интеллекта в России, обозначили наиболее перспективные модели и технологии для российского рынка, поделились результатами исследований. Спикеры: Максим Григорьев, Генеральный директор Ассоциации ФинТех Марианна Данилина, Руководитель управления исследований и аналитики Ассоциации ФинТех Олег Комлик, Заместитель управляющего директора ДОМ.РФ Сергей Голицын, Заместитель руководителя департамента анализа данных и моделирования ВТБ Полина Гришина, Руководитель проекта GigaChat от SBER Игорь Галицкий, Product Owner Интеллектуальное распознавание документов (SberIDP) Александр Долбнев, Руководитель направления в Яндекс.Облако Вадим Тынченко, Руководитель департамента центра ИИ МГТУ им. Н. Э. Баумана Григорий Грязнов, Лаборатория ИИ ДОМ.РФ Лукьянов Александр, Head of DataLab Дом.РФ Александр Кулиев, Лидер центра компетенций по машинному обучению и искусственному интеллекту ОТП Банка Кирилл Кузьмин, Руководитель управления пилотирования АФТ

    YouTube

  • Клуб CDO

    В Red Bull пытаются использовать искусственный интеллект

    Главный конструктор Red Bull Racing Крейг Скиннер рассказал, что в команде экспериментируют с использованием искусственного интеллекта.

    www.f1news.ru

  • Клуб CDO

    Еще одно подтверждение, что ИИ не панацея, а инструмент

  • Клуб CDO

    Что такое рекомендательные системы и как они помогают решать бизнес-задачи в Тинькофф (А. Бредихин)

    Рассказываем о рекомендательных системах, теории и технологиях их работы и практическом применении рекомендательных систем в Тинькофф. Выступает Александр Бредихин, ML-разработчик команды персонализации банка в Тинькофф. 16 апреля 2023 День абитуриента в рамках дней компьютерных наук ФКН. Базовая кафедра Тинькофф на ФКН: https://cs.hse.ru/big-data/tinkoff/ ФКН: https://cs.hse.ru​​ Подписывайтесь на нас в социальных сетях: 📍 https://vk.com/cshse​​/ 📍 https://t.me/fcs_hse 📍 https://twitter.com/CS_HSE​/

    YouTube

  • Клуб CDO

    🤯Там Андрей Карпатый уже вовсю запускает LLaMa-2 на рисоварке Андрей вдохновился известным репозиторием llama.cpp для инференса LLM моделей на С++ и написал 500 строк кода на чистом C, которые прогоняют инференес модели LLaMa2. llama2.c - тупо 500 строк... и без всяких внешник зависимостей. Шикарный код! Запускается хоть на чайнике, хоть на калькуляторе, если там есть CPU. Из-за минималистичности, в коде реализована только точность fp32 и инференс на CPU с паралелизацией через OpenMP. Однако, можно гонять даже LLaMa-2 7B c адекватной скоростью. Код llama2.c и модели @ai_newz

  • Клуб CDO

    Taking Charge of Tables: Introducing OpenHouse for Big Data Management LinkedIn рассказал о своей аналитическом хранилище OpenHouse, построенном в рамках концепции LakeHouse. OpenHouse развернут с конца 2022 года и обслуживает часть производственного трафика из систем LinkedIn GoToMarket, которые поддерживают продажи и маркетинг LinkedIn. Пока только инженеры по данным и специалисты по данным, которые используют dBT для создания потоков ETL, стали одними из первых, кто использовал эту новую систему, но в будущем LinkedIn собирается расширять область применения решения. Ядром управления OpenHouse является служба таблиц RESTful, которая обеспечивает безопасное и масштабируемое предоставление таблиц и декларативное управление метаданными. Кроме того, его можно настроить для автоматической организации служб данных, которые сохраняют таблицы в настроенном пользователем (например, хранение, репликация), оптимальном (например, уплотнение хранилища, сортировка, кластеризация) и соответствующем состоянии (например, очистка GDPR). Собственно преобразование неструктурированных данных в структурированные талицы является основным проблемным моментом концепции LakeHouse. Тут нужно прорабатывать логику, разрабатывать ETL pipelines, регулярно обновлять, сверять и контролировать качество. Поэтому именно автоматизация создания таблиц под запросы конечного пользователя и является основным элементом инноваций и дифференциатором различным решений. Интересно, что LonkedIn использует формат Apache Iceberg для хранения данных в data lake (надо изучить подетальная). engineering.linkedin.com/blog/20…ata-mana
    Taking Charge of Tables: Introducing OpenHouse for Big Data Management

    Co-Authors: Sumedh Sakdeo, Lei Sun, Sushant Raikar, Stanislav Pak, and Abhishek Nath

    Linkedin

  • Реклама

  • Клуб CDO

    Опасаетесь делать свои крипто-проекты в США? Добро пожаловать в Лондон! www.wired.com/story/l…refugees
    London Wants American Crypto Refugees

    With US authorities cracking down, the UK government hopes to create a “Goldilocks zone” of regulation.

    WIRED

  • Клуб CDO

  • Клуб CDO

    Сбер открывает доступ к нейросетевой модели ruGPT-3.5

    👉 Upd. Добавили пример запуска в Colab'е. Друзья, свершилось. Сегодня мы рады сообщить вам о релизе в открытый доступ нейросетевой модели, которая лежит в основе сервиса GigaChat. Про то, что такое...

    Хабр