Обложка канала

Клуб CDO. Страница 2

1243 @cdo_club

Сообщество профессионалов в области работы с данными и ИИ

  • Клуб CDO

    Госдума поддержала в первом чтении законопроект о регулировании рекомендательных алгоритмов — Право на vc.ru

    Согласно документу, сервисы должны будут разместить описание механизма рекомендаций и сведений, которые они собирают.

    vc.ru
  • Клуб CDO

    Third-Generation Data Platforms: The Lakehouse Небольшой материал о модной концепции организации аналитического хранилища Lakehouse. Концепция давно известна и многие вендоры предлагают практически out of the box платформы (типа Databricks, Snowflake) но кажется, что не особо пока широко подход используется в индустрии. Идея проста - с помощью слоя с хорошо описанными meta данными объединить неструктурированный data lake и структурированный DWH. Слой метаданных является тут определяющим элементом. Он привносит в озеро данных структуру и возможности управления, аналогичные возможностям традиционных хранилищ: поддержку транзакций (ACID), применение и развитие схемы, управление данными, контроль доступа и аудит. Lakehouse также обеспечивает аналитику в реальном времени, бизнес-аналитику (BI), науку о данных (DS) и машинное обучение (ML), предоставляя API-интерфейсы для обработки данных и позволяя использовать широкий спектр языков и библиотек. dzone.com/article…akehouse
    Third-Generation Data Platforms: The Lakehouse - DZone

    The lakehouse represents the next evolution of data platforms, aiming to combine the best of both data warehouses and data lakes.

    dzone.com
  • Клуб CDO

    Пока в недрах OpenAI готовятся к следующему релизу, другой проект Sam Altman, Worldcoin, сегодня запускается worldwide. Worldcoin — это криптовалюта, которую вы получаете за то, что просто живёте. При этом для создания кошелька нужно проходить специальную биометрическую верификацию. То есть в теории вы можете создать навсегда только один кошелек, и никто не может его создать за вас. Для прохождения процедуры надо заказать специальный девайс, Orb. Но фишка не в крипте, основная идея проекта — в верификации каждого кошелька, чтобы у вас было виртуальное представление, уникально связываемое с персоной. Возможно, владельцы кошелька, например, смогут регистрироваться в новых глобальных системах, запускаемых OpenAI. К примеру представьте, что в рамках сбора фидбека на вопросы про экономику или меньшинства вам необходимо в некотором смысле посетить голосование, но виртуальное. И там указываете ваше мнение по тем или иным поводам, а потом на этом учится aligned-версия GPT-7 (я это не из головы выдумал, подобное упоминал Sam + смотри вот эту страницу). Логично, что чем более распространённой будет система, тем легитимнее и проще будут проходить новые интеграции. Интересно, когда они достигнут первого миллиарда пользователей 🤔 Whitepaper проекта: https://whitepaper.worldcoin.org/
  • Реклама

  • Клуб CDO

    Дайджест статей Каталог данных на примере DataHub. Часть I https://habr.com/ru/articles/748350/ Машинное зрение для контроля горнодобывающей техники dzen.ru/a/ZLfL1…Q1y215If Департамент Big Data Tele2 научил ИИ анализировать автомобильный трафик по всей России vc.ru/tele2/7…y-rossii Модели прогнозирования продаж в «Магните»: Легенда об Ансамбле temofeev.ru/info/ar…ansamble Modus BI Cloud: работа с данными в облаке habr.com/ru/comp…s/749432 Difference Between Modern and Traditional Data Quality – DQLabs www.datasciencecentral.com/differe…y-dqlabs Databricks Unveils Lakehouse AI and MosaicML Acquisition at Data + AI Summit https://www.infoq.com/news/2023/07/lakehouse-ai-mosaicml/?utm_campaign=infoq_content&utm_source=infoq&utm_medium=feed&utm_term=global
    Каталог данных на примере DataHub. Часть I

    В современных компаниях генерируемые и собираемые объемы данных растут с поразительной скоростью, создавая необходимость в их систематизации и управлении. Каталоги данных становятся частью...

    Хабр
  • Клуб CDO

  • Клуб CDO

    Коллеги поделились ссылкой на мероприятие, просили поделиться со всеми https://heg.ai/conference_ai
    Генеративный AI для бизнеса и стартапов

    Создайте будущее с генеративным AI. Перспективы и инновации в области AI от успешных стартапов, ML-инженеров и инвесторов. Не оставайтесь в стороне от революции AI, берите билет на экспресс в эту стремительно развивающуюся область и создайте своего единорога!

    heg.ai
  • Клуб CDO

  • Клуб CDO

    Новость дня все наверное заметили - ChatGPT тупеет. Вопрос - как вы думаете почему?
  • Клуб CDO

    Вот очень мне нравился этот Reader и я его активно использовал для чтения RSS лент, пока его не закрыли. После закрытия долго пытался выбрать замену и привыкнуть к ней. Долгое время сидел на Feedly, но потом перешел на inoreader. Всегда было интересно - почему Google закрыл Reader, вроде хороший продукт был. А оказывается все из-за Google+ который даже никто и заметить не успел на рынке :) vc.ru/service…e-reader
    Он мог соперничать с Twitter, но был «убит»: как появился и почему провалился Google Reader — Сервисы на vc.ru

    Агрегатор собирал контент в одном месте и должен был избавить любителей новостей от страха что-то упустить. Разработчики думали, что за ним — будущее соцсетей. Но руководители Google так не считали и закрыли один из своих, возможно, «самых дальновидных» проектов.

    vc.ru
  • Клуб CDO

    в полку LLM прибавление
  • Клуб CDO

    Meta AI* выпустили ИИ-модель Llama-v2 на open source с лицензией, разрешающей коммерческое использование Это изменит ландшафт рынка LLM. Llama-v2 доступен в Microsoft Azure и на AWS, Hugging Face и других провайдерах. Предварительно обученные и точно настроенные модели доступны с параметрами 7B, 13B и 70B. Paper. *запрещенная в РФ организация.
    Llama 2 - Meta AI

    Llama 2 — The next generation of our open source large language model, available for free for research and commercial use.

    Meta AI
  • Клуб CDO

    Довольно давно висит у меня в непрочитанных эта статья, наконец-то дошли руки. Всегда интересно посмотреть в ретроспективе на путь развития инженерного решения. Как я обычно говорю: в том, как это сделано сейчас нет логики, в этом есть история :) История и предыдущие состояния системы очень сильно влияют на то, какое решение мы имеем сейчас, история и предыдущие версии диктуют компромиссы и снижают вариативность выбора путей развития. Поэтому проектируя что-то сейчас, надо думать не только о текущих требованиях и задачах, но и о том, куда и как будет развиваться решение, какие изменения его ждут в будущем и уже сейчас закладывать основу для того, что бы эти изменения в будущем было делать как можно проще. PS у GoDaady то в прочем все стандартно, от MicrosoftSQLчерез Hadoop к AWS PSS короче сразу берите облако если делаете что то новое :) www.godaddy.com/enginee…volution
    Evolution of Data Platform at GoDaddy — GoDaddy Engineering Blog

    This technical blog provides an in-depth look at the evolution of data at GoDaddy, highlighting the challenges faced along the way and the journey towards building a modern, low-cost cloud data platform.

    GoDaddy Engineering Blog
  • Клуб CDO

    Дайджест статей Импортозамещение в телекоме: система обработки больших данных, которая превосходит зарубежные продукты https://habr.com/ru/companies/stm_labs/articles/744492/?utm_source=habrahabr&utm_medium=rss&utm_campaign=744492 Большие данные и огромные сомнения https://habr.com/ru/articles/748238/?utm_source=habrahabr&utm_medium=rss&utm_campaign=748238 CDC (Сбор измененных данных): раскрытие и примеры возможностей интеграции данных в режиме реального времени https://habr.com/ru/articles/747560/?utm_source=habrahabr&utm_medium=rss&utm_campaign=747560 Контроль за дрейфами предсказательных моделей и Popmon https://habr.com/ru/articles/747694/?utm_source=habrahabr&utm_medium=rss&utm_campaign=747694 Мнение большинства для разметки данных в задачах компьютерного зрения https://habr.com/ru/companies/sberdevices/articles/747464/?utm_source=habrahabr&utm_medium=rss&utm_campaign=747464 Архитектура аналитической платформы Modus: ETL https://habr.com/ru/companies/modusbi/articles/747866/?utm_source=habrahabr&utm_medium=rss&utm_campaign=747866
    Импортозамещение в телекоме: система обработки больших данных, которая превосходит зарубежные продукты

    Сегодня речь пойдет о mediation-системах — системах обработки больших данных класса OSS/BSS (Operations / Business Support System). Они получают данные из разнородных источников, обрабатывают в...

    Хабр
  • Клуб CDO

    Inside OpenAI, the Architect of ChatGPT | The Circuit

    In this episode of The Circuit, Emily Chang visits OpenAI’s futuristic offices to meet with Mira Murati, the company’s Chief Technology Officer. OpenAI is behind smash hits ChatGPT and Dall-E. Murati discusses both the bright future and potential risks of a world with widespread artificial intelligence. For perspective on the AI gold rush sweeping Silicon Valley, Chang meets with early OpenAI investor and LinkedIn Co-Founder Reid Hoffman for insight on OpenAI’s early days and where the VC money flows next. -------- Like this video? Subscribe: http://www.youtube.com/Bloomberg?sub_confirmation=1 Become a Quicktake Member for exclusive perks: http://www.youtube.com/bloomberg/join Bloomberg Originals offers bold takes for curious minds on today’s biggest topics. Hosted by experts covering stories you haven’t seen and viewpoints you haven’t heard, you’ll discover cinematic, data-led shows that investigate the intersection of business and culture. Exploring every angle of climate change, technology, finance, sports and beyond, Bloomberg Originals is business as you’ve never seen it. Subscribe for business news, but not as you've known it: exclusive interviews, fascinating profiles, data-driven analysis, and the latest in tech innovation from around the world. Visit our partner channel Bloomberg Quicktake for global news and insight in an instant.

    YouTube
  • Клуб CDO

    Ладно, теперь о серьезном. Вышел очередной номер горячо мою рекомендуемого издания Альманах "Искусственный интеллект". Выпуск №12 содержит ежегодный отчет, подводящий итоги года и публикующий показатели отрасли Искусственного интеллекта в России. https://aireport.ru/ai_index_russia-2022
    AI Report - Итоги 2022

    Альманах Искусственный Интеллект №12. Итоги 2022

    aireport.ru
  • Реклама

  • Клуб CDO

    Новость от нашей команды SberDevices
  • Клуб CDO

    🥳Мы выпустили самую точную в мире нейросеть для определения пола и возраста человека по фото - MiVOLO🚀 Мало того, что лучшую среди других моделей - она ещё и намного точнее, чем человек (в задаче определения возраста). И не только людей по отдельности: даже если десять человек соберутся в консилиум, MiVOLO всё равно победит. Так что, можно сказать, что под капотом у нашей модели больше 10 человеческих сил🙃 Это при том, что она может перемалывать ≈1000 изображений в секунду (на V100). Ещё более удивительно, что она умеет предсказывать пол и возраст даже на тех фотографиях, где лица не видно. Причём, даже с закрытыми лицами, только по изображению с телом, MiVOLO предсказывает всё ещё лучше, чем среднестатический человек, который лицо видит😅 Всё это строго доказано в нашей научной работе👩‍🔬, где так же описаны все прочие детали и новая архитектура MiVOLO, основанная на трансформерах. А вот тут ссылка на демо, где можно пощупать сеть самостоятельно. Для тех, кто хочет пощупать поближе, есть модели и код для инференса (пожалуйста, тыкните звёздочку на репозитории!). Кроме того, выпустили новый датасет-бенчмарк Lagenda для задачи определения пола и возраста. Главное отличие от других - он хорошо сбалансирован как в целом, так и по возрастным группам, его размечали вручную люди и в нём почти нет звёзд. В общем, полный in the wild. Детали расскажу в последующей серии публикаций. Выходить на русском они будут в первую очередь тут, в ТГ. Пожалуйста, подпишитесь.
  • Клуб CDO

    а это полный текст статьи, а то ссылка выше пайволом закрыта PS кстати, как раз недавно была новость, что OpenAI закрыл на время свой функционал в Bing, тк использование ChatGPT позволяло польователям обходить пейвол и получать доступ к платному контенту через "опрос" модели

    GPT_4_Architecture,_Infrastructure,_Training_Dataset,_Costs,_Vision.pdf

    application/pdf