Клуб CDO. Страница 22
1243
@cdo_club
Сообщество профессионалов в области работы с данными и ИИ
-
Клуб CDO
Clickhouse, конечно, это большой успех Yandex и эта система хранения данных довольно популярна не только в России, но и за рубежом. В этой статье от компании Neoflex описывается опыт построения хранилища на этой базе данных. https://habr.com/ru/company/neoflex/blog/688126/ -
Клуб CDO
Немного о практике управления качеством данных в Twitter blog.twitter.com/enginee…-twitter -
Клуб CDO
💬Борис Зингерман, руководитель Ассоциации разработчиков и пользователей ИИ в медицине «Национальная база медицинских знаний», выступил сегодня на сессии «Есть ли место “цифровым песочницам” в медицине. Опыт и проблематика запуска первых ЭПР»: «Важным вопросом при рассмотрении инициативы Data MATRIX по установлению ЭПР в области данных рутинной клинической практики был вопрос "обогащения" данных. Дело в том, что основной задачей ЭПР является возможность собирать максимально полные обезличенные медицинские данные по определенным случаям лечения пациентов. Эти данные могут быть использованы для глубокого анализа и повышения эффективности и безопасности определенных видов лечения для будущих пациентов. И эта безопасность и эффективность будущего лечения — важнейшая задача данного проекта. На мой взгляд, это требует максимально полного объема данных, в том числе обогащенных информацией из других медицинских и даже немедицинских источников, что позволило бы связать эффективность лечения в том числе с образом жизни, привычками, местом проживания, покупками, транспортными маршрутами. В этом отношении обогащение всем массивом данных (еще раз подчеркиваю, обезличенных) крайне важно для оценки эффективности лечения. При этом большинство экспертов на заседании экспертной группы АНО “Цифровая экономика” подчеркивали важность данного предложения именно как эксперимента, который позволит "расшить" неразрешимую сегодняшнюю проблему получения для исследования обезличенных медицинских данных, без письменного согласия пациента в ситуациях, когда найти этого пациента уже не представляется возможным. Именно в ходе предложенного эксперимента предстоит нащупать разумную грань между эффективностью и безопасностью, что очень важно для улучшения существующего нормативного регулирования. Я надеюсь, что этот баланс все-таки будет найден, потому что “цифровые песочницы” мы построили, а вот “песка” ещё не насыпали». 
-
Реклама
-
Клуб CDO
Еще одна попытка разложить по полочкам концепцию Confidential Cloud Computing и содержательно поговорить о конфиденциальных вычислениях в Web 3. На самом деле там опять про Intel SGX :) https://habr.com/ru/post/690892/ -
Клуб CDO
В каком то из постов выше в комментариях просили больше делиться материалами по теме применения данных в медицине. Вот, как заказывали :) https://habr.com/ru/post/689352/ -
Клуб CDO
И еще одно видео сегодня https://www.youtube.com/watch?v=fUFzkQUCPC0 -
Клуб CDO
Хороший доклад про архитектуру программных систем https://www.youtube.com/watch?v=TRkqqa9MIJo -
Клуб CDO
Вышел свежий и шикарный отчет об ИИ - State of AI Report 2022, вот яркие хайлайты из него 1. Академическая наука передает эстафету децентрализованным исследовательским коллективам, финансируемые из криптосферы, которые делают свои исследования более доступными для общественности. 2. Новая область исследований, которая быстро созрела — это Neural Radiance Field (NeRF), нейронная сеть, которая может генерировать новые виды сложных 3D-сцен на основе частичного набора 2D-изображений. 3. Требования к вычислительным ресурсам для крупномасштабных экспериментов с ИИ увеличились в 300 000 раз за последнее десятилетие. За тот же период доля этих проектов, управляемых учеными, упала с ～60% почти до 0%. 4. Трансформеры стали еще более распространенными, став по-настоящему кросс-модальными, укрепляя свои позиции в моделях мира и многозадачных вопросах. 5. Тем временем все, кроме одного автора знаменательной статьи, в которой были представлены нейронные сети на основе трансформаторов, покинули Google, чтобы создать свои собственные стартапы в области AGI, диалоговых агентов, биотехнологии с ИИ и блокчейна. 6. чипы NVIDIA остаются лидирующими по сравнению с TPU Google. NVIDIA исследователи используют в 78 раз больше. NVIDIA — мощная монополия, превосходно работающая как в аппаратном, так и в программном обеспечении, а также в применении ИИ для разработки своих чипов следующего поколения. Полностью отчёт можно посмотреть здесь. -
Клуб CDO
На рынке представлено множество предложений по замене западных аналитических систем на отечественные аналоги, но что делать, если привычка к определенному качеству, функционалу и возможностям решений не позволяют сделать выбор в пользу какой-либо из них? Коллеги из компании Navicon выложили запись вебинара «Дельта BI – привычный уровень BI на новой платформе», который прошел в формате онлайн 17 мая. https://www.youtube.com/watch?v=TfZJroCpP14&t=1583s -
Клуб CDO
Что нужно и не нужно делать для реализации подхода Data Mesh от компании BlaBlaCar, которая делиться своим практическим опытом в этой заметке. medium.com/blablac…f1662c2d -
Клуб CDO
Через 30 минут начинается онлайн трансляция первого дня конференции ProductSense, просмотр доступен в YouTube просто по ссылке, без каких либо регистраций https://www.youtube.com/watch?v=zHxz7GaTZ3I -
Клуб CDO
Пятничные вечерние бредни)) 📃 Мысли после прочтения очередного отчета Gartner -
Клуб CDO
Дайджест статей 08/10/22 Сравнение FineBI и Power BI https://habr.com/ru/post/691420/ Data Warehouse and Data Lake Modernization: From Legacy On-Premise to Cloud-Native Infrastructure dzone.com/article…nization Data Quality Monitoring — You’re Doing It Wrong dzone.com/article…it-wrong Building Blocks for Modern Data Management: Data Subassemblies and Data Products – Part 1 www.datasciencecentral.com/buildin…s-part-1 Serverless asynchronous Iceberg data ingestion www.matano.dev/blog/20…-iceberg -
Клуб CDO
👍 Российским компаниям дадут возможность обезличивать персданные перед передачей их в Национальную систему управления данными Минцифры подготовило новые поправки к 152-ФЗ, пишет Forbes со ссылкой на «Ведомости». Похоже, борьба за порядок сбора данных завершена. 😱 Ранее предполагалось, что данные будут обезличивать на стороне НСУД Источники рассказывали, что компании хотели сохранить за собой право обезличивать данные своих клиентов и пользователей. Министерства же настаивали на том, чтобы обезличивать их централизованно. Наш техдиректор Никита Назаров доволен исходом спора. Обезличивать данные самостоятельно, только потом передавая в информационную систему, надежнее с точки зрения защиты от утечек. 📚 Для контекста: НСУД будет объединять уйму данных из самых разных источников В 2019 году правительство одобрило Концепцию создания единой системы данных. Она предполагала с 2022 года унификацию процессов их сбора, обработки, хранения и использования. В мае 2021 года Минэкономразвития и Минцифры разработали законопроект о создании НСУД в качестве единой платформы. На ней планировалось объединить данные из сотен госсистем, реестров и баз, чтобы ими могли обмениваться ведомства и бизнес. В мае 2022 года министерства представили доработанный законопроект, им предлагалось предоставить бизнесу возможность на платной основе получать национальные данные и пользоваться инфраструктурой НСУД. http://bit.ly/3SUXaLE @hflabs_official -
Клуб CDO
я смотрю, что после пары тройки лет торможения с НСУД и попытках осмыслить идею, мы активно побежали по Китайскому сценарию уже не оглядываюсь и не задумываясь. -
Реклама
-
Клуб CDO
Большое пятничное чтение :) habr.com/ru/comp…g/690668 -
Клуб CDO
Если вы выбираете инфраструктуру для своего Web3.0 проекта - рекомендую обратить внимание на TON, которая становиться не только сетью для коинов, но и полноценной основой для Web3.0. Вообще в эту команду верю, так же как в Ethereum. telegra.ph/TON-saj…si-09-22 -
Клуб CDO
Если пропустили, на прошлой неделе Коммерсант выпустил приложение Review Think big data - набор статей про данные и их использование. Что из интересного: - сразу несколько авторов пишут или упоминают про совместные конфиденциальные вычисления - в этой теме замечена компания HFLabs, которая ранее вроде подобными темами не занималась, при этом коллега отмечает, что Intel SGX для CC использовать не обязательно и что "не все, кто говорит что у них под капотом CC, на самом деле имеют эти технологии под капотом" (на кого то намекает?) - и все равно все пока говорят о SCC в основном в контексте Intel SGX, сильно Intel эту тему забустила https://www.kommersant.ru/apps/145887?from=doc