Уже больше года как Роспотребнадзор не публикует статистику инфекционных заболеваний в Российской Федерации [1]. Последняя публикация была в феврале 2019 года за 2018 год.
Open Knowledge Foundation в этом году продолжает раздавать гранты до $5000 (370 тысяч рублей, по курсу $1=74Р) на создание инструментов для работы со стандартом Data Packages [1], это называется Frictionless Data tooling и в прошлом году они писали про успех предыдущего раунда такой микрогрантовой схемы [2]
Для профессиональных разработчиков работающих данными и умеющими писать хороший открытый код - это лёгкие деньги и работа на пользу общества. Лично я бы и сам поучаствовал, если бы не многочисленные обязательства и проекты которые сейчас веду.
В специальном разделе Минздрава Италии [1] максимально оперативные и исчерпывающие сведения о коронавирусе. На раздел ведёт огромный баннер с главной страницы. Подобные разделы есть на сайтах Правительств и Минздравов почти всех охваченных стран.
В США Electronic Frontier Foundation бьёт тревогу [1] из-за законопроекта EARN IT [2] в котором интернет провайдерам и платформам предполагается навязать и ежегодно обновлять "лучшие практики" по защите детей от сексуальной эксплуатации. Фактически - это такой антипедофильский законопроект, по усилению ограничений оборота видео и изображений.
Однако у него все те же проблемы что были с Законом Яровой в России и другими законами в США, и в мире, ограничивающими права и свободы неограниченного числа лиц. Вот и в этом случае предполагается что эти "лучшие практики" регулярно разрабатывает не сам конгресс, а утверждаются генеральным прокурором США и компании сертифицируются по этим "лучшим практикам". Это примерно как когда в России права на "немедленную блокировку" утверждаются не по судебной процедуре или законом, а на уровне прокуратуры/роскомнадзора и тд. Иначе говоря, это практика вывода оперативного регулирования интернет-сервисов из под судебной и законодательной власти, во власть правоохранительной системы. В данном случае, эта власть передаётся комиссии из 19 человек утверждающей эти "лучшие практики" и передающей Конгрессу США для утверждения или ветирования их.
В EFF однозначны, регулирование будет направлено на борьбу [3] со сквозным шифрованием, против которого высказывались уже неоднократно различные официальные лица включая, как раз, генерального прокурора США предполагаемого к вхождению в эту комиссию и именно прокуратура США с другими органами власти и разрабатывала бы эти лучшие практики и сертифицировала бы интернет платформы на их соблюдение.
Тут нельзя не напомнить что большинство крупнейших интернет платформ находятся в юрисдикции США и вводимые "лучшие практики" в защите детей, затронут не только жителей США, но почти всех интернет пользователей в мире.
На работу требуются "сторож данных" и "управляющий складом данных" без вредных привычек (c)
Среди множества профессий вокруг работы с данными, таких как data scientists, data engineers или data analytics незаслуженно забывают или просто не вспоминают о как минимум двух ролях data steward (управляющий данными) и data custodian (сторож данных).
Это термины наиболее распространённые в зарубежной академической и архивной среде, например, в NC State University [1] или в университете Рочестера [2] и в некоторых странах, например, в Новой Зеландии [3] есть большая область деятельности "Управление данными", но в правильном переводе с русского на английском - это не "data management", а именно "data stewardship".
Кто такой data steward? Это роль в организации, ответственная за организацию сбора, создания и использования данных для максимальной точности данных, как содержания так и метаданных. Их задача в том чтобы работа с данными, правилами работы с ними соответствовали регуляторным и внутренним требованиям. Часто эта роль совмещена с ролью data custodian (сторож данных) который, в свою очередь, отвечает за безопасность доступа к данным, их передачи, хранения и так далее. Часто эти роли совмещены или пересекаются.
Иногда, как по ссылке выше [1], выделяют роль data trustee (попечителя данных) и выстраивают иерархию из этих трёх ролей, где data trustee отвечает за стратегию, data steward за правила и принципы, а data custodian за конкретные данные и за их защиту, в том числе.
Термин data steward часто заменяют на data curator (куратор данных), очень близкий по смыслу и роли человека ответственного за сопровождения тех или иных баз данных и процессов их сбора.
Потребности в "управляющих данными" хорошо сформулированы в публикации "Wanted: data stewards" [4] вышедшей в начале марта. Где авторы пере-определяют этот термин и описывают его как "лидеры организаций и команд имеющие возможность создавать общую ценность используя повторно данные (и экспертизу в данных) организации".
Для тех кто с темой открытых данных столкнулся недавно, но хочет узнать и понять что это такое, рекомендую начать с книги Джошуа Тауберера Open Government Data [1]. Она вся в открытом доступе и объясняет что такое открытые данные и их роль в движениях за открытость государства в целом.
Public Health England открыли официальную панель для информирования о распространении коронавируса. Подробности можно узнать у них на сайте [1], а саму панель просмотреть здесь [2].
Также, все данные сразу отдаются в форматах CSV, с публикацией ежедневно обновляемых индикаторов [3].
Каждый год я собираю и публикую статистику того как государства по всему миру публикуют код, работают с открытым кодом, ведут открытую разработку и взаимодействуют с тысячами разработчиков. Это довольно актуально во всём мире и актуально, но практически не реализуется в России. В России, в принципе, открытых репозиториев кода кроме открытых репозиториев Счетной палаты [1] нет.
Я приведу цифры из анализа проектов зарегистрированных на Github [2] и относящихся к госорганам и к НКО помогающим госорганам стать лучше, так называемым civil hackers (гражданские хакеры), такие как Open Knowledge International, Sunlight, OMB Watch и многие другие.
Всего в мире открытый код публикуют 1281 организация, из которых 320 относятся к гражданским хакерам и остальные к органам власти, госучреждениям и исследовательским центрам на госфинансировании. Ими создано 48 944 репозитория кода из которых 12 602 создано гражданскими хакерами и 36 342 создано государственными структурами. В общей сложности "тусовка" открытого государственного кода составляет 4584 разработчика. Более всего их среди "гражданских хакеров", их 2148, а также много разработчиков в США - 1566 и в Великобритании - 255. Все вместе они создали кода и данных опубликованных на Github в объёме 852 гигабайт.
За последний год максимальная активность в разработке, количестве коммитов в Github, у разработчиков из Великобритании. За ними идут разработчики США, Франции, Канады и Норвегии.
Есть несколько способов измерить востребованность опубликованного кода. На мой взгляд наиболее точный способ - это подсчёт числа людей наблюдающих за кодом организации, для GitHub'а - это счётчик watchers и на его основе можно найти наиболее востребованные.
Накопленные материалы тянут на лонгрид на много страниц и много текста. Пока лишь базовые цифры и через какое-то время я опубликую датасеты, результаты подсчётов, топы стран и все списки включая первичные собранные данные.
В России тема Сингапура особенно популярно среди государственных служащих как пример того как должно быть устроено государство и как пример его эффективности. Но используется ли сингапурский опыт в России?
В Сингапуре вот уже несколько лет действует "государственная цифровая команда" создающая открытые государстсвенные продукты [1] среди которых есть такие как: - портал открытых данных data.gov.sg [2] - мобильное приложение для парковок [3] - сервис для заполнения государственных форм Forms.sg [4] - конструктор для госсайтов Isomer [5] - сокращатель ссылок для госслужащих [6] - конструктор общедоступных документов [7] - сервис авторизации с приватностью [8]
Большая кода команды общедоступна на Github [9], [10], [11].
Что главное в этом всём? Все эти продукты, кроме приложения для парковки - это G2G продукты. Многие из них, например, конструктор для госсайтов и конструктор документов сделаны столь хорошо что вполне пригодны для использования и за пределами властей Сингапура. В них Github используется для создания сайтов с разметкой markdown а госслужащих учат использованию этой разметки для подготовки и публикации документов.
Для тех кто мог пропустить ранее, например я пропустил, в июне 2019 года вышел отчёт офиса аудита Великобритании об использовании данных в органах власти "Challenges in using data across government" [1]. В этом, относительно кратком отчёте на 59 страниц, помимо обзора стратегий работы с данными, ещё и присутствует большой раздел об используемых идентификаторах для граждан и бизнеса. Несмотря на то что это неполный список, он довольно впечатляющий, и включает: - номер национального страхования - номер получателя соцподдержки - уникальный идентификатор налогоплательщика - уникальный идентификатор учащегося - уникальный идентификатор студента присваиваемый образовательным учреждением - номер паспорта - номер водительского удостоверения и так далее.
Наверняка если поисследовать по России то число идентификаторов будет не меньшее, а скорее большее. Кросс-использование их органами власти будет, скажем так, разным.
В целом этот документ можно описать как результат аудита стратегии правительства в области данных. Полезный по многим причинам, не затрагивающий вопросы финансов и затрагивающий вопросы результатов.
В проекте Our World in Data интересная публикация с анализом и сравнением эпидемии "испанки" в 1918-1920 году, текущего коронавируса и других эпидемий [1]. Помимо всего прочего там же сравнения стран по средней продолжительности в том числе, в годы эпидемий.
Там же, ещё одна публикация с обзором зарождения и распространения коронавируса [2] и того как собираются сведения о нём. В Our World in Data практически все материалы - это лонгриды с большой работой над текстами, помимо наглядных графиков. Всячески могу порекомендовать смотреть их публикации как пример качественной подачи информации.
Вышел обновлённый индекс/рейтинг OURData за 2019 год [1]. Индекс формируется ежегодно Организацией экономического сотрудничества и развития (ОЭСР) и покрывает все страны входящие в организацию и потенциальные кандидаты на вступление.
Индекс имеет особенность в разделении на 3 направления: - доступность данных как находимость (data availability) - доступность данных как безбарьерность (data accessibility) - государственная поддержка повторного использования данных
В безусловных лидерах Корея и Франция, в отстающих Литва и Швеция.
К индексу идёт пояснительная записка [2] с пояснениями, примерами, из "под-колоннами" каждого направления и описанием методологии.
Росси нигде не упоминается, но если слухи про то что российское правительство планирует активизацию вступления в ОЭСР, то возвращаться к тематике открытых данных придётся.
Реформа государственного сектора на повестке далеко не только в России. В Великобритании есть сообщество OneTeamGov [1] выступающее за радикальную реформу госуправления под позитивной повесткой. В их принципах [2]: 1. Работать открыто и позитивно 2. Предпринимать практические действия 3. Экспериментировать и повторять 4. Быть диверсифицированными и инклюзивными 5. Глубокая забота о гражданах 6. Работать через границы 7. Развивать технологии
Кроме Великобритании сообщества есть в Финляндии [3], Норвегии [4], Канаде [5], Швеции [6], Новой Зеландии [7]. Все они действуют также как неформальные сообщества в некоммерческом секторе, проводят митапы, завтраки, обсуждают продуктивность, как организовать рабочее место и так далее.
В Сингапуре местные власти активно рассылают уведомления о коронавирусе через WhatsUp. В статье в GovInsider [1] подробно рассказывается об этой практике.
Как это организовано: 1. Перевод с помощью ИИ. В Сингапуре 4 языка. Китайский, Английский, Малайский и Тамильский. Чиновники используют алгоритмы которые готовят черновики текстов и на их основе быстро доделывают тексты до финальных.
2. Быстрая подписка.
Человек выбирает нужный язык через Form.gov.sg [2], инструмент помогающий чиновникам запускать рассылку за 30 минут и связывать разные государственные системы.
3. Быстрые обновления
Сейчас система рассылает до 500 сообщений в секунду, это около 30 минут на 500 тысяч подписчиков.
Всё это делает команда Open Government Products [3], внутренняя команда правительства Сингапура. Одна из цифровых команд в мире, работающих по принципу in-house и решающие оперативные задачи.