Ivan Begtin. Страница 83

У Медузы вышла статья-обзор текущего уголовного преследования ИТ предпринимателей [1]. Обзор, с одной стороны довольно познавательно, а с другой не очень глубокий. Но в любом случае полезный обилием примеров и ситуаций.

Что происходило на ИТ рынке в последние лет 10 и происходит сейчас? Я совершенно сознательно буду сейчас писать обобщённо, без конкретных примеров:
1. Очень чёткое разделение ИТ работающее на внешний рынок и внутренний (в основном это госзаказ). Те кто ранее работал на внешнем рынке и из-за санкций попробовавшие влезть на внутренний столкнулись с невозможностью делать что-либо значимое без админ. ресурса, а те кто работал на внутреннем рынке гос и корп заказа столкнулись с тем что на внешнем рынке их неэффективность никому не нужна.
2. ИТ компании и разработчики работающие на внешний рынок тоже разделились на тех кто к России сильно привязан и те кто не очень. Кто-то эмигрировал с самого начала "юридически" через работу в другой юрисдикции, кто-то буквально выезжая за границу всей командой или частью команды.
3. Малые и средние ИТ компании на внутреннем рынке находятся под большим давлением со стороны госмонополизации ИТ, всё больше контрактов по ИТ концентрируется на федеральном уровне и всё больше получают только крупнейшие госинтеграторы и около госинтеграторы.
4. Плюс к этому всему ещё и существуют не ИТ компании, а так называемые компании цифровой экономики. Те же Яндекс, Mail.ru или Rambler или даже Сбер очень условно ИТ компании поскольку источниками их заработка являются не ИТ продукты. Это скорее технологические компании, которые, тем не менее очень сильно давят на рынок в основном на кадры.
5. То что сейчас на ИТ рынке стали применять уголовные дела как инструмент решения хозяйственных вопросов - это следствие того что в ИТ рынок стали больше проникать практики со всех остальных отраслей. Потому что много малого и среднего бизнеса, потому что осталось что делить и по той причине что такой механизм через уголовные дела в принципе существует, хотя и существовать не должен не то что в ИТ, а во всех экономических отношениях.
6. При этом, я тут выражу своё личное мнение, если бы ИТ бизнес работающий на государство был бы щепетильнее и не "сдавал бы отчётные документы на вес", не играл бы по правилам "важнее формальности, а не суть", то и рисков уголовного преследования было бы куда меньше. А когда абсолютно всем на рынке было известно что большая часть госконтрактов заключаются по завышенным ценам, это репутации рынку не прибавляло. Каждый раз когда меня спрашивают кого их крупных интеграторов я могу порекомендовать, я понимаю что ни одного интегратора я рекомендовать не могу.

Я могу ещё долго так рефлексировать, так что на это и остановлюсь без завершающей мысли.

Ссылки:
[1] https://meduza.io/feature/2020/02/26/oschuschenie-chto-ty-okazalsya-v-boevike-iz-90-h

#it

О рейтинге регионального протекционизма и воспроизводимости статистики по данным портала госзакупок

Сегодня на сайте проекта Счетной Палаты «Госрасходы» был опубликован обновленный рейтинг регионального протекционизма (https://spending.gov.ru/analytics/ratings/rating-protectionism/). Теперь он представлен в виде интерактивной плиточной карты, которая дает возможность не только узнать долю «внутренних» контрактов (контрактов с поставщиками из своего региона) за последние 6 лет, но и узнать объем контрактов региона с любым другим регионом.

Рейтинг регионального протекционизма (в прошлом рейтинг автономности/изолированности) мы готовим не первый год. За это время мы наблюдаем изменения в данных за одни и те же годы. Ранее я уже писала о добавлении субсидий задним числом (с недостоверной датой публикации) и о том, что сумма расходов сводных бюджетных росписей (СБР) зависит от даты обращения к ним.

Частично то же самое справедливо и для госконтрактов. Мы делали выборки о контрактах за 2015-2019 год в июле, ноябре и феврале. Также нам были доступны данные о контрактах за 2019 год на 5 и 17 февраля. Бегло сравнив друг с другом эти данные получаем следующее:

1. Если сравнить данные о контрактах за 2019 год, выгруженные 5.02.2020 и 17.02.2020, то разница в сумме контрактов составит 327 млрд руб. (~4% от суммы контрактов за 2019 год).

2. Меньше чем за две недели количество контрактов за прошлый год изменилось на 36 тысяч. Например, в Красноярском крае, Приморском крае и Иркутской области количество контрактов увеличилось примерно на 1 тыс., в Мурманской и Свердловской областях увеличилось примерно на 1,5 тыс., а в Москве - уменьшилось на 308.

3. Сумма прошлогодних контрактов за две недели прошлого года значительнее всего изменилась в Тюменской области - на 50% или 85 млрд руб., в Республике Карелия сумма увеличилась на 13%, в Краснодарском крае - 17% (42 млрд руб.), в Пензенской области - 11%. В Московской области сумма контрактов увеличилась на 20 млрд руб.

4. Сумма контрактов Москвы увеличилась на 3,3%, несмотря на то, что их количество уменьшилось на 308.

5. Количество контрактов за 2018 год с ноября 2019 по февраль 2020 изменилось на 600. Больше всего контрактов «было добавлено» в Москве - 164, Ингушетии - 61 и Московской области - 53. У Краснодарского края, наоборот, количество контрактов уменьшилось на 27, у Новосибирской области на 12, а у Костромской на 11.

6. Сумма контрактов за 2018 год (с ноября 2019 по февраль 2020) увеличилась на 23 млрд. При этом больше всего увеличилась сумма контрактов Ямало-Ненецкого АО - на 12 млрд или 18%. На 3 и 4 млрд увеличились суммы контрактов Республики Башкортостан и Тюменской области.

7. За предыдущие годы суммы и количество контрактов изменяются меньше: сумма контрактов за 2017 год увеличилась на 10 млрд руб., количество - на 167; за 2016 год - сумма увеличилась на 1 млрд, количество - на 28; за 2015 год сумма увеличилась на 3 млрд, а количество на 18; за 2014 год сумма уменьшилась на 1,7 млрд руб. (или 2,5%), а количество увеличилось на 5.

8. В Республике Ингушетия, Ханты-Мансийском АО и Москве количество контрактов за 2014 год уменьшилось. Почему в 2020 году меняются данные по контрактам за 2014 год - отдельный вопрос.

Что из этого следует?
Во-первых, если вы делаете какие-то подсчеты по данным о госконтрактах, результат будет зависеть от даты выгрузки данных, даже если вы изучаете данные не за текущий или прошлый год, а пятилетней давности.

Во-вторых, пока нельзя однозначно сказать, когда правильнее всего собирать годовую статистику. Обычно она публикуется в начале года, но первые пункты показывают, как сильно меняются значения даже через полтора месяца после окончания года.

В-третьих, когда вы видите статистику госзаказа, опубликованную Минфином России, Федеральным Казначейством, Минэкономразвития, нужно учитывать, что она не только различается из-за (возможно) разных источников данных и методологий, но и сильно зависит от того, собираются ли эти данные в январе следующего года или в июле.

Вышло европейское исследование "Economic Value of Open Data: Opportunities for value creation in Europe (2020)" [1] с оценками рынка открытых данных в Европе.

Если кратко - €184 миллиарда сейчас и от €199.51 до €334.21 к 2025 году. Подробностей в докладе много, о них я лучше напишу подробнее уже после тщательного прочтения.

Пока обращу внимание на области которые там упоминаются как с потенциально наибольшим эффектом:
- Госуправление
- Профессиональные, научные и технические
- Информация и коммуникации
- Транспорт и хранение

Отчёт большой, примеров много, очень рекомендую его к прочтению.

Ссылки:
[1] https://www.europeandataportal.eu/en/highlights/the-economic-impact-of-open-data

#opendata #eu

Европейское исследование " Economic Value of Open Data: Opportunities for value creation in Europe (2020)"

Сколько ни пиши о госзакупках, всегда упомянешь дотационные республики (c)

Счетная палата РФ выпустила рейтинг регионального протекционизма в госзакупках выявив регионы в которых на поставщиков из этого же региона уходит 80-90% всех контрактов и общей суммы по всем контрактам. Об этом с утра пишет РБК [1], об этом можно прочитать на сайте "Госрасходы" [2] (проект Счетной палаты).

Можно из статьи и из рейтинга убедиться что в лидерах почти всегда несколько субъектов федерации, для которых очень было бы интересно сравнить уровень дотационности их бюджета и уровень их протекционистской политики.

Но то о чём не написали журналисты, так это то что изначально авторы работы считали не просто рейтинг протекционизма, а "степень интегрированности" субъектов федерации. На странице рейтинга можно открыть страницу каждого субъекта федерации и увидеть долю поставщиков из других субъектов федерации в контрактах для конкретного субъекта федерации.

Например, Республика Карачаево-Черкесия [3], распределение контрактов по суммам за 2019 год:
- 86.1% Карачаево-Черкесская республика
- 4.9% Москва
- 3.5% Ставропольский край
- 1.5% Краснодарский край
- 4% все остальные субъекты федерации.

Можно увидеть что несмотря на высокую дотационность, большая часть контрактов остаётся в республике и лишь небольшая часть уходит в другие субъекты федерации.

А вот другой пример, Новгородская область [4], противоположная крайность, структура их расходов на 2019 год:
- 28.8% Новгородская область
- 22.3% Санкт-Петербург
- 12.6% Ивановская область
- 11.5% Москва
- 8.9% Владимирская область

Можно увидеть что в самой области поставщики лишь на чуть менее 30% закрывают потребности госзаказчиков.

И так далее. В принципе любой желающий может замерить и составить ещё хоть не один десяток таких рейтингов.
Например:
- рейтинг влияния Москвы и Санкт-Петербурга на рынок госзаказа (по доле Московских и Питерских поставщиков);
- рейтинг интегрированности субъектов в федеральный округ - по доле сумм контрактов с субъектами федерации в своём федеральном округе;
- рейтинги протекционизма по отраслям - ИТ, строительство, фармацевтика, медицинские изделия и так далее

И так далее и тому подобное. Только на анализ данных по экономической связности и протекционизму могут уйти годы.

Как Вы уже догадались над рейтингом работала наша команда в Счетной палате. Мы продолжаем развивать аналитические инструменты портала Госрасходы и готовить новые интересные материалы.

P.S. Все данные доступны как открытые данные для выгрузки и повторного использования.

P.S.S. Напоминаю что у нас есть инициатива Дата лаборатория [5] партнерства с ВУЗами и исследовательскими центрами. Если у Вас нет своих ресурсов подсчитать какую-то сложную аналитику на уже выгруженных первичных данных, то мы можем с этим помочь.

Ссылки:
[1] https://www.rbc.ru/economics/26/02/2020/5e55460d9a79472e99363438
[2] https://spending.gov.ru/analytics/ratings/rating-protectionism/
[3] https://spending.gov.ru/analytics/ratings/rating-protectionism/09/
[4] https://spending.gov.ru/analytics/ratings/rating-protectionism/53/
[5] https://spending.gov.ru/datalab/

#opendata #procurement #goszakaz

Смитсонианский институт (США) выложил в открытый доступ около 2.8 миллионов изображений из своей коллекции, о чём они пишут в пресс-релизе на сайте [1] и теперь эти изображения доступны через поиск на сайте с пометкой "Open Access" [2]

2.8 миллиона изображений - это чуть более 2/3 от общего числа изображений в 4.4 миллиона изображений публиковавшихся и ранее на сайте института, однако теперь эти изображения доступны под лицензией Creative Commons Zero (CC0) что означает что их можно свободно использовать практически для любого проекта.

Что можно ожидать в ближайшем будущем, так это то что они будут активно интегрироваться в Википедию, поскольку для Википедии лицензионная чистота материалов - это одно из важнейших требований для всего что туда вносится.

Смитсонианский институт не единственный музей и архив оцифровывающий свои коллекции с переводом их в открытый доступ под свободными лицензиями. Это мировый тренд охватывающий десятки крупнейших культурных организаций.

Ссылки:
[1] https://www.smithsonianmag.com/smithsonian-institution/smithsonian-releases-28-million-images-public-domain-180974263/
[2] https://www.si.edu/search?edan_q=&edan_fq%5B0%5D=metadata_usage%3ACC0%20OR%20media_usage%3ACC0

#openacess #opendata

Евросоюз создает единую базу для распознавания по лицам как минимум в 10 странах членах союза [1] следует из материалов утекших и попавших в издание The Intercept [1].

Из комментариев экспертов в статье видно что не только Евросоюз, но и США да и другие страны идут тем же путём. Можно ли говорить о том что создание национальных и наднациональных баз распознавания лиц стало неизбежным?

Ссылки:
[1] https://theintercept.com/2020/02/21/eu-facial-recognition-database/

#digital #privacy

В прошлом году я немного намекал что Информационная культура будет помогать проектам с открытым кодом и про открытые данные и вот свершилось.

Мы запускаем 1-й раунд микрогрантовой программы для проектов с открытым кодом по темам: открытые данные, роботизированная (цифровая журналистика), цифровая архивация и цифровые права и приватность подробнее в анонсе [1] и на странице микрогрантового конкурса [2].

Заявки собираются с 24 января по 24 февраля, итоги подводятся на День открытых данных 2020 6 марта.

Общий фонд этого раунда 300 тысяч, максимальная заявка до 100 тысяч, вопросы пишите на [email protected] мы сам конкурс будем проводить максимально открыто и по заданным вопросам будем публиковать ответы на вопросы на странице конкурса и в ФБ Инфокультуры

Жюри: Иван Бегтин), Василий Буров, Мария Шклярук, Михаил Петров

Что я лично хочу от себя добавить:
1. Первый конкурс экспериментальный, мы по его итогам поймём какие направления будем фокусированно поддерживать грантами, на что подаются и тд.
2. Конкурс технический! Помните это направляя Вашу заявку. У него обязательно должен быть открытый код.
3. Если Вы уже ведёте проект с открытым кодом и хотите сделать что-либо полезное, то можно подать заявки и на нетехническую работу. Например, написать документацию к продукту или выступить на дне открытых данных и Вам нужно покрыть транспортные расходы. Но выступить всё равно надо будет про открытый код и по одной из заявленных тем.
4. Сейчас мы проводим этот конкурс от Инфокультуры, в будущем и стратегически ищем партнеров разделяющих наши ценности с которыми мы готовы совместно собирать призовой фонд.
5. Открытый код означает и свободные лицензии, не забывайте об этом, пожалуйста.
6. Все приведённые примеры проектов это то чем мы уже занимаемся. Мы не делаем заказ и не проводим тендер, Ваша заявка должна содержать Ваш проект.

Будут вопросы пишите не стесняясь и распространение приветствуется!

Ссылки:
[1] https://www.infoculture.ru/2020/01/24/contest-microgrants-infoculture-2020/
[2] https://www.infoculture.ru/microgrants/

#opendata #opensource #grants

RedHat опубликовали видеоисторию про Открытые данные в Чили [1] в рамках серии Open Source Stories. Вполне познавательно о том зачем открытые данные нужны

Ссылки:
[1] https://www.redhat.com/en/open-source-stories/starting-small-open-data

#opendata #opensource

Франция, Канада, Италия, Россия и Сингапур - страны с наиболее растущим технопессимизмом. Источник: Edelman Trust Barometer 2020

В рейтинге свежем восприятия коррупции от Transparency Int. Россия оказалась на 137 месте из 180 [1]. Низкий ли это уровень? Это уровень беднейших стран Африки и Юго-Восточной Азии

Если посмотреть на этот же рейтинг в региональном разрезе, то в регионе "Easter Europe & Central Asia" (не включают восточноевропейские страны ЕС), Россия по уровню коррупции находится на 10 месте из 12, чуть выше, на 9м месте, Азербайджан, Украина и Киргизстан, и чуть ниже, на 11 месте, Узбекистан и Таджикистан. Из стран постсоветского пространства наибольшие оценки только у Грузии.

Если смотреть страны G20, то скорее всего Россия на последнем месте, пытливые умы могут воспользоваться открытыми данными [2] рейтинга и сами подсчитать суб-индексы в территориальном разрезе.

Я напомню что рейтинг Трансперенси не единственный, есть множество других прямых или косвенных аспектов измерения коррупции, эффективности и доверия к государству. Например, Edelman Trust Barometer даёт обзор уровня доверия граждан не только органам власти, но и другим общественным институтам. В их обзоре 2019 года у России одни из худших показателей [3] и только что вышел их доклад за 2020 год [4] и Россия там на последних местах.

Ссылки:
[1] https://www.transparency.org/cpi2019
[2] https://files.transparency.org/content/download/2450/14822/file/2019_CPI_FULLDATA.zip
[3] https://www.edelman.com/sites/g/files/aatuss191/files/2019-03/2019_Edelman_Trust_Barometer_Global_Report.pdf
[4] https://cdn2.hubspot.net/hubfs/440941/Trust Barometer 2020/2020 Edelman Trust Barometer Global Report.pdf

#opendata #opengov

Поиск по наборам данных от Гугл, Dataset Search [1], вышел из беты и в их посте в блоге рассказывается как он развился [2]
В первой вышедшей из беты версии появились:
- более 25 миллионов наборов данных из которых более 2 миллионов из data.gov (США)
- фильтрация по типу набору данных, геолокации и режиму доступа (открытый/не открытый)
- поиск адаптировали под аудиторию ищущую наборы данных

Российские данные пока доступны через агрегатор data.wu.ac.at который собирает с порталов на базе движка CKAN по всему миру наборы данных и отдает в формате метаданных для Google. Например, данные Хаба открытых данных [3] доступны именно через него [4].

Что значит что будем это исправлять и интегрировать в необходимом формате. Тем временем, напомню что это не единственный поисковик по данным в мире.

Существуют также:
- DataSearch (Elsevier) [5] - поиск по научным данным от Elsevier
- Magda [6] - австралийский движок для индексации и поиска по данным, используется в data.gov.au

Ссылки:
[1] http://g.co/datasetsearch
[2] https://blog.google/products/search/discovering-millions-datasets-web
[3] http://hubofdata.ru
[4] https://datasetsearch.research.google.com/search?query=hubofdata.ru
[5] https://datasearch.elsevier.com
[6] https://magda.io/

#opendata #datasets #search

История с блокировкой Startmail.com [1] - это какая-то особая форма глупости со стороны регуляторов. Причина проста - блокировки в России покрывают исключительно трафик относящийся к http/https запросам и не затрагивают электронную почту. Правда глупость тут не только в невозможности спецслужб выявить генераторов писем о минировании, но и в реакции правоохранительных органов на подобные анонимные письма. Реальная проблема и какая-то нереально неэффективная работа по её исправлению.

Ссылки:
[1] https://www.rbc.ru/rbcfreenews/5e2980589a79478385d6a6e2

#email #security

До дня открытых данных [1] осталось 45 дней и ещё не поздно зарегистрироваться и принять участие!

Каждый год день открытых данных мы проводим как негосударственное некоммерческое мероприятие проходящее по всему миру и конкретно в Москве организуем его мы в @infoculture

Если Вы хотите принять участие как докладчик, партнер, а может быть даже и спонсор(!) напишите на [email protected] обязательно. Если Вы решите провести мероприятие у себя в регионе, тоже напишите нам и мы поможем привлечь больше участников.

В дне открытых данных принимают участие представители НКО, преподаватели, чиновники, представители бизнеса, активисты и все кто деятельно работает с данными во всех их формах и ипостасях.

Помните что открытость - это то что мы делаем своими руками!

Ссылки:
[1] http://opendataday.ru/msk

#opendata #opengov

В середине ноября мы запустили новый проект Счетной палаты РФ «Госрасходы», в котором не только агрегируем данные о госфинансах из разных источников, но и анализируем их, а также формируем профили каждого национального проекта. Чаще всего пользователи спрашивали у нас API к данным. Теперь он открыт, бесплатен, документирован и готов к использованию в ваших проектах и исследованиях. Вся информация о API и документация доступны по ссылке: https://spending.gov.ru/pages/devs_api/

Вышел отчёт The state of Open humanitarian data [1] о доступности данных о гуманитарных катастрофах. Отчёт создан центром по гуманитарным данным при ООН [2] который собрал более 17 тысяч наборов открытых данных о 253 территориях из 1251 источника на 23 января 2020 года [3].

Отчёт полезен как отчёт о деятельности самого центра и как пример кооперации большого числа организаций оказывающих гуманитарную помощь. Сам проект по сбору данных мог бы быть хорошим примером МЧС по координации помощи при катастрофах в Российской Федерации.

Ссылки:
[1] https://centre.humdata.org/wp-content/uploads/2020/01/StateofData2020.pdf
[2] http://www.humdata.org/
[3] https://data.humdata.org/

#opendata #un #humdata

РБК пишет что в ФАС определились с требованиями к предустановке российского ПО на устройства [1], по крайней мере на уровне согласованной позиции внутри ведомства.

Предполагается по датам введение регулирования пред-установки российского ПО:
с 1 июля 2020 года предустановка российского ПО станет обязательной для всех смартфонов;
с 2021 года — для планшетов;
с 2022 года — для компьютеров;
с 2023 года — для Smart ТВ и ТВ-приставок.

И наличие 3-х критериев:
- право на ПО принадлежит российскому лицу;
- ПО реализуется на территории России;
- разработчик в течение последних пяти лет не нарушал закон в области персональных данных.

Для каждого вида товара будут установлены разные перечни видов софта. Предварительно для смартфонов это: поиск, антивирус, навигатор (карты), мессенджер, социальные сети, госуслуги, персональная платежная система МИР.

По текущей концепции получается что за пред-установку ПО отвечает производитель, не дистрибьютор.

Остаётся при этом очень много вопросов:
1. В целом это регулирование не про защиту прав потребителей, а про локализацию перс данных и операторов коммуникаций в России.
2. Что будет делать Apple которые вообще не предполагали подобной предустановки ПО, будут ли они реально уходить из России?
3. Начнётся ли "охота на ведьм" и борьба с "серым рынком" смартфонов без предустановленного российского ПО? Мы ведь понимаем что не все телефоны реализуются через салоны связи и интернет магазины.
4. Будут ли эти программы удаляемыми?

Я не могу припомнить ни одной страны с аналогичным регулированием. И, если его внедрение не провалится в России, то как бы такое не начали делать и многие другие страны.

Ссылки:
[1] https://www.rbc.ru/technology_and_media/22/01/2020/5e2872179a79471f2dd6bf11?from=from_main

#privacy

Десятки тысяч международных студентов и работников из других стран в Канаде получили визы автоматически за счёт роботизированных алгоритмов. Vancover Sun пишут об этом в статье "Douglas Todd: Robots replacing Canadian visa officers, Ottawa report says" [1]. Во внутреннем отчете департамента иммиграции страны упоминается о применении алгоритмов автоматического принятия решения и раздражённости граждан их применением.

Ссылки:
[1] https://vancouversun.com/opinion/columnists/douglas-todd-robots-replacing-canadian-visa-officers-ottawa-report-says

#ai #privacy #algorithms #canada