Экстраполяция IT. Страница 3
3907
@itextrapolation
Канал об IT в целом и о программировании в частности.
-
Экстраполяция IT
Смотрите, OpenAI предлагает инструмент, определяющий вероятность того, что входящий текст сгенерирован нейросетью, а не написан человеком. Вообще молодцы, придумывают генерацию текста и сразу же предлагают контринструмент. Но вот беда, на мой взгляд, тут в том, что рано или поздно определить искусственность текста можно будет, как погоду в анекдоте про синоптиков. Ну, в том, где синоптики хвастаются, что научились определять погоду с вероятностью 30%, а им предлагают всегда говорить наоборот, чем самым повысить вероятность угадать погоду. Есть один очень крутой способ тренировать нейросети, когда по факту создаются две нейросети, одна генерирует результат, а вторая пытается отличить его от настоящих данных. Сначала тренируем первую, потом вторую, потом опять первую и так до упора. Примером всегда приводят фальшивомонетчика и банка. «Фальшивомонетчик» пытается нарисовать купюру, а «банк» отличить её от настоящих купюр. Ну вы поняли, в общем. Работает этот алгоритм, когда и банк и фальшивомонетчик умны приблизительно одинаково, чтобы часть нарисованных экземпляров можно было бы отметить более удачными, чем другие. Потом наоборот, фальшивомонетчик учится рисовать купюры так, чтобы банк опять их не мог отличить от настоящих. «Состязательные нейросети» погуглите, кароч. Там рано или поздно генератор становится настолько хорош, что дискриминатор уже не в состоянии найти внятной разницы. Часть настоящих купюр считает поддельными и наоборот, часть поддельных — настоящими. Так вот, с определением искусственности автора работы со строгими данными, вроде купюр, довольно просто. С нестрогими данными, вроде фотографий, картин, аудиофайлов чуть посложнее, но всё ещё довольно решаемо, ведь размер входных данных довольно большой и датасеты «настоящих» данных тоже огромные. С текстом же всё становится очень сложно. Единица смысла там — слово или может быть даже предложение. Человеческий текст довольно часто с ошибками, как логическими, так и орфографическими и часто с пробелами в логике. Входных данных сравнительно мало, датасет ненормализированный, да и с настоящими данными беда тоже. Некоторые вообще пишут так, что лучше бы нейросети писали, ейбогу. В общем, ложноположительных и ложноотрицательных результатов такие дискриминаторы будут выдавать так прилично. Даже предположу, что это будет в формате «этот текст с вероятностью 67% написан нейросетью», что будет означать приблизительно ничего. А всё, что сможет сказать конкретно OpenAI, так это что-то вроде «да, этот текст сгенерировал я два дня назад, не ставьте зачёт этому студенту». Ещё одна мысль по этому поводу о том, что если каких-то данных достаточно, чтобы определить, что текст написан не автором, то этих же данных будет вполне достаточно, чтобы сгенерировать такой текст, который нельзя будет отличить от авторского. -
Экстраполяция IT
Прям сейчас в небе можно увидеть завораживающее событие. Не пропустите. -
Экстраполяция IT
Принципиально существует два разных метода к организации данных приложения. Первый условно называем «простое чтение, сложная запись», а второй подход обратный первому — «сложное чтение, простая запись». И вообще любая логика программ находится где-то на этой шкале, между описанными крайностями. Простой и утрированый пример — это когда вам хочется посчитать количество коментариев к публикации, то для этого можно сделать джойн с каунтом, а можно коллбеком инкрементировать comments_countв основной записи. Сложновастенько и нетранзакционно, но потом при чтении не надо будет джойны делать. Короче, у вас либо простое чтение, но с записью нужно заморочиться, либо наоборот. Повсеместный подход вообще во всех маленьких, но амбициозных приложениях — это начать с простой записи и сложного чтения. Когда и джойны маленькие и количество записей в табличке не то, чтобы такое большое. А потом уже эволюционно приходим к тому, что и счётчики кешировать нужно и рядом сparent_idещё иgrandpa_idдержать бы хотелось. С опытом приходишь к мысли, что так делать нужно уже сразу в маленьком новеньком приложении, когда имена табличек в базе данных ещё наизусть назвать все можешь. Есть, конечно, в этом и кардинальные, так сказать, проблемы, которые нужно решать. Но куда ж без них-то, без проблем этих. -
Реклама
-
Экстраполяция IT
Принципиально существует два разных метода к организации данных приложения. Первый условно называем «простое чтение, сложная запись», а второй подход обратный первому — «сложное чтение, простая запись». И вообще любая логика программ находится где-то на этой шкале, между описанными крайностями. Простой и утрированый пример — это когда вам хочется посчитать количество коментариев к публикации, то для этого можно сделать джойн с каунтом, а можно коллбеком инкрементировать comments_countв основной записи. Сложновастенько и нетранзакционно, но потом при чтении не надо будет джойны делать. Короче, у вас либо простое чтение, но с записью нужно заморочиться, либо наоборот. Повсеместный подход вообще во всех маленьких, но амбициозных приложениях — это начать с простой записи и сложного чтения. Когда и джойны маленькие и количество записей в табличке не то, чтобы такое большое. А потом уже эволюционно приходим к тому, что и счётчики кешировать нужно и рядом сparent_idещё иgrandpa_idдержать бы хотелось. С опытом приходишь к мысли, что так делать нужно уже сразу в маленьком новеньком приложении, когда имена табличек в базе данных ещё наизусть назвать все можешь. Есть, конечно, в этом и кардинальные, так сказать, проблемы, которые нужно решать. Но куда ж без них-то, без проблем этих. -
Экстраполяция IT
Всё больше и больше слышно про то, что ИИ оставит без работы вообще всех. Разработчиков, художников, тестировщиков, юристов, охранников и пилотов. Кого забыл? Оказаться за пределами профессии, потому что не «шмогла я, не шмогла» освоить новый инструмент — это проблема явно не инструмента. Хотите быть востребованным, ничего не делая для этого — скоро окажетесь в ситуации современных делфи-разработчиков или проектировщиков с ватманами и карандашами разной плотности. На видео — работа мясного человека, который с помощью нейросетей представил свой вариант знаменитого танца. -
Экстраполяция IT
Всё больше и больше слышно про то, что ИИ оставит без работы вообще всех. Разработчиков, художников, тестировщиков, юристов, охранников и пилотов. Кого забыл? Оказаться за пределами профессии, потому что не «шмогла я, не шмогла» освоить новый инструмент — это проблема явно не инструмента. Хотите быть востребованным, ничего не делая для этого — скоро окажетесь в ситуации современных делфи-разработчиков или проектировщиков с ватманами и карандашами разной плотности. На видео — работа мясного человека, который с помощью нейросетей представил свой вариант знаменитого танца. -
Экстраполяция IT
Однажды Архимед сказал: «Дайте мне тесты и я отрефакторю легаси» (с) -
Экстраполяция IT
Эй, новички в программировании, вот вам лайфхак как правильнее всего научиться программировать или познакомится с новым языком и фреймворком. Забейте на код и научитесь писать тесты. Увидели новый фреймворк? «Как тут у вас тесты пишутся?» — должен быть первый и самый главный вопрос к документации. Новый язык или библиотека начинать изучаться могут только из секции «tests», а уж потом можно переходить к секции «how to install». Вы всё-равно будете по тысячу раз в минуту проверять работоспособность написанного кода. Вы будете экспериментировать с новыми конструкциями, концепциями и структурами. Делайте это сразу автотестами. -
Экстраполяция IT
Часть проблем, которые приписывают айтишникам, свойственны всем людям любых профессий. Одно из самых очевидных и легко идентифицируемых проблем — это желание переделать все с нуля. И с программированием тут дела обстоят точно так же, как и, скажем, с сантехникой. Если в нашей отрасли эксперта, который предлагает переписать все на другом языке или фреймворке пытаются как-то образумить, слушают его и допускают его гипотетическую правоту, то сантехника со взглядами «Петрович, тут всю систему менять нужно» и «предыдущий сантехник был идиот, сейчас все переделаем с нуля» считают неквалифицированным и работу поручать не хотят. Конечно же, чем опытней специалист, тем завуалированней это самое его «давайте все переделаем с нуля». С опытом приходят изыски вроде «концепция изначально была выбрана неверно», «устранить ошибку лучше сразу фундаментально» и «используемые инструменты устарели и новый фреймворк лишён недостатоков из коробки». Но это все то же старое доброе «тут уже ничего не справить, жги». Конечно же, есть ситуации когда действительно нужно все переписать и действительно исправлять выйдет дороже, но это стоит считать крайней мерой, когда все остальное уже перепробовано и отвергнуто. Такое предложение хорошо бы слышать от человека, который знаком с системой, знает все исторические вехи и понимает почему было принято то или иное решение в прошлом. Предложение переписать все нахрен ни в каких случаях недопустимо от человека только что присоединившегося к проекту. #перечитываяэкстраполяцию -
Экстраполяция IT
Каждый разработчик без проблем и промедлений может сказать хороший или плохой вот этот вот кусок кода. Вот прям посмотрит и сразу скажет. А уж потом, после тщательного анализа и ковырянии сможет хоть как-то внятно сформулировать почему же код на самом деле говно. Это всё потому, что такие критерии вторичны. Код сначала говно, а уже потом говно по какой-то конкретной причине. -
Экстраполяция IT
Критерий хорошего кода. Основным показателем хорошо структурированного и написанного кода является его способность заменять библиотки. Совсем вырожденный сферическо-единорожный случай, которого не существует в природе — это когда был PostgreSQL, а заменили на MySQL с минимальным изменением кода. Понятное дело, такого не бывает, конечно, но критерий хорошо написанного кода демострирует хорошо. Более частый и менее совоглобусовый случай — обновление мажорных версий библиотек и языков программирования. Чем проще и чем с меньшими неожиданностями сталкивается разработчик при обновлении библиотек, тем лучше и качественней кодовая база. Конечно, это вовсе не означает, что если вы просто написали npm updateи у вас всё завелось с полпинка, то у вас идеальный код, вовсе нет. Скорее это повышает уверенность или вероятность того, что код хороший. Не то, чтобы прям «критерий», но больше некая лакмусовая бумажка, получается. -
Экстраполяция IT
В школе и университете грамоты мне казались чем-то несущественным и вообще не стоящим никакого внимания. Но тогда они и правда были несущественными. Сейчас наоборот — это повод для гордости. Спасибо всем, кто вместе со мной делает эти добрые дела. Я далеко не всё пишу в канал из того, что мы делаем, но если кто-то хочет присоединиться к нам в этом нелегком деле — ссылка всегда есть в описании к каналу. Спасибо. 
-
Экстраполяция IT
На хамбл-бамбл продают пак книг по функциональному программированию. За $18 можно урвать неплохую коллекцию книг. Хорошее времяпрепровождение, когда света нет, а читалка заряжена. www.humblebundle.com/books/f…rs-books -
Экстраполяция IT
#волонтерство Збір на обладнання для прикордонників зі "Шквалу", які боронять північні кордони нашої Батьківщини. Плануємо придбати чотири телевізори для забезпечення роботи координаційного центру. Орієнтовна вартість - 76000 грн. Посилання на mono-банку: https://send.monobank.ua/jar/64gCsedWDM Номер картки: 5375411204972462Вдячний всім, хто приєднається! Слава ЗСУ. Все буде Україна.
-
Экстраполяция IT
Чем клево число Пи? Во-первых и основных это иррациональность и трансцендентность этого числа. Технически это означает, что π нельзя представить никаким другим числом. В том смысле, что его нельзя предствить в виде корня какого-то другого многочлена с целыми коэффициентами и нельзя представить в виде дроби простых чисел (m/n). Число π бесконечно и непериодично в десятичном представлении. А это значит, что теоретически в числе π найдется любая другая подпоследовательность. Нужно только хорошо ее поискать. А совсем недавно, по меркам открытий, нашли формулу, которая позволяет вычислять любой знак числа пи без вычисления предыдущих, и эта формула относительно проста. И тут понеслось. Раз мы знаем, что в числе π спрятана любая последовательность чисел и по указанному смещению и длине мы с легкостью можем вычислить эту подпоследовательность, то можно «спрятать» в числе π любой файл, программу или секретный код, главное, чтобы он выражался через числовую последовательность. В итоге в числе π уже есть «Война и мир», исходный код всех операционных систем, все фотографии, которые все человечество когда-либо сделало или сделает. Нужно просто хорошенечко поискать. Конечно же, искать подпоследовательность хотя бы в 50 мегабайт очень долго и тяжело, но вот после того, как найти такую подпоследовательность, этот файл можно выписать себе на листик в виде смещения в π и длинне подпоследовательности. Сжатие в 100%! Никаким «зипам» и «рарам» это и не снилось! К сожалению не все так радужно, как хотелось бы. И дело не в том, что такую подпоследовательность очень долго искать -- закон Мура говорит нам, что искать таки можно и в будущем будет это легко. Дело в том, что такое смещение вполне вероятно будет занимать больше места, чем сам файл. Ну ничего, давайте файл разобъем на более мелкие кусочки, скажем в 640 килобайт, а их уже будем прятать в π. Тогда на смещение в 640КиБ нам нужно будет потратить, скажем, 2Киб, и тогда сжатие будет не 100%, а ~99%. Звучит более реалистично и вполне реализуемо. Более того, уже даже файловая система такая есть, основанная на этом незамысловатом принципе. Работает, конечно, медленно, но работает. https://github.com/philipl/pifs #перечитываяэкстраполяцию -
Реклама
-
Экстраполяция IT
Я думаю, совершенно никто не будет спорить с тем утверждением, что порно с несовершеннолетними — это то, чего существовать не должно в принципе и безопеляционно. Ни при каких условиях. В первую очередь это не должно существовать не потому, что это кто-то увидит, а потому, что это нужно как-то и с кем-то снимать. В то же время, современные нейросети уже научились генерировать видеоконтент паршивого качества и картинки довольно приличного. Значит скоро и видео приличного качества тоже будет. А в видео этом то, чего никогда не было и не существовало. Так сказать, додумать, усреднить и подменить. Если можно сгенерировать самурая Рона Уизли, то можно вообще всё, что угодно. Очень интересно, какой у этого будет юридический и правовой подход в ближайшем будущем. 
-
Экстраполяция IT
Недавно на канале «Клятий Раціоналіст» я услышал, что оказывается пирамиды Маслоу не существует. Ну, там не всё так однозначно, конечно, но смысл в том, что это весьма условное понятие, с кучей контрпримеров и опровержений. И вообще это не пирамида, а ступеньки. Но вот фишка, что на себе я весьма ощутимо прочувствовал всю мощь этой несостоятельной теории. Будучи под оккупацией в начале года вот совершенно не думалось о этих ваших стартапах, статических языках программирования и управлении проектами. Весь день уходил на то, чтобы найти что пожрать и попить и не умереть от шальной пули. После эвакуации стало немного проще и речь зашла об социальных связях и взаимоотношениях. Уже после налаживания связей, можно было что-то говорить о более высоких материях. Сейчас, когда свет или вода может отсутствовать часов по двадцать, тоже жизненные потребности и требования к окружению сильно снизились и радоваться можно уже даже просто горячему душу или работающему интернету. И практические навыки мой мозг ценит сейчас совсем другие. Вроде умения паять паяльником, разбираться в DC-DC инвенторах, быстро в уме переводить ватт-часы в ампер-часы и наоборот. Короче, это я так высокопарно оправдываюсь почему тут затишье в «Экстраполяции». Потому что я скатился на пару ступеней пирамиды Маслоу вниз и вещаю сейчас отсюда. -
Экстраполяция IT
Привет. Зайдите, пожалуйста, нажмите upvote. Ну, и пользуйтесь, кому надо, это бесплатно. Спасибо. www.producthunt.com/posts/t…or-slack