Расскажи анекдот

* * * * *

В шапке сайта Российского научного фонда, основного нынешнего источника грантового финансирования науки. В ней размещен слоган «Открытость. Компетентность. Результат» и изображение атомного ледокола.

Нет, анекдот не в том, что после всей этой увлекательной истории с реформой Академии наук я почему-то сразу ощутил себя ледовым полем.

Анекдот в том, что, как любезно сообщает нам Википедия, «Ледокол "Россия" переведен в отстой по причине отсутствия ядерного топлива для очередной кампании и отказе в продлении моторесурса реактора. По планам, утилизация состоится после 2015 года».

Семнадцатое апреля, звериный оскал зимы под окном.

Цитата для размышлений. | ❝ Логика может дать огромную пользу лишь при одном условии: вовремя прибегать к ней и вовремя из неё выбегать. ❞ — Умберто Эко

* * * * *

У логики есть нечто, что роднит её с большими суммами денег, курсом высшей математики, восхождениями на Эверест и групповым сексом — чужие идеи об отказе от неё вызывают наибольший энтузиазм у людей, которые никогда ей и не владели.

IT-специалист Б. занимается вопросами обучения и эксплуатации нейросетей. Режимы обучения и работы у нейросетей разделены, во время работы сеть не учится — не изменяется — или делает это очень медленно. Окружающий же мир — источник входных данных — зачастую склонен так или иначе изменяться, и раз сеть этого не делает — она утрачивает адекватность.

Общим местом в профессиональной среде Б. считается, что нет смысла «дотягивать» старую сеть до адекватности, нужно обучать новую.

Потому что сети крепко застревают в локальных максимумах — чтобы добиться более высокой эффективности, требуется временное снижение эффективности, а выходить из зоны комфорта не любят даже наборы весовых коэффициентов.

Потому что в сетях накапливаются «мёртвые» нейроны, для которых «новое» настолько непохоже на «старое», что они перестают активироваться вообще, а, значит, не могут и обучаться, а, значит, лежат балластом и снижают ёмкость сети.

Потому что на данный момент ни на одной задаче для сети нет никакого интереса приводить свое «внутреннее представление» о структуре данных в хоть какое-то соответствие с порождающей их структурой «реального мира» — и поэтому небольшое изменение в системе порождения данных, как правило, не может быть учтено столь же небольшой корректировкой настройки сети; напротив, в общем случае оно требует неадекватно глубокой её перестройки.

Потому что, соответственно, сети склонны упорно недооценивать изменения нюансов входных данных и сводить их к погрешности, то есть крайне неохотно на них обучаться.

Потому что, соответственно, типична ситуация, когда сеть — да и её операторы — игнорирует дрейф данных до тех пор, пока описание этого дрейфа не становится сложнее описания самих данных. После этого сеть идёт под списание: для коррекции ошибок нужно добавить к ней структуру, более сложную, чем исходная.

(Нет, в принципе, эффективно работающую сеть можно заставить выучить нечто новое. Это новое нужно показать ей очень ярким, несводимым к старому образом. Потрясти. Шокировать. Но при этом нужно ещё, чтобы у неё хватило резервов ёмкости это в принципе распознать и усвоить).

Всё это Б. регулярно наблюдает в ходе своего рабочего процесса. Когда он вспоминает, что он тоже нейросеть, ему иногда делается несколько неуютно.

В какой-то параллельной реальности Ассоль каждый вечер вглядывалась через телескоп в диск садившегося за край мира солнца, иногда обнаруживая медленно проплывающие по нему чёрные точки. После долгого анализа статистики она писала на карте: «here be dragons».

Глаза околачивавшихся рядом бездарных художников вспыхивали энтузиазмом.

А вы согласны, что человек любящий черный юмор - позитивный человек?

* * * * *

Я полагаю, что если вместо того, чтобы над юмором смеяться, мы начинаем его сосредоточенно рассортировывать на чёрный, добрый, английский, программистский, сексистский и т.п. — то юмор прежде всего хуёвый.

(Принцип "что легко классифицируется — не заслуживает внимания, что заслуживает внимания — не классифицируется" вообще работает в очень многих сферах).

А если человек готов любить любую разновидность юмора целиком и без разбору — он, может, и позитивный, но неглубокий до такой степени, что практически плоский (нет, речь не о сиськах).

В соседнюю деревню @codesnik принёс ящерицу со встроенным клеточным автоматом: https://www.nytimes.com/2017/04/12/science/ocellated-lizards-scales-cellular-automata.html Точнее, с несколькими тысячами чешуек, каждая из которой может быть чёрной или зелёной, и за время жизни ящерицы может неоднократно поменять цвет в зависимости от цвета соседних чешуек.

Первым делом надо выяснить, является ли ящерица тьюринг-полной.

(и если нет, поставить генетикам соответствующую задачу)

Вторым — написать за Грега Игана рассказ про цивилизацию, живущую в симуляции, запущенной на гигантской ящерице.

Третьим — рассмотреть возможность того, что наша цивилизация существует в симуляции, запущенной на гигантской ящерице.

И задуматься над тем, не делают ли какие-то действия нашей цивилизации эту ящерицу слишком заметной, повышая тем самым её шансы быть сожранной.