Попадание, пропуск, ложная тревога

Сигнал — это мошенничество

В Hook Line мир двоичен, а экран — это папка входящих. Сообщения приходят по одному, и под каждым две кнопки: пометить мошенничество или довериться ему. Ни промежуточных вердиктов, ни «может быть, позже», ни апелляций. Сама папка входящих детерминирована и строится по зерну: при заданных зерне и уровне упорядоченная последовательность сообщений каждый раз одна и та же. У каждого сообщения два скрытых свойства — мошенническое ли оно и насколько оно неочевидно по шкале от одного до трёх, — и ни одно из них вам не показывают. Первое приходится выводить из одного лишь текста. Зато потом игра всё рассказывает: за каждым вердиктом следует истина, а за мошенничеством — перечень тревожных признаков, которые оно несло. ²

Эта скрытая двоичная величина и есть сигнал. Сигнал — это мошенничество. Всё остальное — шум: шум настоящих писем, похожих на всё, что вы когда-либо читали, шум писем, которые старательно притворяются настоящими, шум ваших собственных предположений о том, кто и зачем вам пишет. Устройство Hook Line просто в скелете, но намеренно в своём давлении. Вы не просто читаете — вы классифицируете в условиях неопределённости. И всякая классификация попадает в одну из четырёх ячеек.

Эти четыре ячейки — не просто таблица начисления очков, это словарь теории обнаружения сигнала. Попадание — то, что вы получаете, пометив мошенничество. Пропуск — то, что случается, когда вы доверяете мошенничеству. Ложная тревога — то, чем вы расплачиваетесь, пометив настоящее письмо. ¹ Правильное отрицание — то, что вы зарабатываете, доверившись настоящему письму. Итоговая карточка игры — это матрица ошибок, а ваш баланс — функция потерь, которая учит вас, какие ошибки болезненнее прочих.

Четыре исхода простыми словами

Пройдёмся по четырём исходам так, как они выглядят в игре. Попадание — приятный щелчок: вы помечаете письмо, которое и вправду оказалось мошенничеством, и игра начисляет на ваш счёт 50. Это ощущается как мастерство. Пропуск резче: вы доверяете мошенничеству, и игра списывает 200. Вот это уже серьёзно. Каждый раунд начинается с 1000, так что один-единственный пропуск стоит пятой части стартового баланса, и ничто не мешает текущему итогу уйти ниже нуля — на нуле обрезается только итоговый результат для таблицы лидеров. Асимметрия сделана намеренно. Довериться мошенничеству куда дороже, чем пометить настоящее письмо, и игра хочет, чтобы вы почувствовали эту разницу своим балансом. ²

Ложная тревога — цена осторожности. Вы помечаете настоящее письмо, и игра списывает 60. Штраф меньше, чем за доверие мошеннику, но всё равно щиплет. Баланс вы не потеряли целиком, зато потратили время и доброжелательность, подняв тревогу там, где её поднимать не следовало. Правильное отрицание — тихая победа: вы доверяете настоящему письму и получаете те же 50. Это не так эффектно, как попадание, но это ровное накопление здравого суждения. ²

Сопоставьте их с терминами теории обнаружения сигнала — и соответствие окажется точным. Пометить мошенничество → попадание. Довериться мошенничеству → пропуск. Пометить настоящее письмо → ложная тревога. Довериться настоящему письму → правильное отрицание. Четыре исхода — не просто ярлыки: так игра объясняет вам, что «правым» можно быть двумя разными способами и неправым тоже двумя. Разница между попаданием и ложной тревогой не в том, пометили ли вы письмо, а в том, был ли там сигнал. Разница между пропуском и правильным отрицанием не в том, доверились ли вы, а в том, отсутствовал ли сигнал. ¹

Чувствительность: способны ли вы увидеть разницу?

Теория обнаружения сигнала отделяет способность от стиля. Ваша способность отличать сигнал от шума — это чувствительность, которую чаще всего измеряют показателем d′ (d-штрих). В Hook Line чувствительность — это ваше умение прочесть сообщение и вывести скрытую истину лучше, чем наугад. Если бы скрытые метки были видны, чувствительность не значила бы ничего. Но они не видны. Опираться приходится на текст: доменные имена, спешку, приветствия, просьбы, ссылки. Каталог игры оценивает неочевидность каждого сообщения по трёхбалльной шкале — единица для явного, тройка для тонкого, — и чем выше оценка, тем слабее приметы и тем тише сигнал на фоне шума обыденности. ²

Вот здесь и начинает кусаться система уровней. В раунде четыре сообщения плюс номер уровня, но не больше десяти, а минимальная неочевидность растёт вместе с вами: единица на уровнях 1 и 2, двойка с уровня 3, тройка с уровня 5. Так папка входящих разрастается с пяти сообщений до десяти и дальше не растёт, зато нижняя граница неочевидности под ней поднимается. С пятого уровня каждое стоящее перед вами сообщение взято из пула неочевидности 3, из самых трудных для чтения, и разобрать их надо девять, а с шестого уровня и дальше — десять, а не пять. А подняться можно, только разобрав папку начисто: кнопка перехода на следующий уровень появляется лишь тогда, когда вы закончили, не доверившись ни одному мошенничеству и не пометив ни одного настоящего письма. Одни и те же зерно и уровень всегда восстанавливают одну и ту же упорядоченную папку входящих. Ваша чувствительность не есть нечто неизменное — среда облагает её налогом. ²

Заметьте: чувствительность не в том, сколько сообщений вы помечаете. Она в том, насколько хорошо вы различаете две совокупности. Если помечать всё подряд, вы поймаете много мошенничеств (высокая доля попаданий), но и пометите много настоящих писем (высокая доля ложных тревог). Ваш d′ при этом может остаться низким, потому что распределения вы на самом деле не разделяете — вы просто выбрали одну сторону и надеетесь. Нарастающая неочевидность бьёт прямо по этому: распределения перекрываются сильнее, а угадывание обходится дороже. ¹

Смещение: где вы проводите черту?

Допустим, ваша чувствительность зафиксирована. Изменить результат вы всё равно можете — сместив черту, которую проводите. Это и есть смещение, или критерий принятия решения: то, насколько один ответ вероятнее другого. В Hook Line критерий — это внутренний порог, на котором вы перестаёте читать и нажимаете «довериться» или «пометить». Осторожный игрок хочет весомых доказательств подлинности письма, прежде чем ему довериться, и потому помечает охотно; доверчивый требует меньшего и жмёт «довериться» раньше. Асимметричные штрафы игры толкают разумный критерий в сторону осторожности. ¹

Почему? Потому что доверие мошенничеству стоит 200, а пометка настоящего письма — всего 60. Пропуск обходится более чем втрое дороже ложной тревоги. Если вы не уверены, рационально склоняться к пометке. Приложим к этому числа: пометка даёт +50, когда вы правы, и −60, когда ошибаетесь; доверие — +50 при правоте и −200 при ошибке. Значит, пометить выгоднее, как только вы считаете вероятность того, что письмо мошенническое, превышающей примерно 31 процент — грубо говоря, три шанса из десяти. Это критерий «бережёного бог бережёт», и именно он минимизирует ожидаемые потери при тех ценах, которые назначила игра. Прямо об этом игра не говорит — она даёт почувствовать это по балансу. Доверяя, вы будете терять быстрее, чем помечая, и это ощущение и есть урок о расстановке критерия. ²

Смещение не зависит от чувствительности. Можно быть осторожным и при этом обладать слабой чувствительностью: вы часто помечаете, так что мимо вас мало что проходит, но вы же сжигаете шестьдесят за шестьюдесятью на настоящих письмах, которые не сумели различить. Можно быть доверчивым и обладать хорошей чувствительностью: ложных тревог вы поднимаете мало, зато каждое непрочитанное мошенничество стоит 200. Устройство игры делает этот размен видимым. Те же сообщения, другие критерии, другие исходы. Четыре исхода — не просто результаты, это диагностика вашей стратегии. ¹

Матрица ошибок как игровое поле

Представьте четыре исхода как ячейки таблицы 2×2. По одной оси — истина: мошенничество или настоящее письмо. По другой — ваш вердикт: пометить или довериться. Заполните ячейки — и перед вами матрица ошибок. Пометить мошенничество → попадание. Довериться мошенничеству → пропуск. Пометить настоящее → ложная тревога. Довериться настоящему → правильное отрицание. В реальном времени игра этой таблицы не показывает, а её сводка в конце раунда заполняет матрицу лишь наполовину: два рода ошибок она приводит порознь — сколько мошенничеств принято на веру и сколько настоящих писем помечено, — но попадания и правильные отрицания сваливает в один счётчик верно разобранных. След же вся матрица оставляет на балансе: каждый щелчок двигает его на число из своей ячейки. ²

Вот эта таблица так, как её видит игра:

Это не абстракция. Это ваш экран. Каждый щелчок помещает вас в одну из ячеек. Начисление очков в игре — та функция потерь, которая придаёт матрице значение. Асимметрия, 200 против 60, кренит рациональный критерий в сторону осторожности. Система уровней и значения неочевидности кренят среду против вашей чувствительности. Вы оптимизируете под давлением: выбор критерия, хороший на первом уровне, может подвести на пятом, потому что распределения перекрылись сильнее. ²

В этом и смысл разбора. Вы не просто читаете — вы управляете классификатором, у которого есть настоящая цена ошибки. Игра награждает не за сообразительность. Она награждает за откалиброванность. Четыре исхода — та обратная связь, которая позволяет вам калиброваться.

Движок как контролируемая среда

Слой правил Hook Line чист и детерминирован. Он собирает папку входящих по зерну из отобранного каталога игры, оценивает ваши вердикты по правилам 1000/200/60/50, наращивает размер раунда вместе с уровнем и поднимает минимальную неочевидность по мере вашего подъёма. В нём нет ни часов, ни случайности сверх генератора псевдослучайных чисел с зерном, так что одни и те же зерно и уровень всегда дают одну и ту же упорядоченную папку входящих. Часы находятся снаружи: на раунд даётся 60 секунд, и всё, что к моменту обнуления таймера осталось неразобранным, засчитывается как принятое на веру. Значит, третий способ ответить всё-таки есть — не сказать ничего, — и он самый дорогой, потому что каждое оставшееся во входящих мошенничество тогда спишет с вас 200. Это не платформа с обновлениями и рекламой, это контролируемая среда для упражнений в разборе. ²

Именно эта контролируемость наполняет смыслом соответствие четырём исходам. Раз среда воспроизводима, вы видите, как ваш критерий сдвигает результаты в одинаковых условиях. Раз неочевидность нарастает, вы чувствуете, каким налогом облагается чувствительность. Раз штрафы асимметричны, вы чувствуете, в какую сторону должен крениться критерий. Движок здесь не трюк, а лаборатория.

В этой лаборатории сообщение — сигнал, папка входящих — шум, а ваше суждение — классификатор. Четыре исхода — не просто ярлыки, это карта. Попадание, пропуск, ложная тревога, правильное отрицание. Каждый говорит что-то о вашей способности и о вашем стиле. И каждый учит, что игра не о том, чтобы быть правым, а о том, чтобы быть правым нужным способом и по нужной цене. ¹