Что на самом деле измеряет Decision Score

Каждые несколько недель юный игрок и его тренер садятся за один и тот же вопрос. В календаре есть турнир, может быть, два или три накладываются друг на друга, и нужно принять решение. Едем?

Звучит просто, пока не выпишешь всё, от чего зависит ответ. Уровень турнира и подходит ли он текущему уровню игрока. Покрытие — и действительно ли игрок на нём выигрывает. Список заявок и то, где в нём оказывается рейтинг игрока. Очки, которые можно получить, если всё сложится удачно. Перелёт, ночи в отеле, дни вне школы. Недавняя форма. Не отыграл ли игрок уже три недели подряд.

Это слишком много, чтобы держать в голове разом. Поэтому большинство этого и не делает. Люди либо тонут в таблице, либо пожимают плечами и идут на ощущениях.

Decision Score — наша попытка предложить третий вариант.

Повседневная задача

Честная формулировка вопроса звучит не как «хороший ли это турнир». А как «хороший ли это турнир для этого игрока, прямо сейчас, с учётом всего остального, что лежит на столе». Это очень разные вопросы, и именно второй из них действительно встаёт вечером накануне дедлайна заявки.

Информация для ответа обычно существует. Просто она разбросана. Рейтинг на одном сайте, список заявок на другом, покрытие зарыто в примечаниях к турниру, стоимость — в недоделанной прикидке в уме. Сводить всё это воедино каждый раз утомительно, а именно в рутине хорошие решения тихо умирают.

Цель не в том, чтобы изобрести определённость. Она в том, чтобы сделать следующий разговор с тренером более конкретным.

Так что задача, которую мы себе поставили, была скромной. Собрать разбросанные части, последовательно их осмыслить и вернуть нечто, что игрок и тренер смогут обсудить за две минуты, а не за двадцать.

Почему одно число с вердиктом

Когда у тебя много данных, есть соблазн показать их все. Стена статистики выглядит основательно. Она же возвращает само суждение читателю, которому теперь приходится взвешивать десять чисел, не имея ни малейшего понятия, как они соотносятся друг с другом.

Противоположная ошибка — догадка на интуиции. Быстро, но что-то забывается — обычно скучное, вроде стоимости и накопленной усталости, то, что важнее всего на протяжении сезона.

Decision Score находится между этими двумя крайностями. Это число из 100, в паре с вердиктом на простом языке. Что-то вроде «Стоит рассмотреть — разумный вариант, взвесьте его относительно других ваших турниров.» Число даёт быстрое прочтение. Вердикт говорит словами, что это число значит, чтобы никому не приходилось гадать, хорошо ли 64.

Честно говоря, вердикт делает больше работы, чем число. «Стоит рассмотреть» — это иная инструкция, чем «сильное соответствие» или «вероятно, пропустите этот», и сформулирована она так, чтобы её взвешивали относительно альтернатив, а не выполняли.

Что в него на самом деле входит

Под score лежит модель из восьми факторов. Я не стану притворяться, что каждый фактор — это чистая, независимая ручка настройки: они взаимодействуют, — но то, над чем модель рассуждает, вполне конкретно:

• Соответствие покрытию — процент побед игрока по покрытиям. Грунт и хард не взаимозаменяемы, и история игрока обычно это подтверждает.
• Соответствие уровню и категории — совпадает ли категория турнира (от ITF J30 до J300 или категории Tennis Europe) с тем, где игрок находится сейчас, а не с тем, где он надеется оказаться.
• Шанс попадания — насколько вероятно, что с учётом рейтинга игрока и текущего списка заявок он вообще попадёт в сетку.
• Возможность набрать очки — сколько может стоить реалистично хороший проход.
• Дорога и стоимость — реальные трудности добраться туда и где-то жить.
• Недавняя форма и momentum — как игрок на самом деле играл.
• Нагрузка по календарю — добавляется ли это к и без того плотному блоку недель.

Приёмы заявок и результаты синхронизируются из профиля игрока ITF или Tennis Europe, поэтому данные о форме и рейтинге отражают то, что действительно произошло, а не то, что вбили вручную.

Часть, которую большинство продуктов пропускает

Вот неудобная правда о каждом из этих факторов: некоторые из них — оценки, а оценка без уровня уверенности — это всего лишь догадка в костюме.

Поэтому score сопровождается оценкой шанса попадания — показателем «% Entry» — и, что принципиально важно, уровнем уверенности, привязанным к любому числу, которое мы выводим. Шанс попадания — это оценка. Цифры по очкам и стоимости — оценки. Decision Score не гарантирует принятия заявки и уж точно не гарантирует результатов. Он не может сказать вам, что вы попадёте, и никогда не скажет, что вы достигнете определённого рейтинга.

Там, где мы прогнозируем, мы прогнозируем диапазонами, а не отдельными точками. Диапазон честен в отношении неопределённости так, как точно выглядящее число не бывает никогда.

А когда данных слишком мало, чтобы сказать что-либо ответственно — скудный список заявок, слишком мало матчей на покрытии, — продукт скрывает число, вместо того чтобы напечатать уверенно выглядящую цифру поверх пустоты. Это был осознанный выбор, и неловкий, потому что пустое место выглядит менее впечатляюще, чем процент жирным шрифтом. Мы предпочтём показать меньше и вызвать доверие, чем показать больше и ошибиться.

Число, которому нельзя доверять, хуже, чем отсутствие числа, потому что оно завершает разговор, а не начинает его.

Как им действительно пользоваться

Score живёт на вкладке Today как часть Next Best Move, рядом с Explore, Path, Radar и Coach. Но где он расположен, важно меньше, чем то, как вы его читаете.

Используйте его как способ разрешить ничью, а не как оракул. Когда два турнира действительно близки, score и его факторы дают структурированный способ увидеть, почему один вырывается вперёд — может быть, лучше соответствие покрытию, может быть, более лёгкая дорожная нагрузка против и без того заполненного блока. Это куда лучшая отправная точка, чем «у меня просто предчувствие насчёт грунтового».

Используйте его как повод начать разговор. Тренер, который видит 58 с низкой уверенностью в попадании, задаёт иные вопросы, чем тот, кто видит 82. Score не заменяет его суждение. Он направляет его в конкретную сторону.

И относитесь к скрытому числу тоже как к информации. Если продукт не показывает шанс попадания, обычно это означает, что сетка действительно непредсказуема — а это само по себе стоит знать, прежде чем бронировать билеты.

Человеческая суть

Decision Score — это не вердикт, спущенный сверху. Это сжатие запутанного, реального решения во что-то, что два человека действительно могут обсудить до дедлайна.

Игрок по-прежнему выбирает. Тренер по-прежнему тренирует. Score лишь следит за тем, чтобы скучные, решающие детали — покрытие, стоимость, усталость, список заявок — лежали на столе, где им и место, с честной пометкой о том, насколько мы уверены в каждой из них.

Он существует, чтобы сделать решение обсуждаемым. А не чтобы принять его за вас.

Об авторе

Sofia Lindqvist — спортивный учёный в NextPoint, где она работает над аналитикой игроков и движком рекомендаций. Большую часть времени она посвящает не самому гламурному вопросу: когда число достаточно честно, чтобы его показывать.