Математичні парадокси
Курс «Парадокси A/B-тестування» · розділ 19 з 21 →

Феномен Вілла Роджерса Одна людина переходить в іншу команду. Чи можуть обидві стати сильнішими?Обидва середні ростуть, хоча ніхто не покращився.

Дві команди, у кожної своє середнє. Тренер переводить одного учасника з першої команди в другу. Здається, що одна команда мусить послабшати. Зафіксуйте свою відповідь, а потім перевірте її в грі, на симуляції лікарні і через кілька пояснень.

Якщо перевести людину, слабшу за середнє своєї команди, але сильнішу за середнє чужої, середнє зростає в обох. Загальне середнє при цьому не змінюється: ніхто не став кращим, змінилася лише межа між групами. Так само «покращується» виживаність при раку, коли кращі знімки переносять пацієнтів з ранньої стадії в пізню.

Вгадати відповідь
7 → 7,5середнє сильної команди
2,5 → 3середнє слабкої команди
5 = 5загальне середнє
Умова задачі

Уявіть: дві команди на олімпіаді

Назва походить від жарту, який приписують американському гумористу Віллу Роджерсу: коли переселенці з Оклахоми перебралися до Каліфорнії, вони підняли середній рівень розуму в обох штатах. Чи справді він це казав, невідомо, про це у фактах. Спершу умова.

  1. 1

    Дві команди

    На шкільній олімпіаді дев'ять учасників набрали від 1 до 9 балів, кожен своє число. Сильна команда A: 5, 6, 7, 8, 9. Слабка команда B: 1, 2, 3, 4.

  2. 2

    Середні

    Середній бал команди A дорівнює 35 / 5 = 7, команди B 10 / 4 = 2,5. Усіх дев'ятьох разом 45 / 9 = 5.

  3. 3

    Переведення

    Тренер може перевести рівно одного учасника з команди A в команду B. Бали в нього лишаються ті самі.

  4. 4

    Питання

    Чи можна так перевести одного учасника, щоб середній бал виріс в обох командах? Якщо так, то кого?

Склад команд

Команда A · середнє 7
56789
Команда B · середнє 2,5
1234
  • Бали учасників не змінюються.
  • Середнє команди: сума балів, поділена на кількість учасників.
  • «Виріс» означає «став строго більшим».
Інтуїція підказує

«Що одна команда отримала, те друга втратила. Обидві вирости не можуть»

Так було б із сумою балів. Але середнє залежить ще й від кількості людей. Учасник з 5 балами найслабший у команді A, тож без нього A сильніша. І він сильніший за кожного в команді B, тож з ним B теж сильніша.

Раунд 1 · Вгадайте

Кого перевести?

Команда A: 5, 6, 7, 8, 9 (середнє 7). Команда B: 1, 2, 3, 4 (середнє 2,5). Потрібно, щоб після переведення одного учасника з A в B середній бал виріс в обох командах.

Ваша відповідь

Оберіть відповідь. Тут з'явиться, що стається з обома середніми після кожного з п'яти можливих переведень.

Підказки

Важко вирішити? Відкривайте підказки по одній: спочатку легка, далі сильніша.

Раунд 2 · Гра

Переводьте учасників самі

Натисніть на учасника, щоб перевести його в іншу команду. Мета: зробити якомога більше переведень поспіль, після кожного з яких середнє росте в обох командах. Стежте за загальним середнім.

команда A і її середнє команда B і її середнє загальне середнє

Ваші переведення

    Підказка: подивіться, де на прямій стоїть учасник відносно двох рисок середнього.

    Раунд 3 · Симуляція

    Новий сканер і 2 000 пацієнтів

    Ось де цей фокус трапляється насправді. У лікарні рак ділять на ранню стадію (метастазів не знайшли) і пізню (знайшли). У кожного пацієнта є прихована міра того, наскільки поширилася хвороба, від 0 до 100. Що більша вона, то менший шанс прожити 5 років: від 100% при 0 до 0% при 100. Сканер бачить метастази, лише коли поширення досягло певного порогу. Старий сканер бачить їх від 60, новий уже від 40. Лікування однакове, пацієнти ті самі.

    рання стадія пізня стадія перейшли зі старої розмітки в нову

    Кожна точка означає пацієнта (показано 400 з 2 000). Заповнена точка: прожив 5 років, порожня: ні. Вертикальна лінія показує, з якого поширення сканер бачить метастази.

    рання стадія: точно і симуляція пізня стадія усі пацієнти
    5 років прожили: рання стадія
    –
    5 років прожили: пізня стадія
    –
    5 років прожили: усі пацієнти
    –

    Раунд 4 · Пояснення

    Чому обидва середні ростуть, а нічого не змінилося

    групи описує не лише людей, а й те, де проведено межу між групами. Посуньте межу, і середні зміняться, навіть якщо жодна людина не змінилася.

    На пальцяхкартинки, аналогії, маленькі числа

    Шар «На пальцях» приховано на всіх задачах.

    Головна ідея

    Найслабший у сильній команді, найсильніший у слабкій

    Учасник з 5 балами проти середнього A5 < 7
    Той самий учасник проти середнього B5 > 2,5

    Учасник з 5 балами тягнув команду A вниз: він слабший за її середнє. Коли він іде, A стає сильнішою. У команді B він найкращий: він сильніший за її середнє. Коли він приходить, B теж стає сильнішою. Цього досить, щоб зрозуміти фокус. Чому при цьому ніхто не покращився, пояснює наступна картка.

    Перевірка

    Загальне середнє стоїть на місці

    Усі 9 до переведення45 / 9 = 5
    Усі 9 після переведення45 / 9 = 5

    Ті самі дев'ять людей, ті самі бали, та сама сума. Змінилося лише, хто в якій команді. Обидві команди «посилилися», бо сильна стала меншою і ще сильнішою, а слабка більшою. Вага слабкої команди в загальному середньому зросла рівно настільки, щоб зрівноважити обидва прирости.

    У лікарні

    Пограничні пацієнти

    Рання стадія, старий сканер70%
    Пацієнти з поширенням 40–6050%

    Новий сканер переносить у пізню стадію пацієнтів з поширенням від 40 до 60. Вони живуть 5 років у 50% випадків: гірше за решту ранньої стадії (70%), але краще за пізню (20%). Це ті самі «учасники з 5 балами». Обидві стадії виглядають кращими, хоча жоден пацієнт не прожив і дня довше.

    Де помиляється інтуїція

    Середнє не належить людям

    Ми звикли читати «середнє групи виросло» як «люди в групі покращилися». Але середнє залежить від того, хто в групу входить. Коли змінюється склад, середнє змінюється без жодного покращення. Тому щоразу, коли росте середнє якоїсь групи, варто спитати: а чи не змінилося, кого ми туди зараховуємо?

    Строготаблиці, графіки, формули

    Шар «Строго» приховано на всіх задачах.

    Для тих, хто любить формули

    Умова переведення і зважене середнє

    Група A має nA людей і середнє a, група B має nB людей і середнє b. Людина з результатом x переходить з A в B. Ось як змінюються середні.

    a′−a=a−xnA−1 b′−b=x−bnB+1

    Обидві різниці додатні рівно тоді, коли результат лежить між двома середніми.

    b<x<a 2,5<5<7:7−54=+0,5,5−2,55=+0,5

    Загальне середнє є зваженим середнім двох груп. Сума результатів і кількість людей не змінюються, тож і воно не змінюється.

    m=nAa+nBbnA+nB 5·7+4·2,59=4·7,5+5·39=5

    Обидва середні виросли на 0,5, а загальне не змінилося, бо вага групи B зросла з 4/9 до 5/9. Група B досі слабка, просто тепер вона більша. Якщо x дорівнює одному із середніх, відповідне середнє не змінюється, тому умова строга.

    Графік

    Як змінюються середні залежно від того, кого перевести

    зміна середнього A зміна середнього B обидва ростуть

    По горизонталі бал учасника, якого переводять з A в B. Лінія A перетинає нуль у точці 7 (середнє A), лінія B у точці 2,5 (середнє B). Між ними обидві лінії вище нуля. У команді A туди потрапляють учасники з 5 і 6 балами.

    Лікарня в числах

    Виживаність 5 років у моделі раунду 3

    Старий сканер (60)Новий сканер (40)
    Рання стадія70%80%
    Пізня стадія20%30%
    Усі пацієнти50%50%
    Частка в пізній стадії40%60%

    Поширення рівномірне від 0 до 100, шанс прожити 5 років дорівнює 1 − поширення/100. Якщо сканер бачить метастази від порогу t, то в ранній стадії виживає в середньому 100 − t/2 відсотків, у пізній 50 − t/2, а загалом завжди 50. Кожен крок порогу вниз піднімає обидві стадії на половину кроку. Пацієнти з поширенням 40–60 (20% усіх) виживають у 50% випадків.

    Глибшеузагальнення, теорія, історія

    Шар «Глибше» приховано на всіх задачах.

    Трохи історії

    Фейнстейн і рак легень

    1985 року Елван Фейнстейн і двоє співавторів опублікували в New England Journal of Medicine статтю «Феномен Вілла Роджерса». Вони порівняли пацієнтів з раком легень, яких почали лікувати 1977 року, з пацієнтами 1953–1964 років у тих самих клініках. У новішої групи шестимісячна виживаність була вищою в кожній стадії за системою TNM.

    Новіша група пройшла багато нових обстежень із візуалізацією, і вони знаходили метастази, яких раніше не було видно. Частину пацієнтів, яких колись записали б у «добру» стадію, тепер записали в «погану». Коли автори поділили обидві групи за стадіями симптомів, на які нові обстеження не впливають, виживаність виявилася схожою.

    Як захиститися

    Порівнювати за однаковими правилами

    Порівнювати виживаність за стадіями між десятиліттями, країнами чи лікарнями небезпечно, якщо діагностика різна. Чесних виходів три. Порівнювати всіх пацієнтів разом, як рядок «усі» в таблиці. Перерозподілити старих пацієнтів за новими правилами, щоб межа була однакова. Або ділити за ознакою, яку нова техніка не змінює, як Фейнстейн зі стадіями симптомів.

    Ця пастка відрізняється від іншої, теж знайомої лікарям: раннє виявлення подовжує виживаність «від діагнозу», бо годинник просто запускають раніше. Тут навіть не потрібно, щоб хтось жив довше чи був виявлений раніше: досить пересунути межу між стадіями.

    Раунд 5 · Масштабування

    Ланцюжки переведень, межі груп і метрики продукту

    Спершу математика (скільки разів поспіль можна підняти обидва середні), потім логіка (що насправді змінюється, коли рухається межа), потім практика (як цей фокус потрапляє у звіти з аналітики).

    1 · Математика: ланцюжок
    середнє A середнє B загальне середнє

    Скільки разів поспіль?

    Те саме працює для цілої групи: якщо перевести кількох людей разом, обидва середні ростуть, коли середнє переведених лежить між середніми груп. Так «переселенці з Оклахоми» з жарту можуть підняти середнє обох штатів, навіть якщо серед них є і розумні, і не дуже.

    Що довшого ланцюжка, ніж n − 2, не буває, перевірено перебором усіх поділів для n від 3 до 11.

    2 · Логіка: рухається межа, а не люди

    Змініть визначення, і середні зміняться самі

    Будь-який поділ на групи має межу: стадія раку, «відмінник», «високий», «активний користувач», «преміум-клієнт». Посуньте межу так, щоб через неї перейшли пограничні випадки, і середнє може зрости по обидва боки. Реального покращення немає: ті самі люди, ті самі результати.

    Правило проти цього просте: коли ростуть середні всіх частин, перевірте ціле. Якщо загальне середнє стоїть, змінилася лише розмітка. Схожа пастка з групами є в парадоксі Сімпсона, тільки там частини і ціле показують протилежне, бо групи мають різну вагу.

    Де ще трапляється

    Ліпша діагностика. Чутливіші аналізи знаходять легші форми хвороби. Хворі «легкі» випадки приєднуються до хворих і покращують їхні показники, а здорові без них виглядають здоровішими.

    Рейтинги і категорії. Перегляд межі між «A-класом» і «B-класом» готелів, шкіл чи постачальників змінює середні оцінки обох класів без жодної зміни в самих готелях.

    3 · Практика: «активні користувачі»

    Продукт має 1 000 користувачів. Таблиця показує, скільки сесій на тиждень вони мають і скільки в середньому платять на місяць. Оберіть, з якої кількості сесій користувача вважають активним.

    СесійЛюдей$ на людинуСегмент

    Звіт за місяць

    В A/B-тестах так само: якщо новий варіант змінює, хто вважається «активним», «залученим» чи таким, що побачив зміну, порівняння метрик усередині цих сегментів між варіантами може показати приріст в обох сегментах без жодного приросту загалом. Головне рішення ухвалюйте за метрикою на всіх користувачах кожного варіанта, як їх розподілила рандомізація. Як читати сам тест, пояснює сторінка «Дві однакові сторінки».

    Бонус · Цікаві факти

    Що розповісти друзям

    1970

    Роджерс, мабуть, цього не казав

    Вілл Роджерс загинув 1935 року. За даними сайту Quote Investigator, жарт про переселенців з Оклахоми вперше приписали йому 1970 року: Los Angeles Times процитувала губернатора Оклахоми Дьюї Бартлетта. У текстах самого Роджерса цієї фрази не знайшли.

    1939

    Жарт старший за назву

    Найраніша знайдена версія вийшла 1939 року в газеті McComb Daily Journal з Міссісіпі: про одного чоловіка, який переїхав з округу в округ і «підняв рівень розуму в обох». Варіант саме про оклахомців і Каліфорнію знайшовся 1955 року.

    NZ → AU

    Новозеландська версія

    Прем'єр-міністру Нової Зеландії Роберту Малдуну приписують варіант: новозеландці, які емігрують до Австралії, підвищують IQ обох країн. 1990 року журналіст Sydney Morning Herald написав, що Малдун розповів його на вечері, і додав, що жарт дуже старий.

    1985

    Назву дав лікар

    Термін «феномен Вілла Роджерса» запровадив єльський клінічний епідеміолог Елван Фейнстейн у статті 1985 року про рак легень. Він узяв жарт зі слів друга, який приписав його Роджерсу. Відтоді «міграцію стадій» шукають у дослідженнях раку та інших хвороб.

    28%

    Ті самі скельця, нові оцінки

    2005 року Пітер Альбертсен і колеги дали досвідченому патологу заново оцінити скельця 1 858 чоловіків, яким діагностували рак простати в Коннектикуті 1990–1992 років. Середній бал Ґлісона виріс з 5,95 до 6,8. З новими оцінками смертність у межах кожного балу виглядала на 28% нижчою, хоча результати пацієнтів не змінилися.

    1939

    Хто такі «оукі»

    «Оукі» називали переселенців з Оклахоми і сусідніх штатів, яких Пилова буря і Велика депресія 1930-х погнали на захід, до Каліфорнії. Їхню дорогу описав Джон Стейнбек у романі «Грона гніву» (1939), за який отримав Пулітцерівську премію.

    Обговорення

    Що ви думаєте?

    Поділіться своїм поясненням, запереченням чи варіантом задачі. Для коментаря потрібен акаунт GitHub.

    Рівень «Шкільна математика» відповідає задачі?

    Дякуємо! Це допоможе точніше ставити рівні.

    Розсилка

    Нові задачі, пояснення й обговорення

    Я поступово додаю нові задачі, інші способи їх пояснити й розбори дискусій. Залиште email, і я напишу, коли з'явиться щось нове. Без спаму, відписатися можна в один клік.

    Форма підписки з'явиться тут найближчим часом.