Шум. Несовершенство человеческих суждений — страница 44 из 48

: L. Butt, “The Forensic Confirmation Bias: Problems, Perspectives and Proposed Solutions – Commentary by a Forensic Examiner”, Journal of Applied Research in Memory and Cognition 2 (2013): 59–60. Добавлено выделение курсивом.

262 Даже ФБР…: Stacey, “Erroneous Fingerprint”, 713. Добавлено выделение курсивом.

263 об опросе четырехсот…: J. Kukucka, S. M. Kassin, P. A. Zapf, and I. E. Dror, “Cognitive Bias and Blindness: A Global Survey of Forensic Science Examiners”, Journal of Applied Research in Memory and Cognition 6 (2017).

264 линейной последовательности раскрытия информации…: I. E. Dror et al., letter to the editor: “Context Management Toolbox: A Linear Sequential Unmasking (LSU) Approach for Minimizing Cognitive Bias in Forensic Decision Making”, Journal of Forensic Science 60 (2015): 1111–1112.


Глава 21

265 правительственные агентства…: Jeffrey A. Frankel, “Over-optimism in Forecasts by Official Budget Agencies and Its Implications”, working paper 17239, National Bureau of Economic Research, December 2011, www.nber.org/papers /w17239.

266 склонны к чрезмерной уверенности…: H. R. Arkes, “Overconfidence in Judgmental Forecasting”, in Principles of Forecasting: A Handbook for Researchers and Practitioners, ed. Jon Scott Armstrong, vol. 30, International Series in Operations Research & Management Science (Boston: Springer, 2001).

267 публикующий квартальные прогнозы…: Itzhak Ben-David, John Graham, and Campell Harvey, “Managerial Miscalibration”, The Quarterly Journal of Economics 128, no. 4 (November 2013): 1547–1584.

268 ненадежность аналитика является источником…: T. R. Stewart, “Improving Reliability of Judgmental Forecasts”, in Principles of Forecasting: A Handbook for Researchers and Practitioners, ed. Jon Scott Armstrong, vol. 30, International Series in Operations Research & Management Science (Boston: Springer, 2001) (здесь и далее – Principles of Forecasting), 82.

269 спрогнозировать, как Верховный суд разрешит тот или иной вопрос права…: Theodore W. Ruger, Pauline T. Kim, Andrew D. Martin, and Kevin M. Quinn, “The Supreme Court Forecasting Project: Legal and Political Science Approaches to Predicting Supreme Court Decision-Making”, Columbia Law Review 104 (2004): 1150–1209.

270 законодательства о загрязнении воздуха…: Cass Sunstein, “Maximin”, Yale Journal of Regulation (draft; May 3, 2020), https://papers.ssrn.com/sol3/papers.cfm?abstract_id=3476250.

271 множество примеров…: Большое количество примеров приведено в Armstrong, Principles of Forecasting.

272 усреднение большого числа прогнозов…: Jon Scott Armstrong, “Combining Forecasts”, in Principles of Forecasting, 417–439.

273 превосходит в точности большинство…: T. R. Stewart, “Improving Reliability of Judgmental Forecasts”, in Principles of Forecasting, 95.

274 в среднем на 12,5%…: Armstrong, “Combining Forecasts”.

275 направленного выбора человека из толпы…: Albert E. Mannes et al., “The Wisdom of Select Crowds”, Journal of Personality and Social Psychology 107, no. 2 (2014): 276–299.

276 В основном такие объединения показывают свою эффективность…: Justin Wolfers and Eric Zitzewitz, “Prediction Markets”, Journal of Economic Perspectives 18 (2004): 107–126.

277 пользуются информацией, поступающей с рынка предсказаний…: Cass R. Sunstein and Reid Hastie, Wiser: Getting Beyond Groupthink to Make Groups Smarter (Boston: Harvard Business Review Press, 2014).

278 метод «Дельфи»…: Gene Rowe and George Wright, “The Delphi Technique as a Forecasting Tool: Issues and Analysis”, International Journal of Forecasting 15 (1999): 353–375. См. также Dan Bang and Chris D. Frith, “Making Better Decisions in Groups”, Royal Society Open Science 4, no. 8 (2017).

279 довольно сложна в реализации…: R. Hastie, “Review Essay: Experimental Evidence on Group Accuracy”, in B. Grofman and G. Guillermo, eds., Information Pooling and Group Decision Making (Greenwich, CT: JAI Press, 1986), 129–157.

280 «Мини-Дельфи»: Andrew H. Van De Ven and Andrе́ L. Delbecq, “The Effectiveness of Nominal, Delphi, and Interacting Group Decision Making Processes”, Academy of Management Journal 17, no. 4 (2017).

281 куда лучших результатов…: Superforecasting, 95.

282 сильнейшим сигналом…: Superforecasting, 231.

283 пытаться, терпеть неудачи, анализировать…: Superforecasting, 273.

284 сложный статистический метод…: Ville A. Satopää, Marat Salikhov, Philip E. Tetlock, and Barb Mellers, “Bias, Information, Noise: The BIN Model of Forecasting”, February 19, 2020, 23, https://dx.doi.org/10.2139/ssrn.3540864.

285 когда применяемые меры…: Satopää et al., “Bias, Information, Noise”, 23.

286 Командная работа, в отличие от обучающего метода…: Satopää et al., 22.

287 «Суперпредсказатели, вероятно, обязаны…»: Satopää et al., 24.

288 будут работать автономно и в то же время смогут дополнять друг друга…: Clintin P. Davis-Stober, David V. Budescu, Stephen B. Broomell, and Jason Dana. “The composition of optimally wise crowds”. Decision Analysis 12, no. 3 (2015): 130–143.


Глава 22

289 при определении дистрофии связочного аппарата…: Laura Horton et al., “Development and Assessment of Inter- and Intra-Rater Reliability of a Novel Ultrasound Tool for Scoring Tendon and Sheath Disease: A Pilot Study”, Ultrasound 24, no. 3 (2016): 134, www.ncbi.nlm.nih.gov/pmc/articles/PMC5105362.

290 врач оценит образец ткани…: Laura C. Collins et al., “Diagnostic Agreement in the Evaluation of Image-guided Breast Core Needle Biopsies”, American Journal of Surgical Pathology 28 (2004): 126, https://journals.lww.com/ajsp/Abstract/2004/01000/Diagnostic_Agreement_in_the_Evaluation_of.15.aspx.

291 Если подобный тест не сделать…: Julie L. Fierro et al., “Variability in the Diagnosis and Treatment of Group A Streptococcal Pharyngitis by Primary Care Pediatricians”, Infection Control and Hospital Epidemiology 35, no. S3 (2014): S79, www.jstor.org/stable/ 10.1086/677820.

292 Вам наверняка диагностируют диабет…: Diabetes Tests, Centers for Disease Control and Prevention, https://www.cdc.gov/diabetes/basics/getting-tested.html (last accessed January 15, 2020).

293 обычно советуют получить второе мнение…: Joseph D. Kronz et al., “Mandatory Second Opinion Surgical Pathology at a Large Referral Hospital”, Cancer 86 (1999): 2426, https://onlinelibrary.wiley.com/doi/full/10.1002/(SICI)1097–0142(19991201) 86:11%3C2426:: AID-CNCR34%3E3.0.CO;2–3.

294 проект «Дартмутский атлас»…: Основную информацию можно найти в Интернете; имеется также обширный материал – Dartmouth Medical School, The Quality of Medical Care in the United States: A Report on the Medicare Program; the Dartmouth Atlas of Health Care 1999 (American Hospital Publishers, 1999).

295 Подобные недочеты отмечены…: Например, см. OECD, Geographic Variations in Health Care: What Do We Know and What Can Be Done to Improve Health System Performance? (Paris: OECD Publishing, 2014), 137–169; Michael P. Hurley et al., “Geographic Variation in Surgical Outcomes and Cost Between the United States and Japan”, American Journal of Managed Care 22 (2016): 600, www.ajmc.com/journals/issue/2016/2016-vol22-n9/geographic-variation-in-surgical-outcomes-and-cost-between-the-united-states-and-japan; и John Appleby, Veena Raleigh, Francesca Frosini, Gwyn Bevan, Haiyan Gao, and Tom Lyscom, Variations in Health Care: The Good, the Bad and the Inexplicable (London: The King’s Fund, 2011), www.kingsfund.org.uk/sites/default/files /Variations-in-health-care-good-bad-inexplicable-report-The-Kings-Fund-April‑2011.pdf.

296 как описывают картину пневмонии разные рентгенологи…: David C. Chan Jr. et al., “Selection with Variation in Diagnostic Skill: Evidence from Radiologists”, National Bureau of Economic Research, NBER Working Paper No. 26467, November 2019, www.nber.org/papers/w26467.

297 В медицине, как, впрочем, и везде, обучение…: P. J. Robinson, “Radiology’s Achilles’ Heel: Error and Variation in the Interpretation of the Rontgen Image”, British Journal of Radiology 70 (1997): 1085, www.ncbi.nlm.nih.gov/pubmed/9536897. Очень важное исследование – Yusuke Tsugawa et al., “Physician Age and Outcomes in Elderly Patients in Hospital in the US: Observational Study”, BMJ 357 (2017), www.bmj.com/content/357/bmj.j1797 – выявило, что эффективность врача тем хуже, чем реже он проходит обучение. Авторы отмечают, что имеется некий компромисс между опытом, накопленным за годы практики, и владением наиболее актуальной информацией и современными методическими указаниями. Исследователи установили, что лучших результатов достигают врачи, незадолго до того закончившие ординатуру, у которых еще свежа в памяти подобная информация.

298 Рентгенологи, например, называют…: Robinson, “Radiology’s Achilles’ Heel”.

299 каппа-статистики…: Подобно коэффициенту корреляции, число каппа может быть и отрицательным, хотя на практике подобное явление встречается редко. Приведем пример различных значений каппы: «слабо (κ = 0,00 до 0,20), удовлетворительно (κ = 0,21 до 0,40), умеренно (κ = 0,41 до 0,60), очень хорошо (κ = 0,61 до 0,80) и почти идеально (κ > 0,80)» (Ron Wald, Chaim M. Bell, Rosane Nisenbaum, Samuel Perrone, Orfeas Liangos, Andreas Laupacis, and Bertrand L. Jaber, “Interobserver Reliability of Urine Sediment Interpretation”, Clinical Journal of the American Society of Nephrology 4, no. 3 [March 2009]: 567–571, https://cjasn.asnjournals.org/content/4/3/567).