Дуглас Хаббард. Как измерить всё, что угодно

Глава 8. Переход от объекта в методу измерения Разложите объект измерения на составляющие. Многие измерения начинаются с разложения неизвестной величины на составляющие с целью выявления того, что можно наблюдать непосредственно и что легче поддается количественной оценке. Эффект разложения на составляющие состоит в том, что сам процесс нередко обеспечивает такое значительное снижение неопределенности, что дальнейшие наблюдения становятся ненужными. Вторичные исследования: предположим, что до вас этот объект уже измеряли. Исследование начинается с вторичных исследований, то есть с анализа результатов, полученных до вас. Все исследователи считают само собой разумеющимся, что проблемой уже кто-то занимался. Анализ имеющейся литературы, похоже, еще не вошел у менеджеров в привычку. Источники Интернета. Если предмет мне совершенно незнаком, то я начинаю вовсе не с Google, а с онлайновой энциклопедии Wikipedia. Ищите по слова, которые ассоциируются с исследованиями и количественным анализом. Помните, что в Интернете есть не только поисковые машины, но и хранилища специальной информации: сайт Бюро переписи населения США, Министерства торговли, ЦРУ («World Fact Book» — «Всемирная книга фактов ЦРУ» — место, где я всегда нахожу самые разнообразные данные международной статистики). Используйте несколько поисковых машин. Найдя исследования не совсем по своей теме, в которых, тем не менее, упоминается интересующий вас вопрос, обязательно посмотрите библиографию. НЕКОТОРЫЕ ОСНОВНЫЕ ПРАВИЛА НАБЛЮДЕНИЯ Идите по следу, как заправский детектив. Проводите «криминалистический анализ» уже имеющейся у вас информации. Используйте непосредственное наблюдение. Начните смотреть, подсчитывать и по возможности делайте выборочные оценки. Если до сих пор объект не оставлял после себя следов, «пометьте» его, чтобы следы наконец появились. Если выйти на след никак не удается, создайте условия, в которых появится возможность наблюдать за объектом (проведите эксперимент). Не измеряйте точнее, чем нужно. КРАТКИЙ ГЛОССАРИЙ ПОГРЕШНОСТИ Систематическая ошибка, или систематическое отклонение (смещение) — неотъемлемое свойство процесса измерения давать определенный результат; постоянное отклонение. Случайная ошибка — ошибка, непредсказуемая для отдельного наблюдения, непостоянная и не зависящая от известных величин (хотя в своей массе такие ошибки подчиняются законам вероятности). Точность — характеристика измерений, дающих низкую систематическую ошибку, то есть таких, когда искомое значение не занижается и не завышается на постоянной основе. Достоверность — характеристика измерений, дающих низкую случайную ошибку, то есть таких, которые дают аналогичные результаты, пусть и далекие от истинного значения. Ошибку, не исключаемую путем усреднения (систематическую ошибку), называют также отклонением, или смещением. Есть три основных типа отклонений, которые можно ожидать при проведении измерений: отклонение ожидания, отклонение выбора, отклонение наблюдателя. Глава 9. Выборочная реальность: как наблюдение за частью рассказывает нам о целом2 Итак, мы установили, что: когда исходная неопределенность высока, для ее существенного снижения достаточно изучить несколько объектов из генеральной совокупности; калиброванные эксперты сумели снизить неопределенность, отобрав из генеральной совокупности всего один объект, чего не может традиционная параметрическая статистика; оценки калиброванных экспертов обоснованны, но осторожны; чтобы снизить неопределенность еще больше, нужно провести дополнительные расчеты. Как это можно применить в бизнесе исследование статистики серийных номеров танков разведкой англичан? « Серийные номера» (то есть последовательные серии) можно найти в современном мире где угодно. Так, компании бесплатно предоставляют конкурентам информацию о своем объеме производства, просто указывая на товарах серийные номера, которые может увидеть любой покупатель. (Однако чтобы быть случайной, такая выборочная совокупность должна состоять из товаров, купленных в разных магазинах.) Аналогичным образом несколько страниц из выброшенного отчета конкурента или цифр из квитанции могут многое рассказать об остальных страницах отчета или обо всех квитанциях за данный день. Я вовсе не призываю вас копаться в отбросах, но исследование содержимого мусорных контейнеров нередко позволяет решить интересные задачи по измерению. Корреляционный анализ и регрессионное моделирование. Глава 10. Кое-что о Байесе Парадокс предварительного знания: Вся традиционная статистика исходит из того, что наблюдатель ранее не располагал никакой информацией об объекте наблюдения. В реальном мире данное допущение почти никогда не выполняется. Проблему прежних знаний изучает так называемая байесовская статистика. Автор этого метода — Томас Байес, британский математик и пресвитерианский священник XVIII века. Байесовская статистика занимается вопросом: как мы корректируем свое предварительное знание с учетом новой информации? Байесовский анализ начинается с того, что известно сейчас, и затем рассматривает, как это знание изменится с получением новых сведений. А небайесовская статистика, преподаваемая в большинстве курсов по методам выборочного наблюдения, исходит из следующего: все, что известно о некоей группе объектов, — это выборка, которую вы только что из нее сделали. Теорема Байеса гласит, что вероятность наступления «события» при условии проведения «наблюдения» равна произведению вероятности наступления события и вероятности проведения наблюдения при условии наступления события, деленному на безусловную вероятность проведения наблюдения (рис. 10.1). Рис. 10.1. Теорема Байеса Используйте свой природный байесовский инстинкт: сначала дайте объекту (явлению) свою калиброванную оценку; затем соберите дополнительную информацию (проведите опрос, изучите работы других исследователей и т.д.); далее чисто субъективно скорректируйте свою калиброванную оценку без дополнительных расчетов. Неоднородный бенчмаркинг и его использование для оценки «ущерба бренду». Люди корректируют свои оценки потому, что, как мы теперь знаем, все они, особенно калиброванные оценщики, являются интуитивными байесианцами. Они склонны довольно рационально обновлять первоначальную информацию, которой обладали, учитывая новые сведения, даже если те носят качественный характер или имеют к оцениваемому объекту отдаленное отношение. Представление о порядке величин. Неоднородный бенчмаркинг — метод, при котором калиброванным экспертам, оценивающим неизвестную величину, предоставляют в качестве ориентиров другие количественные показатели, даже если связь между ними и кажется отдаленной. Пример: прогнозирование продаж нового продукта на основе информации о сбыте других товаров или аналогичных конкурентных продуктов. Избегайте «инверсии наблюдения». Многие задают вопрос: «Какой вывод я могу сделать из этого наблюдения?» Но Байес показал нам, что нередко полезнее задать вопрос: «Что я должен наблюдать, если будет соблюдаться условие X?» Ответ на последний вопрос позволяет разобраться с первым. Глава 11. Предпочтения и подходы: «мягкие» аспекты измерения Количественное определение склонности к риску. На рис. 11.1 представлена кривая риска, на который инвесторы готовы пойти, чтобы получить данную доходность. Когда потенциальная доходность инвестиций высока, инвесторы обычно готовы смириться с более высоким риском. Если же инвестиции малорискованны, то чаше всего инвесторы соглашаются и на более низкую доходность. Рис. 11.1 Инвестиционная граница Не будет преувеличением сказать, что инвестиции в разработку программного обеспечения обычно входят в число самых рискованных проектов вложения средств, которые реализуют компании. Кривая инвестиционной границы — пример тех кривых полезности, с которыми будущие менеджеры компаний знакомятся на первом курсе университета. К сожалению, большинство из них, по-видимому, считают полученные знания чисто теоретическими и не имеющими никакого практического значения. Но кривые полезности — идеальный инструмент, позволяющий определять, какой частью одного стоит пожертвовать ради получения другого. Разнообразные виды кривых полезности помогают тем, кто принимает решения, детально выяснять, какой компромисс для них приемлем. Могу ли я считать, что тот, кто делает всю работу вовремя и почти без ошибок, работает эффективнее того, кто постоянно получает больше положительных отзывов клиентов? На самом деле это не проблема измерения, а вопрос документального оформления субъективных компромиссов. Это проблема отражения множества разнородных наблюдений в едином «индексе». И здесь, чтобы такое обобщение оказалось логичным, мы можем воспользоваться кривыми полезности. С их помощью достаточно просто показать, как сформулировать компромиссы. Можно составить график, отражающий все возможные компромиссы, по аналогии с определением желаемого соотношения «риск/доходность». Рисунок 11.2 представляет собой график с несколькими кривыми полезности. Он иллюстрирует гипотетический пример оценки руководством компромиссов между качеством работы и пунктуальностью выполнения заказов. Рис. 11.2. Гипотетические «кривые полезности» Глава 12. Решающий инструмент измерения: людские суждения Человеческий мозг не просто машина для вычисления. Это сложная система, познающая окружающую среду и приспосабливающаяся к ней путем выработки разнообразных упрощающих правил. Практически все эти правила приносят правду в жертву простоте, а многие даже противоречат друг другу. Те, что не вполне обоснованны, но, тем не менее, полезны на практике, называются эвристикой. А те из них, что явно противоречат здравому смыслу, называются заблуждениями. Примеры когнитивного искажения экспертами-оценщиками: зацикленность; если просто думать о какой-то цифре, пусть и не имеющей отношения к вопросу, то это может повлиять на ваш ответ (пример вопроса с «якорем»); эффект ореола; если люди сначала замечают некий факт, который настраивает их за или против какого-то варианта решения, то, получив в дальнейшем новую информацию, каким бы ни было ее содержание, они обычно воспринимают ее как аргумент в пользу сделанного ими первого заключения; стадный эффект, или эффект группового давления; оказывается, что если вы хотите выяснить мнение экспертов, то лучше опрашивать их по отдельности, а не всех вместе, поскольку в последнем случае возникает дополнительная погрешность (пример с «подсадными утками»); изменение предпочтений; как только люди начинают склоняться к одному варианту, они фактически меняют свои предпочтения по поводу дополнительной информации; они настраиваются на те сведения, которые поддерживают их первоначальное решение. Первое, что необходимо сделать – признать само существовании е проблемы с искажением восприятия. Значение систематизации. Одно время я категорически отрицал ценность метода взвешенных коэффициентов, уподобляя его астрологии. Однако последующие исследования убедили меня, что он всё-таки имеет определенные преимущества. Важнейшее правило измерения. Самое главное – никогда не используйте метод, способный увеличить ошибку первоначальной оценки. Два весьма распространенных метода измерения: анализ «затраты / выгоды» и метод субъективных взвешенных показателей только увеличивают неопределенность. Когда эксперты выбирают веса по пятибалльной шкале, они вовсе не имеют в виду, что балл 4 вдвое важнее балла 2. Из-за этой неоднозначности пятибалльная (семибалльная или какая угодно другая) шкала только добавляет ошибку к процессу оценки. На мой взгляд, единственное наблюдаемое достоинство систем условных взвешенных коэффициентов то, что менеджерам обычно хватает здравого смысла игнорировать полученные таким образом результаты.  Существует только один ограничивающий критерий, позволяющий с уверенностью сказать, являются ли методы анализа «затрат/выгод» или расчета взвешенных коэффициентов способами измерения; результатом должно стать повышение предыдущего уровня знания. Если использованный метод только увеличивает прежнюю ошибку, то это не измерение. Если его считают формализованным и систематизированным, но без научных доказательств уменьшения ошибки и принятия более удачных решений, это не измерение. На проведение псевдоизмерений организации нередко тратят больше времени и сил, чем потребовалось бы на применение способов, гарантированно снижающих неопределенность. Зачем же тогда, спрашивается, даже думать об использовании методов, которые фактически не уменьшают неопределенность? Глава 13. Новые инструменты измерения для менеджеров RFID-технологии, GPS + Google Earth. Если вы хотите знать, сколько раз название вашей фирмы находят с помощью различных поисковиков можете подписаться на Google Alerts. Существует несколько «мэш апов» (от англ. to mash up — смешивать; программное приложение, интегрирующее данные из нескольких источников и представляющее его на одной странице), которые собирают данные из многочисленных источников и , например, наносят сведения о компаниях, недвижимости, движении транспорта и т.п. на карты таких сайтов, как MapQuest или Google Earth. Рынки предсказаний. Глава 14. Универсальный метод измерения: прикладная информационная экономика Подведем итоги: Если нечто действительно важно, значит, вы можете это определить. Если нечто, по вашему мнению, вообще существует, значит, вы это уже каким-то образом наблюдали. Если нечто является и важной, и неизвестной величиной, то существует вероятность ошибки в ее оценке и понесения затрат в случае такой ошибки. Текущую неопределенность вы можете выразить количественно с помощью калиброванных оценок. Рассчитать стоимость дополнительной информации можно, определив пороговое значение интересующего вас показателя, то есть такое его значение, при котором принимаемое решение будет отличаться от решения, возможного в отсутствие этих сведений. Установив, что параметр заслуживает количественной оценки, вы сможете выбрать метод измерения и решить, сколько времени и сил следует потратить на его проведение. Даже поверхностное знакомство с несколькими методами случайной выборки, управляемыми экспериментами или даже просто способами уточнения экспертных оценок позволяет существенно снизить неопределенность. Ответы на тест 5.1. Калибровка. 1 Методу Монте-Карло я посвящу отдельную заметку 2 Т-статистике я посвящу отдельную заметку

Похожие:

	Ларри Кинг Как разговаривать с кем угодно, когда угодно, где угодно Ни одна книга не выходит в свет благодаря усилиям одних только авторов. Мы брали интервью и писали текст, однако вклад других членов...		Программа по формированию навыков безопасного поведения на дорогах... В наш век высоких технологий программируется все что угодно, все покупается даже не выходя из дома по телефону, по интернету Можно...
	Реферат. «Роль библиотеки в современном мире» «кому угодно» и«в чем угодно», человеку в любом возрасте и в любом состоянии, здоровому и больному, свободному и заключенному, зрячему...		Программа по формированию навыков безопасного поведения на дорогах... Учитель просит измерить силу тока на лампе №2 и №3, измерить напряжение на источнике тока, на лампе №1
	Что такое деньги и как они возникли Итак, деньги пришли на смену натуральному обмену, когда люди просто обменивались между собой товарами. Деньги оказались очень удобной...		Как измерить информацию? Информативными сообщения являются тогда, когда они новы, понятны, своевременны, полезны. Но то, что для одного понятно, для другого...
	Программа по формированию навыков безопасного поведения на дорогах... Мы с вами говорили, что основным понятием в информатике является “информация”. А можно ли измерить количество информации и как это...		Уильям Тейлор. Радикально лучше: Как преобразовать компанию, совершить... ...
	Как инквизиция помогла науке вопросы, уводящие от стереотипов Все живое и неживое во Вселенной находится во власти Господа и принадлежит Ему. Поэтому каждый должен пользоваться только тем, что...		Анатолий Стреляный Плавающие дискурсы Можно говорить о чем угодно, даже о «суверенной демократии» в России, но желательно все договаривать до конца
	Портфолио «открытые образовательные технологии как стратегия организации... Психологи давно определили, что «инкубатором» самостоятельного мышления, познавательной активности ребёнка является не индивидуальная...		Реферат Тема «Личностно ориентированное обучение» Не учение, а Сизифов труд. Сегодня на одного ребенка приходится 20 предметников, и каждый в его голову качает свою информацию, полагая,...
	Измерения параметров транзисторов Как оценить качество транзистора? Какие параметры транзистора надо знать, чтобы предугадать его работу в приемнике, усилителе? Как...		Урок-путешествие в страну натуральных чисел Они пришли посмотреть, как вы чувствуете себя в новой школе. Несмотря на то, что они уже не учат вас, они все равно волнуются за...
	Учебник ия как жертва системы. О том, что «Во тьме учебник не создать,... Вы, конечно, узнали в эпиграфе строки из известной песни В. Высоцкого. Понимаю, что для серьёзной книги можно было бы найти что-либо...		План Введение. Как зарождалась культура Руси Письменность, грамотность, школы Летописи В понятие культуры входит, естественно, все, что создано умом, талантом, рукоделием народа, все, что выражает его духовную сущность,...