Дуглас хаббард как оценить что угодно
Как измерить все, что угодно. Оценка стоимости нематериального в бизнесе
Те, кто искали эту книгу – читают
Эта и ещё 2 книги за 299 ₽
Среди людей бытует мнение, что многие вещи в мире не поддаются количественной оценке. Это широко распространенное заблуждение наносит существенный ущерб экономике, общественному благосостоянию, окружающей среде и даже национальной безопасности. В результате убежденности в невозможности измерения таких «нематериальных активов», как качество, отношение к делу, удовлетворенность клиентов, бренд и т. п., принимаемые решения часто оказываются необоснованными, а порой и ошибочными.
Дуглас Хаббард пытается развеять это вредное заблуждение, предлагая свой подход к оценке «неизмеряемого», названный им «прикладная информационная экономика». Он знакомит читателей с понятием «калиброванная оценка», оценкой риска (метод Монте-Карло), способами выборочного исследования, другими необычными инструментами измерений (Интернет, экспертные оценки, рынки предсказаний и др.), а также с оценкой стоимости информации. Свой подход автор применяет в разных областях и приводит ряд примеров успешного решения задач по количественному измерению. В книге содержатся ценные инструкции и рекомендации, которые без труда может использовать любой человек, принимающий решения, а также приложения, позволяющие проверить способность читателя давать калиброванные оценки.
Книга предназначена широкому кругу читателей, интересующихся процессами обоснования и принятия решений. Она будет полезна руководителям, менеджерам, преподавателям и студентам.
Дуглас Хаббард: Как измерить все, что угодно [Оценка стоимости нематериального в бизнесе]
Здесь есть возможность читать онлайн «Дуглас Хаббард: Как измерить все, что угодно [Оценка стоимости нематериального в бизнесе]» весь текст электронной книги совершенно бесплатно (целиком полную версию). В некоторых случаях присутствует краткое содержание. Город: Москва, год выпуска: 2009, ISBN: 978-5-9693-0163-4, издательство: Олимп-Бизнес, категория: economics / на русском языке. Описание произведения, (предисловие) а так же отзывы посетителей доступны на портале. Библиотека «Либ Кат» — LibCat.ru создана для любителей полистать хорошую книжку и предлагает широкий выбор жанров:
Выбрав категорию по душе Вы сможете найти действительно стоящие книги и насладиться погружением в мир воображения, прочувствовать переживания героев или узнать для себя что-то новое, совершить внутреннее открытие. Подробная информация для ознакомления по текущему запросу представлена ниже:
Как измерить все, что угодно [Оценка стоимости нематериального в бизнесе]: краткое содержание, описание и аннотация
Предлагаем к чтению аннотацию, описание, краткое содержание или предисловие (зависит от того, что написал сам автор книги «Как измерить все, что угодно [Оценка стоимости нематериального в бизнесе]»). Если вы не нашли необходимую информацию о книге — напишите в комментариях, мы постараемся отыскать её.
Дуглас Хаббард: другие книги автора
Кто написал Как измерить все, что угодно [Оценка стоимости нематериального в бизнесе]? Узнайте фамилию, как зовут автора книги и список всех его произведений по сериям.
Возможность размещать книги на на нашем сайте есть у любого зарегистрированного пользователя. Если Ваша книга была опубликована без Вашего на то согласия, пожалуйста, направьте Вашу жалобу на info@libcat.ru или заполните форму обратной связи.
В течение 24 часов мы закроем доступ к нелегально размещенному контенту.
Как измерить все, что угодно [Оценка стоимости нематериального в бизнесе] — читать онлайн бесплатно полную книгу (весь текст) целиком
Ниже представлен текст книги, разбитый по страницам. Система сохранения места последней прочитанной страницы, позволяет с удобством читать онлайн бесплатно книгу «Как измерить все, что угодно [Оценка стоимости нематериального в бизнесе]», без необходимости каждый раз заново искать на чём Вы остановились. Поставьте закладку, и сможете в любой момент перейти на страницу, на которой закончили чтение.
Как измерить все, что угодно
Оценка стоимости нематериального в бизнесе
Издатель В. Стабников
Перевод Е. Пестерева
Редактор Е. Чуракова
Корректор Н. Шерстенникова
Компьютерная верстка С. Родионова
Художник В. Коршунов
© 2007 by John Wiley & Sons, Inc.
All rights reserved.
© ЗАО «Олимп-Бизнес», перевод на рус. яз., оформление, 2009
Все права защищены.
© Электронное издание. ООО «Альпина Паблишер», 2012
Предисловие к русскому изданию
Как известно, в реальном мире все можно измерить — вопрос только в том, с какой точностью. Очевидно, что степень точности тех или иных измерений/оценок будет зависеть от глубины наших знаний об объекте измерений и о последующем применении результатов этих измерений. В свою очередь, требуемая степень точности результатов измерений определяет выбор методов измерений. Но, как уже было отмечено, данный выбор ограничен глубиной наших знаний в каждом конкретном случае. Такой естественный замкнутый круг ни в коем случае не означает тупиковую ситуацию, а лишь только указывает на логическую связь между знанием предмета измерений, применением их результатов и требуемой точностью данных измерений.
Эта идея красной нитью проходит через всю книгу — все можно с какой-то точностью измерить/оценить.
Идеи и практические советы, изложенные в данной книге, будут весьма полезными для управленцев различного уровня при принятии решений по бизнесу в целом и по нематериальным ценностям в частности.
Акоп Саркисян Ernst & Young CIS Партнер, Руководитель Департамента консультационных услуг по сделкам в странах СНГ
Дуглас У. Хаббард — изобретатель прикладной информационной экономики, метода измерения, высоко оцененного компаниями The Gartner Group, Giga Information Group и Forrester Research. Международно признанный эксперт в области определения стоимости информационных решений, он нередко выступает с докладами на научных конференциях. Его статьи публиковались в журналах «Information Week», «CIO Enterprise» и «DBMS Magazine». Бывший сотрудник Coopers & Lybrand, он обладает более чем 20-летним опытом консалтинга в области управления информационными технологиями. Из них 12 лет Хаббард обучает своему методу сотрудников разных организаций. Десятки компаний из списка «Fortune 500» и государственных учреждений применяли прикладную информационную экономику для решения проблем в области инвестиций в ИТ, военной логистики, венчурных инвестиций, авиации и космонавтики, а также защиты окружающей среды. Более полную информацию можно получить на сайте: www.howtomeasureanything.com
Книга «Как измерить все, что угодно» показывает значение измерений в самых разных областях — от информационных технологий до финансовой отчетности — для нашего понимания бизнеса и мира в целом. Эта изобилующая идеями, яркая книга учит, как измерить в своем бизнесе то, что вы до сих пор считали не поддающимся количественной оценке, например удовлетворенность потребителей, организационную гибкость, связанный с новой технологией риск и доходность инвестиций в технологию.
Примеры, рассказывающие и о том, как ихтиобиологи определяют численность популяции рыбы в большом озере, и о том, как Корпус морской пехоты США выяснял, что на самом деле имеет значение при прогнозировании потребности в топливе в боевых условиях, помогут вам поближе познакомиться с «универсальным подходом» к измерению «неизмеряемого», а также с некоторыми интересными методами решения конкретных проблем.
Из этой книги вы узнаете об:
• иллюзии по поводу нематериальных активов: как их можно измерять;
• калиброванных оценках: что вы знаете уже сейчас;
• оценке риска: введение в метод Монте-Карло;
• реалиях выборочного исследования: как наблюдение за несколькими объектами рассказывает нам обо всех;
• необычных инструментах измерения, таких как Интернет, экспертные оценки, рынки предсказаний и др.;
• оценке стоимости информации: какой показатель стоит определять.
Написанная Дугласом Хаббардом, признанным экспертом и создателем метода прикладной информационной экономики, книга «Как измерить все, что угодно» рассказывает о том, как ее автор использовал свой подход в различных областях, и о том, как любая задача по измерению, какой бы сложной, запутанной или плохо сформулированной она ни была, поддается решению проверенными методами. Содержащая четкие и легкие для выполнения инструкции, эта книга — ценный информационный ресурс, без которого не может обойтись ни один руководитель.
Дуглас Хаббард. Как измерить всё, что угодно. Оценка стоимости нематериального в бизнесе
Среди людей бытует мнение, что многие вещи в мире не поддаются количественной оценке. Это широко распространенное заблуждение наносит существенный ущерб экономике, общественному благосостоянию, окружающей среде и даже национальной безопасности. В результате убежденности в невозможности измерения таких «нематериальных активов», как качество, отношение к делу, удовлетворенность клиентов, бренд и т. п., принимаемые решения часто оказываются необоснованными, а порой и ошибочными.
Дуглас Хаббард является автором прикладной информационной экономики (Applied Information Economics). Дополнительные материалы к книге размещены на сайте автора http://howtomeasureanything.com/
Книга расскажет о том, как измерить в своем бизнесе то, что вы до сих пор считали не поддающимся количественной оценке, например, удовлетворенность потребителей, организационную гибкость, связанный с новой технологией риск и доходность инвестиций в технологию.
Фрагменты отзывов о книге:
Скачать краткий конспект в формате Word
Глава 1. Нематериальное и проблемы его измерения
Если вы можете измерить то, о чем говорите, и выразить это в цифрах, значит, вы что-то об этом предмете знаете. Но если вы не можете выразить это количественно, ваши знания крайне ограниченны и неудовлетворительны. Возможно, это начальный этап, но еще не подлинно научное знание.
Лорд Кельвин
Когда какой-либо объект или явление удается наблюдать тем или иным образом, значит, существует метод для его измерения. Каким бы приблизительным ни было это измерение, оно все равно будет им, если расскажет больше, чем вы знали до сих пор.
Цель данной книги состоит в том, чтобы продемонстрировать два положения:
Глава 2. Интуитивное умение измерять всё: Эратосфен, Энрико и Эмили
Эратосфен, библиотекарь Александрийской библиотеки, живший в III в. до н.э., определил радиус земного шара. Его результат составил примерно 6300 км, что отличается от современного значения меньше, чем на 5%. Схема рассуждений Эратосфена такова (рис. 2.1). В полдень в день летнего солнцестояния в г. Сиене (ныне Асуан) Солнце находилось в зените и предметы не отбрасывали тени. В тот же день и в то же время в г. Александрии, находившемся в 5000 стадиях от Сиены, Солнце отклонялось от зенита примерно на 7°. Это составляло примерно 1/50 полного круга (360°), откуда получалось, что окружность Земли равна 250 000 стадиям.
Энрико Ферми, лауреат Нобелевской премии практиковал «вопросы Ферми». Самым известным таким вопросом является определение числа настройщиков пианино в Чикаго:
Число настройщиков пианино в Чикаго = (Численность населения / Число членов одной семьи) * Процент семей, пользующихся услугами настройщиков * Число настроек в году / (Число пианино, настраиваемых одним настройщиком в день * Число рабочих дней в году)
Подход Ферми (разложение на составляющие) позволял людям, производившим расчеты, понять, откуда берется неопределенность. Какие переменные характеризовались наибольшей неопределенностью – процент семей, регулярно пользующихся услугами настройщиков пианино, частота настроек, число инструментов, которые можно настроить за день, или что-то еще? Самый крупный источник неопределенности указывал на то, какие измерения позволят максимально снизить ее.
Не считайте неопределенность неустранимой и не поддающейся анализу, спросите себя: а что же вы все-таки знаете о проблеме? Как мы увидим позже, оценка имеющейся количественной информации о предмете — очень важный этап измерения явлений, которые выглядят неизмеряемыми.
«Вопросы Ферми» для нового предприятия
Чак Макей из Wizard of Ads всячески поощряет компании использовать «вопросы Ферми» для оценки размера своего рынка в том или ином районе. Недавно один страховой агент попросил Чака дать совет, стоит ли его компании открывать офис в Уичита-Фоллз (штат Техас), где до сих пор у неё не было представительства. Будет ли на данном рынке спрос на услуги ещё одного страховщика? Чтобы проверить реализуемость плана, Макей покопался в Интернете в поисках ответов на ряд «вопросов Ферми». Как и тот, Макей начал с проблемы численности населения.
Вывод Макея: скорее всего, новое агентство в этом городе вряд ли будет прибыльным, поэтому от плана следует отказаться.
Бизнес может извлечь из этого несколько уроков. Во-первых, даже такие кажущиеся эфемерными вещи, как расширение полномочий сотрудников, креативность или согласованность со стратегией, должны иметь поддающиеся обнаружению последствия, если только они вообще имеют какое-то значение. Я вовсе не утверждаю, что эти вещи «паранормальны», но здесь действуют те же правила.
А во-вторых, эксперимент Эмили продемонстрировал эффективность простых методов, традиционно используемых в научных исследованиях, таких как эксперимент в контролируемых условиях, выборка (даже если она невелика), рандомизация и испытания «вслепую», позволяющих избежать необъективности со стороны испытуемого или исследователя.
Правило Дилберта: повышение всегда получает самый некомпетентный сотрудник
Если качество и инновационность действительно возросли, то разве эта разница не должна, по крайней мере, чувствоваться? Если те, кому положено об этом судить, то есть потребители, в ходе испытания вслепую не смогут заявить, что исследования после внедрения ПО стали качественнее или инновационнее, чем до внедрения, то это будет означать, что данная информационная структура никак не влияет на удовлетворенность клиентов, а следовательно, и на доходы. Если такие преимущества ПО, как качество, инновационность и любые другие, невозможно обнаружить, то они не имеют значения.
Руководители часто говорят: «Ни о чем подобном мы не могли бы даже догадываться». Они заранее пасуют перед неопределенностью. Вместо того чтобы, по меньшей мере, попытаться провести измерения, они бездействуют, обескураженные кажущейся невозможностью устранить ее. Ферми в подобном случае мог бы сказать: «Да, вы многого не знаете, но что-то же вы все-таки знаете?»
Представление об измерении как об уменьшении погрешности — главная идея данной книги.
…ценность подхода Ферми состоит, прежде всего, в том, что оценка современного уровня наших знаний о предмете — необходимое условие последующих измерений.
Глава 3. Почему неизмеримость нематериального – всего лишь иллюзия
Обычно люди считают вещи неизмеримыми по трем причинам:
Определение измерения. Измерение — это совокупность снижающих неопределенность наблюдений, результат которых выражается некой величиной.
Таким образом, измерение — это не только полное устранение, но и частичное сокращение неопределенности. Факт присутствия ошибки, избежать которой полностью не удастся, при том что полученный результат все равно станет шагом вперед по сравнению с прежними представлениями, — ключевая идея проведения экспериментов, опросов и прочих научных измерений.
Шеннон предложил математическое определение информации как снижения неопределенности в сигнале, которое он обсуждает в терминах энтропии, сокращаемой данным сигналом.
Стивенс описал различные шкалы измерения, включая номинальную (шкалу наименований) и порядковую. Номинальные измерения просто показывают принадлежность объекта к той или иной категории, например пол эмбриона — мужской или женский, или наличие у объекта того или иного заболевания. Шкалы наименований не предполагают ранжирования или сравнения, в частности по размерам. Объект просто относят к той или иной категории. Порядковые шкалы позволяют утверждать, что одна величина «больше» другой, не уточняя, однако, на сколько. Примером может служить 4-звездочная система оценки кинофильмов или шкала твердости минералов по Моосу. В обеих шкалах 4 больше, чем 2, но не обязательно вдвое.
В бизнесе решения принимаются в условиях неопределенности. Когда такая неопределенность велика и касается важных, рискованных решений, ее снижение играет большую роль.
Объект измерения
Ничто так не мешает прогрессу знания, как расплывчатость терминологии.
Томас Рейд (1710—1769), шотландский философ
На семинарах я часто прошу присутствующих поставить передо мной максимально сложную задачу, связанную с измерением. Как-то мне предложили измерить наставничество, и я сказал: «Что ж, такая проблема может возникнуть в реальной жизни. Первое, что я заметил бы, — это: больше наставничества всегда лучше, чем меньше наставничества. Я знаю людей, которые тратят на это деньги, поэтому не удивлюсь, если кому-то потребуется оценить данное явление. Однако что вы имеете в виду под наставничеством?» Слушатель ответил, не задумываясь: «Не уверен, что смогу это сформулировать», на что я заметил: «Вот поэтому, наверное, вам и трудно его измерить. Сначала необходимо сформулировать, что такое наставничество».
Цепочка уточнений — это просто короткий ряд ассоциаций, помогающий представить себе нематериальный объект как материальный. Сначала мы осознаем, что если объект X имеет для нас значение, то он, по определению, должен в чем-то проявляться. Разве могли бы такие реальности, как качество, риск, безопасность или репутация, иметь для нас какую-то ценность, не проявляй они себя прямо или косвенно? Если возникает причина интересоваться неизвестной величиной, значит, мы думаем, что она каким-то образом приводит к желательным или нежелательным последствиям.
Когда цепочка уточнения не срабатывает, я провожу мысленный эксперимент. Представьте себе, что вы иностранный ученый, способный клонировать не только овец и людей, но даже целые организации. Предположим, предметом вашего исследования является конкретная сеть предприятий экспресс-питания и вас интересует, как на ее работу повлияет такая нематериальная вещь, как расширение полномочий сотрудников. Вы создаете два клона изучаемой организации, один из которых называете тестируемой, а второй — контрольной группой. При этом сотрудники тестируемой группы получают дополнительные полномочия, а в контрольной группе все остается по-прежнему. Какие изменения — прямые или косвенные — вы наблюдаете в первой организации? Ожидаете ли вы, что решения будут приниматься на более низком организационном уровне? Станут ли решения качественнее и будут ли они приниматься быстрее? Приводит ли передача полномочий к ослаблению контроля над работниками? Означает ли это, что теперь структура организации станет более «плоской» и накладные расходы на управление сократятся? Если удастся обнаружить хотя бы одно различие между двумя клонами, то вопрос о способе измерения вашего объекта будет наполовину решен.
Правило пяти. Существует 93%-ная вероятность того, что в любой случайной выборке медиана для всей совокупности находится в интервале от между наименьшим и наибольшим значениями.
…когда наблюдение сообщает нам нечто, чего мы раньше не знали, это означает, что произведено измерение.
Статистик Дэвид Мур, возглавлявший в 1998 г. Американскую статистическую ассоциацию (American Statistical Association), как-то сказал следующее: «Измеряйте, даже если не знаете, что измерять. Тогда вы и узнаете, что вам нужно измерить».
Четыре полезные предпосылки измерения
Отнеситесь к измерению как к итеративному процессу. Начните измерять то, что вам нужно. Получив первые результаты, вы всегда сможете скорректировать свой метод. Обычно для измерения большинства вещей, называемых нематериальными, не хватает вовсе не передовых замысловатых способов. Как правило, неопределенность в отношении подобных объектов так велика, что уменьшить ее позволяют и базовые методы измерения.
Ключевой этап прикладной информационной экономикой / applied information economics, AIE (и этим объясняется название метода) — расчет экономической стоимости информации.
ЗНАЧЕНИЕ ИМЕЮТ ЛИШЬ НЕСКОЛЬКО ВЕЩЕЙ. В каждом случае лишь несколько ключевых переменных имеют значение, оправдывающее усилия по их определению. Информационная ценность остальных равна или практически равна нулю.
Универсальный подход к измерению:
Измерение — один из основных инстинктов человека, однако этот инстинкт подавляется в условиях, когда люди предпочитают создавать комитеты и добиваться консенсуса вместо того, чтобы делать простые наблюдения.
Глава. 4. Формулирование задачи по измерению
Прежде чем приступить к измерению, задайте себе следующие пять вопросов:
Первые три вопроса помогают понять, что представляет собой объект оценки в рамках решений, которые планируется принимать по результатам измерения. Если эти результаты вообще имеют значение, то только потому, что они понятным образом влияют на решения и линию поведения. Когда не удается установить, какие решения будут затронуты итогами задуманного измерения и способ их воздействия, значит, это измерение просто не имеет никакой ценности.
Какую ценность имеют многочисленные отчеты, составляемые еженедельно и ежемесячно? Когда я попросил их назвать хотя бы одно решение, принимаемое на основе каждого отчета, они обнаружили, что многие из них вообще не используются. Информационная ценность этих отчетов оказалась нулевой.
Неопределенность, риск и их показатели:
Специалисты решили, что повышение безопасности означает снижение частоты определенных нежелательных событий и уменьшение ущерба от них.
Оказывается, способность человека оценить шансы можно калибровать – точно так же, как любой научный инструмент калибруется для получения правильных показаний.
Глава 5. Калиброванные оценки: что вам известно уже сейчас?
Один из способов показать неточность определения величины — выразить ее в виде интервала возможных значений. В статистике интервал, в котором с некоторой вероятностью может содержаться правильный ответ, называется доверительным интервалом (confidence interval, CI); 90%-ный доверительный интервал — это диапазон значений, содержащий правильное с вероятностью 90%.
ДВЕ КРАЙНОСТИ СУБЪЕКТИВНОЙ ОЦЕНКИ
Теоретические исследования доказали, что если людей специально учат преодолевать систематические ошибки и необъективность, их оценки становятся существенно точнее. Оказалось, что оценка неопределенности — это навык, который можно приобрести и который можно совершенствовать.
Пройдите тест на калибровку (рис. 5.1). Отвечая на каждый вопрос, укажите верхнюю и нижнюю границы интервала. Помните: интервал должен быть таким широким, чтобы вы были на 90% уверены, что правильный ответ попадет в него. Ответы расположены в конце заметки.
Рис. 5.1. Тест «Калибровка».
Методы повышения точности калибровки вероятности
Метод | Содержание |
1. Повторение и обратная связь | Выполните подряд несколько тестов, оценивая результаты каждого, и повторите их, чтобы улучшить в следующий раз |
2. Эквивалентные ставки | Придумайте эквивалентную ставку для каждой оценки, чтобы проверить, действительно ли предложенный диапазон значений или вероятность отражает неопределенность |
3. Перечисление двух доводов «за» и двух «против» | Приведите, по крайней мере, две причины, по которым вы уверены в своей оценке, и две причины, по которым вы могли ошибиться |
4. Преодоление зацикленности | Представьте проблему диапазона оценки в виде двух бинарных вопросов типа: «Уверен ли я на 95%, что истинное значение лежит выше нижней (ниже высшей) границы предложенного мною диапазона?» |
Пат Планкетт, менеджер по оценке эффективности информационных технологий Министерства жилищного строительства (США) сказал: «Калибровка открыла нам глаза. Многие, включая меня самого, обнаружили, что излишне оптимистичны, делая оценки. Калибровка делает вас другим человеком. Вы приобретаете обостренную способность оценивать степень неопределенности».
Глава 6. Оценка риска: введение в моделирование методом Монте-Карло[1]
ПАРАДОКС РИСКА. Если организация и применяет количественный анализ рисков, то обычно это делается для принятия повседневных оперативных решений. Самые серьезные и опасные решения (чаще всего) формулируются при минимальном использовании полноценного анализа риска.
Почти все самые сложные методы анализа риска применяются при принятии простых решений, почти не влекущих серьезных негативных последствий, однако решения о слияниях, крупных инвестициях в ИТ, финансировании научных исследований и т.д. обычно формируются без этой процедуры. Почему так происходит? Может быть, из-за существующего мнения о том, что оперативные решения (одобрение кредита или расчет страховой премии) количественно оценить намного проще в отличие от действительно сложных проблем, связанных с рисками, которые с трудом поддаются точному расчету. Это серьезное заблуждение. Как я уже показал, в важных решениях нет ничего «неизмеримого». Метод в середине XX века разработал математик Станислав Улам (см. Станислав Улам. Приключения математика).
Глава 7. Оценка стоимости информации
Главные причины тому, что информация имеет свою стоимость для бизнеса:
Вероятность ошибиться и цена ошибки: ожидаемые потери от упущенных возможностей
Более 50 лет назад в теории игр — области, понятной лишь посвященным, — была разработана такая формула стоимости информации, которую можно не только вывести математически, но и уяснить интуитивно. Снижение неопределенности (то есть проведение измерений) позволяет делать более удачные ставки (то есть принимать более обоснованные решения). Знать стоимость измерений необходимо, чтобы определить, как можно измерить что-либо и следует ли этим заниматься вообще.
Чтобы не усложнять, рассмотрим бинарную ситуацию: вы либо преуспеете, либо провалитесь — вариантов больше нет. Предположим, что вы заработаете 40 млн. дол., если реклама сработает, и потеряете 5 млн. дол. (затраты на проведение кампании) в другом случае. Допустим также, что ваши калиброванные эксперты говорят, что существует вероятность провала рекламы 40%. Обладая этой информацией, вы можете составить таблицу 7.1.
Таблица 7.1. Простейший пример расчета потерь от упущенных благоприятных возможностей
План проведения кампании одобрен 40 млн. дол. –5 млн. дол.
План проведения кампании отвергнут 0 дол. 0 дол.
Потери от упущенных благоприятных возможностей (opportunity loss, OL) — это просто те затраты, которые мы понесем, если выберем путь, который окажется ошибочным. Ожидаемые потери от упущенных возможностей (expected opportunity loss, EOL) для той или иной стратегии можно рассчитать путем умножения вероятности допустить ошибку на цену ошибки. В нашем примере мы получим такие ответы:
OL (план проведения кампании одобрен) 5 млн. дол.
OL (план проведения кампании отвергнут) 40 млн. дол.
EOL (план проведения кампании одобрен) 5 млн. дол. * 40% = 2 млн. дол.
EOL (план проведения кампании отвергнут) 40 млн. дол. * 60% = 24 млн. дол.
Ожидаемые потери от упущенных благоприятных возможностей возникают из-за того, что вы не знаете, какова вероятность негативных последствий принимаемого решения. Сумей вы снизить данную неопределенность, уменьшится и EOL. Именно это и позволяет сделать измерение.
Все измерения, результаты которых имеют некую стоимость, приводят к снижению неопределенности в отношении показателя, влияющего на решение, чреватое экономическими последствиями. Чем сильнее уменьшаются ожидаемые потери от упущенных благоприятных возможностей, тем больше стоимость информации, полученной путем измерения. Разница между значениями EOL до и после измерения называется ожидаемой стоимостью информации (expected value of information, EVI).
Расчет ожидаемой стоимости информации, получаемой в ходе измерений, до их проведения требует от нас предварительной оценки ожидаемого снижения неопределенности. Иногда это бывает довольно трудно сделать из-за сложности определения некоторых переменных, но возможен и упрощенный подход. Легче всего рассчитать ожидаемую стоимость полной информации (expected value of perfect information, EVPI). Если бы существовала возможность полного устранения неопределенности, то значение EOL уменьшилось бы до нуля. Таким образом, EVPI — это просто EOL выбранного вами варианта. В нашем примере решение, принимаемое без осуществления измерений, заключается в одобрении плана проведения рекламной кампании, тогда ожидаемые потери от упущенных благоприятных возможностей составляют 2 млн. дол. Таким образом, стоимость устранения любой неопределенности относительно успешности планируемой акции просто равна 2 млн. дол. Если удается не устранить, а только уменьшить неопределенность, то ожидаемая стоимость информации несколько сокращается.
Стоимость информации
Ожидаемая стоимость информации (EVI) = Сокращение ожидаемых потерь от упущенных благоприятных возможностей (EOL): EVI = EOL (до измерений) – EOL (после измерений),
где EOL — вероятность ошибиться, умноженная на цену ошибки.
Ожидаемая стоимость полной информации (EVPI) = EOL до измерений (если информация точна и полна, то EOL после измерений равна 0).
Стоимость информации для переменных величин
Предположим, что в нашем примере с рекламой возможны не два исхода, а результат в виде интервала значений. Калиброванный маркетолог на 90% уверен, что эта рекламная кампания поможет увеличить продажи на 100 тыс. — 1 млн. единиц продукции. Однако чтобы достичь точки безубыточности нашей кампании, нужно продать некий объем продукции. Допустим, что с учетом затрат на проведение рекламной акции и валовой прибыли от продукта мы определили наступление точки безубыточности при реализации – 200 тыс. единиц товара. Продав меньше, мы понесем чистые убытки, причем чем меньше объем реализации, тем крупнее эти убытки. Продав ровно 200 тыс. единиц продукции, мы не получим ни прибыли, ни убытков. А если реализовать товар не удастся вообще, то мы потеряем деньги, израсходованные на рекламную кампанию, а именно 5 млн. дол. (вы можете сказать, что этим убытки фирмы не ограничатся, но для простоты будем учитывать только их).
Другая точка зрения состоит в том, что на каждой не проданной нами единице продукции, которую надо реализовать для достижения безубыточности, мы потеряем 25 дол. Какова в этой ситуации стоимость снижения неопределенности результата кампании?
Чтобы рассчитать EVPI для подобных интервалов значений, необходимо:
Лучше всего создать для этой цели макрос на базе Excel или написать программу, которая разбила бы распределение значений примерно на 1000 фрагментов, а затем выполнила требуемые расчеты. Так мы гарантированно рассмотрим все важные ситуации и исключения. Чтобы упростить задачу, я уже проделал за вас основную работу. Теперь все, что вам нужно, — это использовать пару следующих графиков и выполнить несколько несложных арифметических расчетов.
Прежде чем приступить к делу, нужно решить, какую из границ 90-процентного доверительного интервала (верхнюю или нижнюю) считать лучшей (best bound, ВВ), а какую — худшей (worst bound, WB). Ясно, что иногда лучше самое большое число (если, например, речь идет о доходах), а порой — самое маленькое (если мы говорим о затратах). В примере с рекламной кампанией маленькое число — это плохо, то есть WB — 100 тыс., а ВВ — это 1 млн. единиц продукции. По этим данным мы рассчитаем показатель, который я называю «условным порогом» (relative threshold, RT); он указывает, где находится порог относительно остальных значений интервала. Графически RT представлен на рисунке 7.1.
Рис. 7.1. Пример «условного порога»
Мы используем условный порог для четырехэтапного расчета ожидаемой стоимости полной информации:
Рис. 7.2. График фактора ожидаемых потерь от упущенной благоприятной возможности (EOLF)
Расчет показывает, что максимально допустимые затраты на проведение измерения не должны превышать 337 500 дол. (это число определено исходя из предпосылки, что измерение полностью устранит неопределенность).
Мир несовершенен: стоимость частичного снижения неопределенности
В последнем примере с ожидаемой стоимостью полной информации мы оценили затраты на полное устранение неопределенности, а не ее снижение. Расчет EVPI полезен сам по себе, поскольку, по крайней мере, позволяет узнать потолок стоимости информации, который не должен быть превышен при осуществлении измерений. Однако нередко приходится довольствоваться простым снижением неопределенности, особенно когда речь идет о прогнозе, например, роста продаж в результате проведения рекламных кампаний. В таких случаях полезно знать не только максимальную сумму, которую можно израсходовать в идеальных условиях, но и во что обойдется измерение в реальной жизни (обязательно сопровождаемое реальной погрешностью). Иными словами, нам надо знать ожидаемую стоимость информации, а не ожидаемую стоимость полной информации. Для этого полезно мысленно представить себе, как выглядит график зависимости EVI от объема информации (рис. 7.3).
Рис. 7.3. Кривая ожидаемой стоимости информации
Инверсия измерений
Рис. 7.4. Инверсия измерений
Чему нас учит расчет стоимости информации
Глава 8. Переход от объекта в методу измерения
Разложите объект измерения на составляющие. Многие измерения начинаются с разложения неизвестной величины на составляющие с целью выявления того, что можно наблюдать непосредственно и что легче поддается количественной оценке.
Эффект разложения на составляющие состоит в том, что сам процесс нередко обеспечивает такое значительное снижение неопределенности, что дальнейшие наблюдения становятся ненужными.
Вторичные исследования: предположим, что до вас этот объект уже измеряли. Исследование начинается с вторичных исследований, то есть с анализа результатов, полученных до вас. Все исследователи считают само собой разумеющимся, что проблемой уже кто-то занимался. Анализ имеющейся литературы, похоже, еще не вошел у менеджеров в привычку.
Источники Интернета. Если предмет мне совершенно незнаком, то я начинаю вовсе не с Google, а с онлайновой энциклопедии Wikipedia. Ищите по слова, которые ассоциируются с исследованиями и количественным анализом. Помните, что в Интернете есть не только поисковые машины, но и хранилища специальной информации: сайт Бюро переписи населения США, Министерства торговли, ЦРУ («World Fact Book» — «Всемирная книга фактов ЦРУ» — место, где я всегда нахожу самые разнообразные данные международной статистики). Используйте несколько поисковых машин. Найдя исследования не совсем по своей теме, в которых, тем не менее, упоминается интересующий вас вопрос, обязательно посмотрите библиографию.
НЕКОТОРЫЕ ОСНОВНЫЕ ПРАВИЛА НАБЛЮДЕНИЯ
Не измеряйте точнее, чем нужно.
КРАТКИЙ ГЛОССАРИЙ ПОГРЕШНОСТИ
Ошибку, не исключаемую путем усреднения (систематическую ошибку), называют также отклонением, или смещением. Есть три основных типа отклонений, которые можно ожидать при проведении измерений: отклонение ожидания, отклонение выбора, отклонение наблюдателя.
Глава 9. Выборочная реальность: как наблюдение за частью рассказывает нам о целом [2]
Итак, мы установили, что:
Как это можно применить в бизнесе исследование статистики серийных номеров танков разведкой англичан? « Серийные номера» (то есть последовательные серии) можно найти в современном мире где угодно. Так, компании бесплатно предоставляют конкурентам информацию о своем объеме производства, просто указывая на товарах серийные номера, которые может увидеть любой покупатель. (Однако чтобы быть случайной, такая выборочная совокупность должна состоять из товаров, купленных в разных магазинах.) Аналогичным образом несколько страниц из выброшенного отчета конкурента или цифр из квитанции могут многое рассказать об остальных страницах отчета или обо всех квитанциях за данный день. Я вовсе не призываю вас копаться в отбросах, но исследование содержимого мусорных контейнеров нередко позволяет решить интересные задачи по измерению.
Корреляционный анализ и регрессионное моделирование.
Глава 10. Кое-что о Байесе
Парадокс предварительного знания:
Проблему прежних знаний изучает так называемая байесовская статистика. Автор этого метода — Томас Байес, британский математик и пресвитерианский священник XVIII века. Байесовская статистика занимается вопросом: как мы корректируем свое предварительное знание с учетом новой информации? Байесовский анализ начинается с того, что известно сейчас, и затем рассматривает, как это знание изменится с получением новых сведений. А небайесовская статистика, преподаваемая в большинстве курсов по методам выборочного наблюдения, исходит из следующего: все, что известно о некоей группе объектов, — это выборка, которую вы только что из нее сделали.
Теорема Байеса гласит, что вероятность наступления «события» при условии проведения «наблюдения» равна произведению вероятности наступления события и вероятности проведения наблюдения при условии наступления события, деленному на безусловную вероятность проведения наблюдения (рис. 10.1).
Рис. 10.1. Теорема Байеса
Используйте свой природный байесовский инстинкт:
1) сначала дайте объекту (явлению) свою калиброванную оценку;
2) затем соберите дополнительную информацию (проведите опрос, изучите работы других исследователей и т.д.);
3) далее чисто субъективно скорректируйте свою калиброванную оценку без дополнительных расчетов.
Неоднородный бенчмаркинг и его использование для оценки «ущерба бренду». Люди корректируют свои оценки потому, что, как мы теперь знаем, все они, особенно калиброванные оценщики, являются интуитивными байесианцами. Они склонны довольно рационально обновлять первоначальную информацию, которой обладали, учитывая новые сведения, даже если те носят качественный характер или имеют к оцениваемому объекту отдаленное отношение.
Представление о порядке величин. Неоднородный бенчмаркинг — метод, при котором калиброванным экспертам, оценивающим неизвестную величину, предоставляют в качестве ориентиров другие количественные показатели, даже если связь между ними и кажется отдаленной. Пример: прогнозирование продаж нового продукта на основе информации о сбыте других товаров или аналогичных конкурентных продуктов.
Избегайте «инверсии наблюдения». Многие задают вопрос: «Какой вывод я могу сделать из этого наблюдения?» Но Байес показал нам, что нередко полезнее задать вопрос: «Что я должен наблюдать, если будет соблюдаться условие X?» Ответ на последний вопрос позволяет разобраться с первым.
Глава 11. Предпочтения и подходы: «мягкие» аспекты измерения
Количественное определение склонности к риску. На рис. 11.1 представлена кривая риска, на который инвесторы готовы пойти, чтобы получить данную доходность. Когда потенциальная доходность инвестиций высока, инвесторы обычно готовы смириться с более высоким риском. Если же инвестиции малорискованны, то чаше всего инвесторы соглашаются и на более низкую доходность.
Рис. 11.1 Инвестиционная граница
Не будет преувеличением сказать, что инвестиции в разработку программного обеспечения обычно входят в число самых рискованных проектов вложения средств, которые реализуют компании.
Кривая инвестиционной границы — пример тех кривых полезности, с которыми будущие менеджеры компаний знакомятся на первом курсе университета. К сожалению, большинство из них, по-видимому, считают полученные знания чисто теоретическими и не имеющими никакого практического значения. Но кривые полезности — идеальный инструмент, позволяющий определять, какой частью одного стоит пожертвовать ради получения другого. Разнообразные виды кривых полезности помогают тем, кто принимает решения, детально выяснять, какой компромисс для них приемлем.
Могу ли я считать, что тот, кто делает всю работу вовремя и почти без ошибок, работает эффективнее того, кто постоянно получает больше положительных отзывов клиентов? На самом деле это не проблема измерения, а вопрос документального оформления субъективных компромиссов. Это проблема отражения множества разнородных наблюдений в едином «индексе». И здесь, чтобы такое обобщение оказалось логичным, мы можем воспользоваться кривыми полезности. С их помощью достаточно просто показать, как сформулировать компромиссы.
Можно составить график, отражающий все возможные компромиссы, по аналогии с определением желаемого соотношения «риск/доходность». Рисунок 11.2 представляет собой график с несколькими кривыми полезности. Он иллюстрирует гипотетический пример оценки руководством компромиссов между качеством работы и пунктуальностью выполнения заказов.
Рис. 11.2. Гипотетические «кривые полезности»
Глава 12. Решающий инструмент измерения: людские суждения
Человеческий мозг не просто машина для вычисления. Это сложная система, познающая окружающую среду и приспосабливающаяся к ней путем выработки разнообразных упрощающих правил. Практически все эти правила приносят правду в жертву простоте, а многие даже противоречат друг другу. Те, что не вполне обоснованны, но, тем не менее, полезны на практике, называются эвристикой. А те из них, что явно противоречат здравому смыслу, называются заблуждениями.
Примеры когнитивного искажения экспертами-оценщиками:
Первое, что необходимо сделать – признать само существовании е проблемы с искажением восприятия.
Одно время я категорически отрицал ценность метода взвешенных коэффициентов, уподобляя его астрологии. Однако последующие исследования убедили меня, что он всё-таки имеет определенные преимущества.
Важнейшее правило измерения. Самое главное – никогда не используйте метод, способный увеличить ошибку первоначальной оценки.
Два весьма распространенных метода измерения: анализ «затраты / выгоды» и метод субъективных взвешенных показателей только увеличивают неопределенность. Когда эксперты выбирают веса по пятибалльной шкале, они вовсе не имеют в виду, что балл 4 вдвое важнее балла 2. Из-за этой неоднозначности пятибалльная (семибалльная или какая угодно другая) шкала только добавляет ошибку к процессу оценки. На мой взгляд, единственное наблюдаемое достоинство систем условных взвешенных коэффициентов то, что менеджерам обычно хватает здравого смысла игнорировать полученные таким образом результаты. 🙂
Существует только один ограничивающий критерий, позволяющий с уверенностью сказать, являются ли методы анализа «затрат/выгод» или расчета взвешенных коэффициентов способами измерения; результатом должно стать повышение предыдущего уровня знания. Если использованный метод только увеличивает прежнюю ошибку, то это не измерение. Если его считают формализованным и систематизированным, но без научных доказательств уменьшения ошибки и принятия более удачных решений, это не измерение. На проведение псевдоизмерений организации нередко тратят больше времени и сил, чем потребовалось бы на применение способов, гарантированно снижающих неопределенность. Зачем же тогда, спрашивается, даже думать об использовании методов, которые фактически не уменьшают неопределенность?
Глава 13. Новые инструменты измерения для менеджеров
Глава 14. Универсальный метод измерения: прикладная информационная экономика
Ответы на тест 5.1. Калибровка.
[1] Методу Монте-Карло я посвятил отдельную заметку
[2] Т-статистике я посвятил фрагмент заметки