Презентация на тему: Экспертные оценки

Экспертные оценки Программирование как профессия. Часть VВасилий Буров, эксперт линэкс

Экспертные оценки Подходы, основанные на экспертных оценках, применяются при отсутствии дискретных эмпирических данных. Используют опыт и знания экспертов-практиков в различных областях. Оценки, получаемые при этом, представляют собой синтез известных результатов прошлых проектов, в которых принимал участие эксперт. Даже признанные эксперты иногда делают неверные догадки и предположения. На основе экспертных оценок были разработаны два метода, допускающие возможность ошибки экспертов: метод Дельфи метод декомпозиции работ.

Метод декомпозиции работ Способ иерархической организации элементов проекта, упрощающий задачу составления бюджета проекта и контроля за расходованием средств. Позволяет определить, на что именно расходуются средства. Если с каждой категорией расходов, связанной с тем или иным элементом иерархии проекта, сопоставить некоторую вероятность, можно определить ожидаемую сумму расходов на разработку, начиная с некоторых структурных элементов проекта и заканчивая совокупными затратами на выполнение всего проекта. Метод декомпозиции работ для ПО предполагает существование двух иерархий элементов проекта. структура ПОстадии разработки ПО

Какой вы оценщик? Заполним анкету своими оценками (минимальное и максимальное значение)Температура ядра Земли (в град C)Объем крови, который сердце взрослого человека перекачивает за день (в литрах)Площадь пустыни Сахары (в кв. км)Год рождения Александра МакедонскогоДлина экватораГлубина озера Байкал (в метрах)Масса головного мозга человека в процентах от массы тела в %Сколько весит баррель нефтиНаселение АвстралииДлина самолета Боинг-747

Какой вы оценщик? За каждый правильный ответ ставим себе один бал

Метод Делфи Метод Дельфи был разработан в корпорации «Рэнд» в конце 1940-х гг. и использовался первоначально для прогнозирования будущих событий (отсюда метод и получил свое название по сходству с предсказаниями Дельфийского оракула в Древней Греции). Позднее метод использовался для принятия решений по спорным вопросам. На предварительном этапе участники дискуссии должны без обсуждения с другими ответить на ряд вопросов, относительно их мнения по спорному вопросу. Затем ответы обобщаются, табулируются и возвращаются каждому участнику дискуссии для проведения второго этапа, на котором участникам снова предстоит дать свою оценку спорного вопроса, но на этот раз, располагая мнениями других участников, полученными на первом этапе. Второй этап завершается сужением и выделением круга мнений, отражающих некоторую общую оценку проблемы.Изначально в методе Дельфи коллективное обсуждение не использовалось; обсуждение между этапами метода было впервые применено в обобщенном методе Дельфи. Метод достаточно эффективен в том случае, если необходимо сделать заключение по некоторой проблеме, а доступная информация состоит больше из «мнений экспертов», чем из строго определенных эмпирических данных.

Методика Wideband Delphi Wideband Delphi – предложенная Барри Боэмом в 1981 году практическая реализация проведения оценки по методу ДелфиЯвляется методом для повышения качества оценок, полученных несколькими экспертамиОриентирована на получение следующих оценок: Структурная или функциональная декомпозиция работТрудозатратыРазмер проектаКритические компьютерные ресурсыСтоимостьРиски

Основные участники процесса оценки Менеджер проекта – составляет список оцениваемых элементовМодератор – управляет процессом оценки, обеспечивает правильное выполнение процедуры Wideband Delphi. Эта роль может выполняться менеджером проектаОценщики – изучают задачу и выполняют оценку

Применение Wideband Delphi Порядок применения Wideband Delphi:Подготовить список оцениваемых элементовПровести совместную встречу команды оценки для проведения ревью списка оцениваемых элементов Выполнить индивидуальные оценкиСобрать индивидуальные оценки от каждого из членов команды и создать суммарную таблицу оценок Провести встречу по обсуждению оценокЗавершить заполнение суммарной таблицы оценок

Подготовка списка оцениваемых элементов Выполняется менеджером проектаОпределяется, что надо оценить (трудозатраты, стоимость и т.д.)Нельзя смешивать различные виды оценокВыбирается единица измерения для проведения оценкиСоздается список и описание оцениваемых элементов, а также собирается необходимая для оценки документация

Ревью оцениваемых элементов Совместное совещание команды оценки организуется модераторомЭто совещание должно занимать не более 30 минутШаги:Рассказать про технику Wideband DelphiПредоставить список оцениваемых элементов, а также форм для проведения оценкиПровести ревью списка, скорректировать его при необходимостиЕсли используется индивидуальная форма оценки, то она также может быть скорректирована

Выполнение индивидуальных оценок Оценщики выполняют индивидуальные оценкиОни могут выполнять любые исследования, какие посчитают нужнымиОценщики не должны общаться между собойИндивидуальная оценка должна занимать не более, чем 2 часаОценка выполняется по PERT: (Best Case + Worst Case + Most Probable*4)/6

Оценка PERT Оценка по трем точкам:О – оптимистическаяВ – наиболее вероятнаяП – пессимистическаяОжидаемая по PERT (Program Evaluation and Review Technique): Д = (О + 4 * В + П) / 6Пример. Некоторая работа исполнялась 10 раз.Статистика длительностей:2 раза за 4 дня – оптимистическая7 раз за 5 дней – наиболее вероятная1 раз за 9 дней – пессимистическаяСредняя (арифм) = (4 * 2 + 5 * 7 + 9 * 1) / 10 = 5,2 днейОжидаемая (PERT) = (4 + 4 * 5 + 9) / 6 = 5,5 дней

Обсуждение оценок Модератор организует совещание команды оценки:Всем участникам предоставляется суммарная таблица оценокКаждый оценщик изучает суммарную таблицу оценокПроводится несколько совместных обсуждений оценкиКаждый оценщик выполняет еще одну индивидуальную оценку. Результаты этих оценок опять обобщаются в суммарной таблице оценокПроводится новое совместное обсуждение оценокЕсли оценки сошлись и между ними небольшая разница, то совещание завершается и итоговая оценка предоставляется менеджеру проектаЕсли оценки не сошлись, то шаги 3-6 повторяются

Рекомендации по использованию Для проведения оценки необходимо 3-5 экспертовТакже полезно использовать экспертов с различным опытом, проектными ролями, техниками оценки Wideband Delphi это ресурсоемкая методика, поэтому ее не рекомендуется использовать для детальных оценок отдельных задачКогда применяется?Новый бизнес-домен, технология, язык программированияГрубая оценка на начальных стадиях проектаНетривиальный пользовательский интерфейс, высокая алгоритмическая сложность, высокие требования к производительности и т.д.