Дебаты Astra × Fablesource-check
Проверка атрибуций и продуктовых утверждений
Дата проверки: 2026-09-17. Вспомогательная записка координатора; не ответ Astra/Fable и не третий участник дебатов. Исходные input/original.html и input/readable.txt прочитаны как материал для проверки. Ответы независимых моделей не использовались.
Область: Bernie Smith / ROKS / ROKET-DS / Motive8 / Roughshod, затем спорные утверждения о KPI Tree Studio и несколько непосредственно затронутых инструментов. Это целевая проверка документа, а не обзор всего рынка и не функциональный аудит SaaS.
Статусы:
- verified — указанный тезис подтверждается названным первоисточником в указанном смысле. Подтверждение авторской рекомендации не превращает её в универсальную закономерность.
- partly — подтверждается часть тезиса, атрибуция или направление; ограничения существенны.
- not verified — достаточного подтверждения в проверенных материалах нет. Это не доказательство ложности.
- contradicted — проверенный источник прямо расходится с конкретной формулировкой. Для продукта речь может идти о противоречии его текущему публичному описанию, а не о результате испытания приложения.
1. Доступ к книгам и границы проверки
| Источник | Что действительно доступно и проверено |
|---|---|
| KPI Checklists: авторский Sample Edition | PDF на домене автора, 56 PDF-страниц. Проверены титульные сведения, введение и оглавление. Это образец, не полная книга. Первое издание: 2013; Metric Press; ISBN 978-1-910047-00-2. |
| KPI Checklists: Oracle NetSuite Special Edition, зеркало Cofficient | Полный доступный PDF, 191 PDF-страница; проверены нужные фрагменты глав 1, 3–6, а не вся книга подряд. Это первичный текст книги на внешнем хосте; идентичность всех редакционных деталей первому печатному изданию не установлена. |
| GAMED: Oracle NetSuite Special Edition, зеркало WisdomInterface | Полный доступный PDF, 321 PDF-страница; сверены титульные данные, оглавление, диагностические коды, выбранные шаги, Roughshod и Motive8. ISBN 978-1-910047-41-5, 2021. Не заявляется чтение всех кейсов и приложений. |
Следовательно, неправильно писать, что доступны только рекламные описания книг. Также неправильно утверждать, что проведена полная постраничная экспертиза обеих книг. Внешние хосты дают первичный текст, но не являются сайтами автора или издателя; цепочка авторизации размещения отдельно не проверялась. Полные книги в пакет обсуждения не копировались.
В ссылках на PDF #page=N означает физическую страницу файла, начиная с 1. Печатная пагинация может отличаться; ниже она указана отдельно там, где важна. Количества «191» и «321» надёжнее называть числом страниц конкретных PDF, а не всех изданий произведений.
2. KPI Checklists и ROKS
| ID | Место исходника и тезис | Статус и результат | Рекомендация редактору |
|---|---|---|---|
| B01 | Книга и семь шагов | verified. Авторский каталог книг описывает ROKS как семишаговый подход, связанный с KPI Checklists. Название и последовательность исходника соответствуют оглавлению образца. | Сохранить атрибуцию. Не путать семь шагов всего ROKS с отдельной семишаговой инструкцией построения дерева. |
| B02 | Анатомия: четыре уровня и цвета | verified, как нотация Смита. Авторское руководство, раздел The Anatomy of a KPI Tree: strategic → theme → tactical → candidate KPIs; зелёный → оранжевый → фиолетовый → синий. | Писать «в нотации Смита». «Мировой» или «де-факто стандарт» этой проверкой не установлен. Цвет должен дублироваться подписью/формой в собственном интерфейсе — это наше проектное предложение. |
| B03 | Итоги: «узел — всегда метрика» как вывод из Смита | contradicted именно атрибуция. Верхние уровни S5 содержат цели, области результата и тактические результаты, а кандидаты в измерения выделены отдельно. | Разделить смысловой узел и измерение либо явно назвать единую модель узла собственной адаптацией. Нельзя одновременно ссылаться на четыре разных смысловых уровня и выдавать все их элементы за измеримые величины. |
| B04 | Анатомия: три связи | verified. В книге, печатные с. 43–44 различаются cause-effect, conflict, companion; companion означает подмножество или существенное пересечение. | Сохранить смысл. Нарисованное cause-effect ребро — заявленная логика участников, не эмпирическое доказательство причинного эффекта. |
| B05 | ROKS: 2–7 целей; две двухчасовые встречи; 1–5 дней между ними; 3–9 участников | verified как рекомендации автора, подтверждённые публичным workshop checklist. Текст книги действительно сочетает диапазон 2–7 с замечанием о недостаточной декомпозиции при числе меньше трёх. | Не «исправлять» эту неоднозначность на выдуманное точное правило. Назвать ориентиром фасилитации, допускающим обоснованные исключения. |
| B06 | ROKS: 70–80 кандидатов, шкалы 0–10, Use/Aspire/Discard | verified. S2, печатные с. 52–57. | Это описание возможного лонглиста и процедуры отбора, не целевой размер каждого дерева. Утверждение в итогах, что обязательно остаётся 10–15 KPI, not verified как общий норматив. |
| B07 | ROKS: 5–10 итераций и 53 вопроса | verified как содержание S2, печатные с. 72 и 76. | 5–10 — возможные итерации прототипирования, не обязательное число перед запуском. 53 — размер конкретного авторского checklist, не доказательство полноты любого дизайна. |
| B08 | Анатомия: wire-tree в 5–10 раз компактнее | verified как оценка автора S2, печатная с. 48; стиль отнесён к Jon Moon. | Не превращать оценку из книги в гарантированный выигрыш любого интерфейса. |
| B09 | Критика книги: «дерево не считает», нет финансовой модели | partly. Назначение авторского дерева — выявление и отбор кандидатов S5, а не спецификация расчётного движка. Из этого не следует запрет хранить формулы измерений в системе ROKS. | Уточнить объект критики: графическая нотация не задаёт механизм расчётного распространения значений. Не распространять это на весь метод, определения KPI и будущие версии софта. |
3. GAMED, ROKET-DS и диагностические правила
| ID | Место исходника и тезис | Статус и результат | Рекомендация редактору |
|---|---|---|---|
| G01 | ROKET-DS: «девять шагов для целей, пять для стимулов», введение «14-шаговый» | partly. У автора нумерация 0–14, и публичное руководство считает её 15 шагами: десять для целей и пять для стимулов. Шаг 0 условен: диагностировать прежнюю систему, если она существует. | «Шаги 1–9 проектируют цели, 10–14 — стимулы; им предшествует диагностика 0. В полном варианте 15 шагов». Исходник шаг 0 показывает: это уточнение счёта, не потеря шага. |
| G02 | ROKET-DS: владелец, STAR, white-hat / black-hat, исправление и повтор | verified по S7, шаги 3–9. STAR — Skills, Time, Authority, Resources; повтор возвращает к соответствующему этапу. | Сохранить последовательность. Условие перехода автора — отсутствие значимых выявленных проблем; фраза «не перестаёт находить новое» нуждается в оценке существенности и ограничении затрат на проверку. |
| G03 | ROKET-DS: 30–45 минут и безопасное обсуждение с непредвзятым ведущим | verified по S3, печатные с. 131–132 / PDF page 130. | Сохранить как формат рекомендованной сессии, а не универсальный бюджет качественного расследования. |
| G04 | 33 отказа: кодовая таксономия | verified. В S3, оглавление и приложение с печатной с. 255, совпадают диапазоны TF-01…10, MF-01…03, IF-01…08, DB-01…12: 10+3+8+12=33. Сопоставлены все 33 кода и основные названия исходника. | Атрибуцию сохранить. Русские названия — перевод/сжатие, не отдельная нормативная классификация. Например, DB-05 точнее передавать как неверную классификацию входа пользователем, а не всякое искажение данных. |
| G05 | 33 отказа: колонка «Проверка в шаблоне» — готовый автоматический линтер | not verified как авторская спецификация. Соответствие кодов книге не подтверждает добавленные программные правила. | Явно пометить последнюю колонку как предложения автора исследуемого документа. Разделить машинные проверки структуры, сигналы для ревью и человеческое суждение. |
| G06 | Roughshod: кейс, корзина и численные пороги | verified как учебная иллюстрация. S7 прямо называет компанию вымышленной. В S3, печатные с. 142–146 совпадают таблица порогов, учёт сложности и второй линии, дополнительные оценки качества и решение про GoS у операционных менеджеров. На печатной с. 146 / PDF page 145 Legendary AHT для Class 1/2/3 — <200 / <210 / <170 секунд. | Сохранить учебные числа. Замена на 200/190/170 не подтверждается источником и недопустима как незаметное «исправление». Возможную ошибку автора можно отметить вопросом, но ожидание монотонности между классами её не доказывает. Не переносить пороги как бенчмарки. |
Редакторский разбор G05 — наши выводы, не новые цитаты из книги:
- «Есть путь до корня» проверяет связность графа. Он не проверяет, что метрика способствует нужному результату.
- «Цель внутри исторического диапазона» не доказывает достижимость после изменения процесса и может отвергнуть осмысленное улучшение. Нужны база, изменение условий, ресурсы и обоснование.
- «Частота пересмотра ≤ квартал» и «частота цели = частота метрики» нельзя переносить как общие законы. Частота измерения, публикации, принятия решения, горизонт цели и частота выплаты — разные параметры.
- «Формула ссылается на полный источник» не исключает смещённую выборку, неверную классификацию или легитимную фильтрацию. Проверять нужно заявленный охват и правила исключений.
- Количество ярусов, число победителей и отсутствие потолка выплаты — не универсальные hard gates. Их обоснованность зависит от цели, стоимости, управляемости и побочных эффектов.
- Заполненное поле правила или владелец контроля — необходимая техническая дисциплина для выбранного процесса, но недостаточное доказательство защиты от gaming.
4. Motive8: атрибуция отдельно, эффект отдельно
| ID | Проверяемое утверждение | Статус и результат | Как использовать |
|---|---|---|---|
| M01 | Восемь принципов и численные рекомендации | verified как изложение Смита. S6, The Motive8 Principles: все восемь направлений совпадают; присутствуют ориентир 20% среднего яруса, двухлетняя история, числа 10/4/2%, 5%, 9%, 17%. | Указывать «Смит пересказывает/рекомендует». Эти числа нельзя приравнивать к ожидаемому результату внедрения нашего продукта. |
| M02 | Частота бонусов: «исследование доказало падение 10/4/2%» | partly. В проверенном HBS Working Paper 13-066, §5.4 и Table 10, контрфактическое удаление квартального бонуса даёт 6.0/4.4/2.2% снижения по сегментам. Это модельные сценарии конкретного плана. | Не подменять ими числа Смита молча. Сохранить различие публикации, версии и дизайна сравнения; для точного утверждения о размере эффекта ссылаться на выбранную таблицу исследования. |
| M03 | Стимулы за перевыполнение: «+17% звёздам» | partly. В той же Table 10 S8 удаление overachievement commissions даёт −14.5% для верхнего сегмента. Обратная база сравнения даёт около +17%: 1 / (1 − 0.145) − 1 ≈ 0.1696 (наш арифметический пересчёт). |
Направление и порядок величины совместимы, но нельзя смешивать прирост к урезанному плану со снижением от исходного. Это не обещание универсального uplift. |
| M04 | Misra–Nair: «разница кэп/без кэпа ≈9% выручки» | partly. Первичный abstract Stanford сообщает +9% после внедрения нового компенсационного плана целиком. Авторский PDF S10 индексируется, но прямое открытие в этой проверке завершилось ошибкой. Из доступного abstract нельзя изолировать эффект одного снятия cap. | «В исследуемой компании новый план дал около 9%; приписывать всё единственному правилу без разбора дизайна нельзя». |
| M05 | «Запас игроков даёт +5%» | partly: цифра есть в авторском изложении S6. Исходный дизайн соответствующего эмпирического исследования и точная база этого процента здесь не проверены. | В итоговом гайде оставить только как условную иллюстрацию с этой оговоркой либо убрать число. Не проектировать найм или кадровое давление из этого коэффициента. |
| M06 | «Несколько призов лучше одного», Lim | verified в границах Lim, Ahearne, Ham (2009): лабораторные и полевые эксперименты подтверждают пользу нескольких победителей в изученных условиях; ранжирование стоимости нескольких призов дополнительного эффекта не дало. | Это не доказывает все варианты «дифференцированных призов» и не задаёт универсальную формулу числа победителей. |
HBS-работа — авторский working paper 2013 года, впоследствии связанный с публикацией в Marketing Science 2014; исходник ссылается через книгу на обзор Steenburgh/Ahearne 2012. Численные расхождения версий требуют уточнения, а не обвинения в выдумке. Доступная страница HBR не использована для полного воспроизведения статьи; её полный текст и все упомянутые там исследования здесь не аудированы.
Утверждения об overjustification (Lepper/Deci) не доведены в этой ограниченной проверке до полного сопоставления экспериментов, групп и модераторов. До такой проверки формулировку «внешние стимулы разрушают внутреннюю мотивацию» лучше заменить на «могут ослаблять внутреннюю мотивацию в определённых условиях». Это граница доказанности, а не отрицание самого эффекта.
5. KPI Tree Studio: текущее описание против фактического испытания
Для всей таблицы место исходника — раздел Studio, а также его сокращение в итогах. Прочитаны официальные страницы; создание аккаунта, покупка, запуск AI и экспорт файлов не выполнялись. Маркетинговый claim здесь не обозначается как функционально испытанная возможность.
| ID | Утверждение исходника | Статус на 2026-09-17 | Исправление |
|---|---|---|---|
| P01 | «Закрывает один шаг — лонглист» | contradicted текущим описанием продукта. Designer заявлен для ROKS 1/3/4/5, включая collaborative shortlisting и KPI definition management. | Переписать вывод о продуктовом охвате. |
| P02 | «Рисовалка» без развития процесса | contradicted как полное описание. Официальный Prototyping добавляет шаг 6: прототипы дашбордов, выбор KPI, метаданные, sample data, обсуждение элементов. | Рассматривать также как референс согласования будущих дашбордов. Не приравнивать прототипирование к production BI. |
| P03 | AI на Pro и Black Belt | verified как заявление сайта. Указаны AI first draft и AI commentary, в описании Designer — помощь с драйверами и формулировками. | Уточнить модуль: «первый черновик» на странице pricing относится в том числе к прототипу дашборда. Качество AI не проверялось. |
| P04 | Экспорт «в любой формат» и share | partly. S13 конкретно перечисляет PDF, image, share-link, опционально Excel/JSON; заявляет password protection и expiry. | Заменить «любой» конкретным списком с оговоркой тарифа. Надёжность контроля доступа не испытана. |
| P05 | 50+ шаблонов, охват всех отраслей | partly. S13 подтверждает библиотеку, пользовательские шаблоны и JSON import; число 50+ в проверенном текущем тексте не найдено. | Библиотеку сохранить; количество убрать до проверки каталога. Отраслевой охват — обещание поставщика. |
| P06 | Trial, lifetime, бонусы | verified как публичные условия: 7-дневный trial подписки, 30-дневный возврат lifetime, onboarding call и dashboard kit. | Условия датировать. Денежные суммы тарифов в доступном тексте не отобразились: not verified. Не придумывать цены и не считать бонусную «стоимость» ценой тарифа. |
| P07 | «Нет данных / формул / источников / владельцев» | not verified как полный перечень отсутствующих функций. S14 прямо заявляет sample data и KPI metadata. Отсутствие production-интеграций и расчётного графа по доступному описанию не доказано. | «Поддержка live-интеграций, распространения формул и декомпозиции отклонений нами не подтверждена». Каждую capability проверять отдельно. |
| P08 | «Не загрузился → инди-инфраструктура / единственный автор» | not verified. При открытии официальный HTML содержал одновременно сообщение Unable to Load и содержательный текст. Это наблюдение доступа, не аудит организации разработки или инфраструктуры. | Убрать вывод о размере команды, надёжности и техническом устройстве из одной ошибки загрузки. |
| P09 | Запуск в 2025, бета летом и публичный релиз к концу года | not verified по проверенным датированным первичным материалам. | Убрать точный график запуска либо добавить официальный анонс. Текущая доступность страницы не подтверждает дату появления функции. |
| P10 | Совместная работа подразумевает одновременное редактирование | partly для референса, не утверждение исходника. Team Licences описывает один активный редактор файла и live readers. Та же страница показывает сообщение, что team licensing ещё недоступно. | Не обозначать SaaS как испытанный multiplayer-редактор. Отделить описанный workflow от фактической доступности лицензирования. |
Слово «8x» остаётся маркетинговым заявлением, а не результатом проведённого нами бенчмарка. Формулировки «де-факто стандарт» и «React Flow и десять цветов за день дают то же самое» в исходнике не имеют проверенного основания. Последняя не учитывает определения, отбор, совместное согласование, экспорт и эксплуатацию; это инженерная оценка автора документа, которую нужно обосновать отдельным scope, а не ссылкой на книгу.
6. Другие инструменты — только существенные для ошибок исходника
| ID | Место / утверждение | Статус и проверка | Рекомендация |
|---|---|---|---|
| T01 | Три жёстко разделённых вида дерева | contradicted как универсальная терминологическая граница. По проверке root, Count включает и математические, и influence-связи в metric tree. Авторское словоупотребление Смита S5 не устанавливает обязательную классификацию всей индустрии. | Три различаемых функции полезны; представить их как наши представления/типы связи. Не закреплять финансовую арифметику исключительно за названием driver tree. |
| T02 | Mixpanel: формулы, причинность, план/факт | partly. Официальная документация подтверждает подключение метрик, их определения, владельцев saved metrics, временные сравнения и Pearson correlation. AI-дерево названо гипотетическим черновиком. Из этого не доказаны арифметические рёбра как расчётный движок и план/факт. | Заменить три бинарных «да» отдельными характеристиками. Корреляция, период-к-периоду и достижение целевого плана — разные механизмы. |
| T03 | kpitree.co: KPI как назначение владельца/цели/ритма | verified как модель конкретного продукта S18. Его guide явно так описывает роль KPI среди метрик. | Сохранить источник, но не выдавать эту политику за определение Смита или универсальный стандарт. kpitree.co и kpitree.studio — разные референсы. |
| T04 | breakdown: Shapley/BSTS | verified как описание README по независимой проверке root S19, не как пройденный технический тест. not verified: автоматическая причинная идентификация только из наличия BSTS. | Условие пригодности модели, дизайн вмешательства и данные должны быть отдельной частью доказательства. |
| T05 | Причинный процессный слой | По проверке root, CausalImpact требует незатронутых вмешательством контрольных рядов и стабильности связей до/после; важны placebo-проверки. | Не писать, что «обученное ребро» само гарантирует причинность. Подпись causal в README не заменяет выполнение предпосылок. |
Пункты T01/T04/T05 используют явно отмеченную проверку координатора root; этот исследователь не заявляет повторного запуска библиотек или независимого воспроизведения тех результатов. Остальные веб-проверки выполнены здесь. Не проверялись все интеграции Count, коммерческие планы конкурентов, библиотеки Pigment/Anaplan/Causal и статьи Medium/BIBB: они не нужны для установленных поправок и не использованы вместо первоисточников.
7. Приоритет доработки
- Исправить P01/P02 и снять неподтверждённые отрицательные capability claims P07/P08.
- Отделить собственные архитектурные решения от атрибуции: B03, T01, T03.
- Развести диагностическую таксономию и предлагаемый линтер: G04/G05. Обязательные gates должны иметь собственное обоснование и режим исключений.
- Сохранить Roughshod как полезный учебный пример и явно ограничить перенос его чисел.
- Развести «число действительно написано у Смита» и «из первичного исследования следует переносимый эффект»: M01–M06.
- Уточнить нумерацию ROKET-DS и библиографическую пагинацию, не объявляя несуществующую потерю этапа.
8. Реестр источников
Все URL проверялись или были переданы с явно указанной проверкой root 2026-09-17. Точные секции/страницы приведены у соответствующих тезисов. Для изменяемых продуктовых страниц дата обращения обязательна.
- S1. Bernie Smith, KPI Checklists, Sample Edition — авторский PDF, 56 страниц: https://madetomeasurekpis.com/wp-content/uploads/2014/11/KPI-Checklists-Sample-Edition-1B.pdf.
- S2. Bernie Smith, KPI Checklists, доступный полный специальный PDF на Cofficient: https://www.cofficient.co.uk/wp-content/uploads/2024/09/report-oracle-netsuite-special-edition-kpi-checklists.pdf.
- S3. Bernie Smith, GAMED, доступный полный специальный PDF на WisdomInterface: https://www.wisdominterface.com/wp-content/uploads/2025/03/report-oracle-netsuite-special-edition-gamed.pdf.
- S4. Made to Measure KPIs, Practical KPI and Dashboard Design Books: https://madetomeasurekpis.com/kpi-books/.
- S5. Bernie Smith / Made to Measure KPIs, Ultimate KPI Tree Guide: https://madetomeasurekpis.com/building-kpi-tree/.
- S6. Made to Measure KPIs, Ultimate Guide to Incentive Design: https://madetomeasurekpis.com/incentive-plan-design/.
- S7. Made to Measure KPIs, OKR Key Results: How to set effective OKR targets in 10 steps: https://madetomeasurekpis.com/key-results-ultimate-design-guide/.
- S8. Chung, Steenburgh, Sudhir, Do Bonuses Enhance Sales Productivity?, HBS Working Paper 13-066, версия PDF August 13, 2013; §5.4, Tables 9–10: https://www.hbs.edu/ris/Publication%20Files/13-066_881d107a-e697-4077-a49d-034d7249d2c9.pdf.
- S9. Misra / Nair, Stanford GSB, A Structural Model of Sales-Force Compensation Dynamics: Estimation and Field Implementation, working-paper abstract: https://www.gsb.stanford.edu/faculty-research/working-papers/structural-model-sales-force-compensation-dynamics-estimation-field. Доступен текст первичной страницы в поисковой выдаче; прямой open завершился ошибкой.
- S10. Misra / Nair, опубликованная работа, авторский PDF: https://www.sanjogmisra.com/mkt_salesforce.pdf. Обнаружен первичный PDF и индексируемый abstract; прямой open не завершился успешно. Не считается прочитанной полной работой.
- S11. Lim, Ahearne, Ham (2009), Designing Sales Contests: Does the Prize Structure Matter?, DOI 10.1509/jmkr.46.3.356, страница издателя/abstract: https://journals.sagepub.com/doi/10.1509/jmkr.46.3.356.
- S12. Steenburgh / Ahearne (2012), Motivating Salespeople: What Really Works: https://hbr.org/2012/07/motivating-salespeople-what-really-works. Обнаружен как источник авторского пересказа; не использован для полной экспертизы чисел.
- S13. KPI Tree Studio, официальная главная: https://www.kpitree.studio/.
- S14. KPI Tree Studio, Dashboard Prototyping in Minutes: https://www.kpitree.studio/prototyping.
- S15. KPI Tree Studio, Team Licences: https://www.kpitree.studio/teams.
- S16. Count, An Introduction to Metric Trees: https://count.co/blog/intro-to-metric-trees — проверка root.
- S17. Mixpanel, Metric Tree, документация: https://docs.mixpanel.com/docs/metric_tree.
- S18. KPI Tree, KPI vs Metric: What Is the Difference?: https://kpitree.co/guides/core-concepts/kpi-vs-metric.
- S19. PolycultureResearch, breakdown, README: https://github.com/PolycultureResearch/breakdown — проверка root.
- S20. Google, CausalImpact, документация предпосылок: https://google.github.io/CausalImpact/CausalImpact.html — проверка root.