MOSP_Quality management

• Раздел: Quality management – Denis
  Цитата: “I liked your approach where you presented together context, standards, table (with metric, formula, and threshold), and evidence. Please spend more time explaining those points in your presentation next time. Also, I think there is a better way to present this so it is more understandable.”
  Задача: упростить слайд с таблицей метрик и добавить под каждый пункт краткое пояснение, чтобы было более понятно «что-как-формула».
  Решение:
  • Переформатировать слайд «Quality Requirements: Functional Suitability» так:

    1. Accuracy – sklearn.metrics.accuracy ≥ 0.80

       «Проверяем, что модель правильно классифицирует ≥80% диалогов».

    2. Zero-recall Cells – Confusion Matrix scan = 0

       «Нет ни одной категории с нулевым Recall».

    3. Inference Time – time.time() ≤ 120 s

       «Модель обрабатывает пакет (≈100 диалогов) ≤2 мин».

  • Внизу слайда добавить ключ: «Thresholds основаны на требованиях заказчика».

Раздел: Quality management – Moofiy
Цитата: “this is very good, what I like is how you tied each QA with Business goals this is the right way to do it.”
Задача: сделать явную визуальную связь (линиями/стрелками) между бизнес-целями и QA-атрибутами.
Решение:

• Добавить в левую часть слайда «Business Goals» (icon + «Faster analytics», «Resource savings»).
• С правой стороны разместить «QA Attributes» (icon + «Accuracy», «Inference Time»).
• Соединить стрелками:
  • «Faster analytics» → «Inference Time ≤2 min»
  • «Resource savings» → «Accuracy ≥80%»
• Под подписать: «Каждое качество напрямую поддерживает бизнес-цель».

Раздел: Quality management – Nursultan
Цитата: “If reliability is the same as functional suitability then why you need it? also why not use a different quality model, rather than try to adjust an SE-centric model”
Задача: обосновать, чем Reliability (модельная устойчивость) отличается от Functional Suitability (точность) и почему выбран ISO 25059 вместо только SE-ориентированных моделей.
Решение:

• Добавить под таблицей блок «Reliability vs Functional Suitability»:

  «Reliability (Maturity) включает в себя стабильность результатов на новых данных (drift), тогда как Functional Suitability – корректность на hold-out. Мы используем ISO 25059, поскольку в нём есть раздел “Maturity” для ML, а также дополнительные требования Ghosh et al. для сервиса».

• В качестве альтернативы кратко упомянуть: «Альтернативная модель (Ghosh et al.) учитывает устойчивость и поддаётся расширению, однако ISO 25059 обеспечивает единые стандарты для всех QA-атрибутов».

ДОБАВИТЬ МЕТРИКИ ДЛЯ ИНТЕРФЕЙСА