MOSP_Technical work

Раздел: Technical work – Denis
Цитата: “It would be nice if you made a little demonstration of what you actually do in terms of ML research. For example here are some stats in the first version, we added some improvements, and here are the stats for the next iteration. From the artifacts your work looks impressive but you don't show it off for some reason.”
Задача: добавить наглядное сравнение метрик “до/после” для первой и второй серии экспериментов.
Решение:

• В разделе «Implementation / Experimentation» вставить два графика (side by side):

  1. До улучшений:

     • DistilBERT: Accuracy = 0.89, macro-F1 = 0.60
     • RuBERT: Accuracy = 0.82, macro-F1 = 0.55

  2. После улучшений: *

     •DistilBERT – 0,9089 (Accuracy) ∼

     •RuBERT – 0,8535 (Accuracy) ∼

     •XLM-Roberta – 0,8535 (Accuracy) ∼

Добавить слайды из ДЕМО 2 https://drive.google.com/drive/folders/1FSCiRdwI5Scn9yfMqP04qUyI0s8pi-gr

Раздел: Technical work – Hamza
Цитата: “Why not translation EN to improve model? seems they did not think about it”
Задача: объяснить, почему не использовался подход с переводом на английский (и/или добавить план по переводу).
Решение:

• В слайде «Experiment Design» добавить пункт:

  «Рассматривали вариант ML-pipeline: перевод входных диалогов на EN + fine-tuning англоязычных моделей, но отказались из-за увеличения inference time и риска потери контекста».

• Подпись: «В будущем можно протестировать этот подход на маленьком подмножестве данных».