Метрики и что они значат¶

В главе «Что умеет» мы перечислили, что ControlAI измеряет. Здесь — что каждая цифра означает, как понять, хорошая она или нет, и почему она важна.

Важно с самого начала. Цифры — это сигнал, а не приговор. «Хорошие» значения зависят от типа занятия (лекция, семинар, практическое, лабораторное), курса, направления и языка группы. Ориентиры ниже — это отправная точка, а не жёсткий стандарт; каждый университет настраивает их под себя. Подробнее об этом — в конце главы.

Проведение пары: состоялась ли она вообще¶

Прежде чем говорить о качестве, ControlAI отвечает на более простой вопрос — была ли пара проведена. Для вуза это базовый уровень контроля, который раньше требовал обходов и проверяющих.

Пара проведена / не проведена¶

Что это. По записи из аудитории система определяет, шло ли занятие: если в запланированное расписанием время в аудитории не звучала речь, пара помечается как непроведённая — и это видно ректорату, декану и отделу контроля качества образования (ichki ta'lim sifati nazorati bo'limi) без единого проверяющего в коридоре.
Почему важно. Сорванные и «бумажные» пары — прямые потери учебных часов и главный слепой участок традиционного контроля. Здесь фиксируется каждая пара по каждой аудитории, объективно и автоматически.

Тайминги: начало и конец пары¶

Что это. Насколько занятие началось и закончилось вовремя относительно расписания: преподаватель опоздал на 12 минут, отпустил группу на 20 минут раньше — всё это видно из записи.
Ориентир. Хорошо, когда более 90% пар начинаются вовремя.
Почему важно. Стандартная пара — 80 минут (2×40). Позднее начало и раннее завершение — это недоданные академические часы и неуважение к студентам; в сумме по семестру такие «мелочи» складываются в недели потерянного учебного времени.

Речь: что слышно на занятии¶

Баланс речи (студенты / преподаватель)¶

Что это. Какую долю времени говорили студенты, а какую — преподаватель.
Ориентир. Норма зависит от типа занятия. На семинаре или практическом (amaliy) занятии хорошо, когда студенты говорят 40–55% времени: если преподаватель занимает больше 70%, практика, скорее всего, превратилась в монолог. На лекции (ma'ruza) высокая доля речи лектора — норма, а не тревога.
Почему важно. Материал усваивается, когда студент сам говорит — отвечает, рассуждает, защищает решение, — а не только слушает. Перекос в сторону преподавателя на семинарах и практических — частая причина слабого освоения дисциплины.
Контекст. Тип занятия известен из расписания, поэтому лекцию корректно сравнивать с лекциями, а практику — с практиками. Сегодня набор метрик един для всех типов занятий, а поправку на тип делает тот, кто читает отчёт; автоматическая калибровка ориентиров по типу занятия — на дорожной карте.

Вопросы преподавателя¶

Что это. Сколько вопросов преподаватель задал аудитории за пару.
Ориентир. Около 12–18 вопросов за 80-минутный семинар или практическое занятие — здоровый уровень вовлечения. Меньше ~8 — занятие, скорее всего, шло в режиме «рассказал и ушёл». На лекции вопросов закономерно меньше, но их полное отсутствие — тоже сигнал: даже лекция выигрывает от проверочных вопросов.
Почему важно. Вопросы вовлекают студентов, проверяют понимание и держат внимание большой аудитории.

Тишина и паузы¶

Что это. Какая доля пары прошла в молчании и какой была самая длинная пауза.
Ориентир. Тишины до ~15% — норма. Короткие паузы полезны (студенты решают задачу, думают над ответом), а вот длинные провалы (например, 6 минут подряд) — сигнал, что занятие «провисло».
Почему важно. Много тишины — это потерянные академические часы и, часто, растерянность или плохая организация занятия.

Язык занятия¶

Что это. На каком языке шло занятие и в каких пропорциях. При создании группы выбирается её язык обучения — узбекский, русский или смешанный; распознавание уверенно работает с узбекско-русским переключением в живой речи. Для занятий по иностранным языкам (кафедры языков) отдельно видно, какая доля пары шла на изучаемом языке, а какая — на родном.
Ориентир. Для языковых дисциплин — чем выше доля изучаемого языка, тем лучше «погружение»; типичная планка качества — от 70%. На младших курсах доля родного языка закономерно выше.
Почему важно. Соответствие языка занятия языку группы — часть качества преподавания; для языковых кафедр погружение — основной инструмент обучения.

Сколько человек говорило¶

Что это. Оценка числа разных голосов, звучавших на занятии.
Почему важно. Косвенная проверка вовлечения: если за весь семинар отвечали лишь два-три студента, система это покажет — даже если по времени баланс вышел неплохим.

Видео: кто был в аудитории (этап 2)¶

Честно о сроках. Метрики этого раздела — давомат (посещаемость) и опоздания по видео — относятся к этапу 2 развития системы и не входят в текущую поставку. Всё, что выше (проведение пары, тайминги, речевые метрики), работает уже сегодня.

Посещаемость (давомат)¶

Что это. Сколько студентов было в аудитории и сколько ожидалось по контингенту группы.
Почему важно. Падение посещаемости — ранний признак проблем: с порядком в группе, с расписанием или с самой учебной дисциплиной; для вуза это ещё и показатель, за которым следят деканаты.

Опоздавшие¶

Что это. Сколько студентов пришло позже начала пары и на сколько минут.
Почему важно. Регулярные опоздания — сигнал о дисциплине или о том, что с группой/расписанием что-то не так (например, физически нереальный переход между корпусами).

Сводные оценки¶

Поверх этих метрик есть две «верхнеуровневые» оценки — им посвящены отдельные главы:

Рейтинг преподавателя — общая оценка работы преподавателя, складывается из метрик его занятий; как именно и почему это честно — в главе «Как считается рейтинг преподавателя». Это внутренняя аналитика для решений и развития, а не замена официальной аттестации.
Оценка занятия по методике (1–10) — насколько пара соответствовала бланку наблюдения занятия, принятому в вузе; она считается не из метрик выше, а из проверки занятия по бланку — см. раздел «Соответствие методике» в главе «Что умеет».

Портрет хорошей пары¶

Сводно — как выглядит здоровый семинар / практическое занятие по цифрам (ориентиры, не стандарт; лекция читается по своим нормам — высокая доля речи лектора там ожидаем):

Метрика	Хороший ориентир	Тревожный сигнал
Пара проведена	каждая пара по расписанию	непроведённые пары
Тайминги	начало и конец вовремя	регулярные опоздания, ранний «отпуск» группы
Речь студентов	40–55%	преподаватель > 70%
Вопросы преподавателя	12–18 за пару	меньше ~8
Тишина	до ~15%	длинные провалы, > 15%
Язык занятия	соответствует языку группы (языковые дисциплины ≈ от 70% изучаемого языка)	резко расходится с языком группы
Посещаемость (этап 2)	стабильная / полная	падает из пары в пару

Ориентиры в таблице — настраиваются вузом.

Главное: цифры — это сигнал, а не приговор¶

Три правила, как читать метрики:

Контекст решает. Лекция на потоке, семинар, практическое и лабораторная работа выглядят по цифрам по-разному. Один и тот же баланс речи может быть отличным в одном случае и плохим в другом — поэтому сравнивать нужно занятия одного типа. Автоматическая калибровка ориентиров по типу занятия — в «Дорожной карте».
Тренд важнее одной пары. Одна «просевшая» пара бывает у каждого. Смотреть стоит на динамику по семестру — три слабых семинара подряд значат больше, чем один.
Цифра показывает, куда посмотреть, — решает человек. ControlAI не выносит приговор. Он подсвечивает, где стоит обратить внимание; вывод делает заведующий кафедрой, отдел контроля качества образования или деканат, при необходимости открыв запись или транскрипт. Для преподавателя те же цифры — личная статистика и инструмент развития, а не протокол проверки.

Главное из этой главы: каждая метрика — это понятный сигнал о том, состоялась ли пара и как она прошла, со своими ориентирами «хорошо / тревожно». Но читать их нужно с учётом типа занятия и в динамике: ControlAI показывает, где искать, а решение всегда остаётся за человеком.

→ Дальше: 06. Как считается рейтинг преподавателя — из чего складывается общая оценка и почему это честно, а не «чёрный ящик».