Результаты проведения тренировочного ЕГЭ по информатике и ИКТ в компьютерной форме Ковальков Роман Андреевич начальник отдела проектирования информационных систем ФГБУ «Федеральный центр тестирования» План презентации Масштаб проведения экзамена Количество участников: зарегистрировано 65 000, сдавали экзамен 53 000 Количество субъектов Российской Федерации: 82 Количество зарубежных образовательных учреждений: 3 Количество пунктов проведения экзамена: 4 000 Количество аудиторий: 5 700 Количество организаторов в аудиториях: 12 000 Количество технических специалистов: 4 500 41 Сравнение с масштабами ЕГЭ 2012 44 Распределение по количеству дней 25 17 Регионы с количеством участников меньше 50% от ЕГЭ 2012 Регионы с Регионы с количество количеством м участников участников более 50%-80% 80% от ЕГЭ от ЕГЭ 2012 2012 Регионы, проводившие экзамен за 1 день 19 20 Регионы, проводившие экзамен в 2 дня Регионы, проводившие экзамен в 3 дня Основные сложности Краткая характеристика: 30% регионов провели экзамен по масштабам сопоставимый с ЕГЭ 2012; Проблемы проведения экзамена, связанные с техническим оснащением, в подбавляющем большинстве случаев возникали из-за неполного выполнения подготовительных мероприятий и заниженных минимальных требований к аппаратному обеспечению; Отдельные случаи: общее ПО и аппаратное обеспечение не удовлетворяло минимальным требованиям. Решение вопросов технического оснащения: Организация ППЭ на базе НПО, СПО; Проведение экзамена в несколько дней; Разработка развернутых требований к аудиториям ППЭ; Тщательная подготовка аудиторий до экзамена. и проверка технического состояния; Основные сложности Высококвалифицированные специалисты необходимы только на этапе технической подготовки аудиторий ППЭ. Для проведения информатики. Повышение квалификации учителей информатики, в первую очередь обучение действиям на случай форс-мажорных обстоятельств. Создание специальной службы квалифицированной тех. поддержки на дни проведения экзаменов. Создание выездных бригад высококвалифицированных технических специалистов на период технической подготовки аудиторий. Введение в штат образовательного технического специалиста. Привлечение сторонних технических специалистов на время подготовки ППЭ к проведению ЕГЭ в компьютерной форме, в т.ч. за счет экзамена достаточно квалификации учреждения учителей должности сокращения расходов на организацию и проведение экспертной проверки части "С" и первичной обработки бланков. Основные сложности Требования к компьютерным навыкам организатора минимальны. Основные сложности в проведении экзамена возникали из-за неотработанности процедур и проблем с печатью КИМ и бланков (планируется доработка технологии печати). Дополнительное обучение организаторов. Использование модели тьютеров, кустового метода. Разработка обучающих видео материалов и интерактивных курсов и тестов. Разрешение допуска в аудиторию технического специалиста в случае возникновения технических сложностей. Основные сложности Состав подсистем защиты информации: • Подсистема управления доступом, контроля целостности, регистрации и учета; • Подсистема криптографической защиты информации; • Подсистема межсетевого экранирования; • Подсистема антивирусной защиты информации. Диапазон стоимости средств защиты: 10-15 тыс. руб. на аудиторию. Для реализации технических мер по информационной безопасности потребуется привлечение внешних подготовки пункта проведения экзамена. специалистов во время Количество обращений по регионам практически не коррелирует с количеством участников экзамена, а определялось уровнем собственной готовности региона Были крупные регионы (несколько тысяч участников) с единичными обращениями , например 12 тыс. участников и 8 обращений; Были небольшие количеством регионы обращений участников и 13 обращений (100-300 больше 10-ти, участников) например с 79 Детальные сведения по процедурам Техническая подготовка аудиторий; Импорт КИМ; Начало экзамена; Завершение экзамена в части экспорта результатов (в основном технические проблемы); Импорт результатов на уровне РЦОИ (в основном технические проблемы). Организационные – 67%; Проблемы функционирования ПО – 18%. Технические проблемы – 15%; Детальные сведения по процедурам Некачественная подготовка аудиторий одна из основных причин технических сбоев в процессе проведения экзамена В 27% аудиторий на станциях участников был internet; Для 15% аудиторий не был распечатан протокол готовности аудиторий; В 17% аудиторий технические сложности в процессе проведения экзамена были связаны с тем, что не были выполнены необходимые настройки браузеров; Отдельные случаи: общее ПО и аппаратное удовлетворяло минимальным требованиям. обеспечение не Проблемная ситуация: поздний импорт и расшифровка КИМ, менее чем в половине аудиторий КИМ был распечатан в рекомендуемые сроки 19.3% Распределение аудиторий по времени импорта КИМ 18.2% 13.9% 13.2% 7.7% 5.6% 5.2% 4.3% 2.2% до 8:00 8:00-8:30 8:30-9:00 9:00-9:30 9:30-10:00 10:00-10:30 10:30-11:00 11:00-11:30 11:30-12:00 начало экзамена Проблемная ситуация: большая длительность процедуры, 12% участников ожидали начала экзамена более 30 минут, среднее время 15 минут, больше 15 минут ждали 40% участников. Процент участников, с указанным периодом ожидания начала экзамена 20.6% Длительность ожидания начала экзамена: от входа в систему до начала сдачи экзамена 18.7% 15.7% 12.4% 7.2% 4.9% 2.8% до 5 05-10 10-15 15-20 20-25 25-30 30-35 2.2% 35-40 1.5% 1.1% 1.0% 0.8% 40-45 45-50 50-55 55-60 Период между входом в систему и началом экзамена, мин Проблемная ситуация: большая длительность процедуры. Причины: Поздняя расшифровка и печать КИМ, много случаев импорта КИМ уже в присутствии участников; Проблемы, связанные с технической неготовностью аудитории; Проблемы печати КИМ: повторная печать КИМ – 9 516 случаев (50%) Не отлаженность процедуры. Пути решения: Печать КИМ в процессе проведения инструктажа (в аудитории на 10 участников общий объём КИМ составит 100 листов, т.е. при скорости печати 10 листов в минуту, все КИМ могут быть распечатаны за 10 минут); Проведение подробного инструктажа, минимум на 10 минут, в т.ч. в системе ПК КЕГЭ. Печать на КИМ номера места участника; Оптимизация технологии печати КИМ. Основные узкие места: Печать КИМ и бланков; Экспорт результатов в ППЭ; Импорт результатов в РЦОИ. Основные причины: Большое разнообразие общего ПО: браузеры и операционные системы; Некачественная техническая подготовка аудиторий; Несоответствие минимальным требованиям к общему ПО и аппаратному обеспечению; Изначально заниженные требования к аппаратному обеспечению, как следствие много сбоев из-за непредвиденных нагрузок; Переход сервера в спящий режим. Модернизация технологии печати КИМ и бланков с целью повышения надёжности и скорости печати; Модернизация технологии шифрования результатов, Повышение минимальных требований к аппаратному обеспечению; Минимизация требований к предварительной настройке браузеров. Заполнено и обработано 17 838 анкет (33% участников) Удобство использования системы 46% Максимально удобно Требуется повышение удобства Требуются значительные доработки 41% 13% Простота использования системы 63% Интуитивно понятна Отдельные функции не очевидны Система достаточно сложная 26% 11% Качество электронных КИМ Задания отображаются хорошо, доработок не требуется 72% Необходимо улучшить читаемость заданий КИМ 28% Качество инструкции по работе с системой Инструкция не требует доработки 42% Не пользовался инструкцией Требует расширения Инструкция требует сокращения 34% 11% 13% 9% Форма бумажного бланка КЕГЭ Страница сверки ответов с бумажным бланком 11% Страница проверки персональных данных 11% Разделы, требующие доработки 20% Страница проверки ответов 14% Раздел отображения заданий КИМ Раздел ввода ответов на часть C Раздел ввода ответов на часть B Раздел ввода ответов на часть A 8% 14% 12% Средняя длительность экзамена 2 ч. 25 мин. На часть С дано 10% ответов (менее 5% участников) Длительность экзамена участника: только ввод ответов Распределение длительности экзамена участников Процент участников с указанной длительностью экзамена 20% 16% 12% 8% 4% 0% до 0,5 0,5-1 1-1,5 1,5-2 2-2,5 2,5-3 3-3,5 3,5-4 Длительность экзамена в часах Средний балл: 47, средний балл по регионам от 25 до 70-ти, в 5-ти регионах средний балл выше среднего ЕГЭ 2012 по РФ (60 баллов). Количество стобальников: 15 7% % участников тренировочного эказмена по КЕГЭ 6% % участников ЕГЭ 2012 5% 4% 3% 2% 1% минимальный Балл ЕГЭ 2012 0% 0 25 45 55 66 76 86 95 100 - Стандартные задания - Задания на работу с электронными таблицами - Задания на работу в текстовом редакторе 80% 60% 40% 20% В-18 В-17 В-16 В-15 В-14 В-13 В-12 В-11 В-10 В-09 В-08 В-07 В-06 В-05 В-04 В-03 В-02 В-01 0% 77% % участников, выбравших среду % не пустых ответов % ответов с ненулевым баллом 54% 54% 69% 53% 42% 28% 35% 32% 30% 24% 21% 10% 13% 16% 12% 1% FreePascal PascalABC Borland Pascal Pascal - 81% Delphi 17% 13% 3% Qbasic 1% 2% FreeBasic Basic - 14% 2% 0% 0,5% Visual C++ Полный балл - 38% Частичный балл или 0 - 43% Ошибка компиляции - 20% Code::Blocks C++ - 2% Результат проверки непустых ответов (было дано 10% всех ответов): 23% 3% 3% 13-Кумир Кумир 3% Централизованное шифрование электронных КИМ и обеспечение РЦОИ зашифрованными электронными КИМ; Печать «бумажных» версий электронных КИМ в аудиториях; Сдача экзамена Участниками КЕГЭ с использованием специализированного программного комплекса КЕГЭ; Шифрование результатов КЕГЭ на уровне ППЭ и организация их передачи на региональный уровень; Централизованная проверка заданий с развернутым ответом, без привлечения экспертов. Спасибо за внимание!