В будущем компьютерами станут наши врачи, наши солдаты, наши пожарные и наши учителя. Они будут диагностировать болезни, воспитывать наших детей, защищать наши дома и учить наших детей. Одна компания уже разрабатывает компьютерную программу оценки эссе, которая может снять нагрузку с профессоров и стандартизированных тестировщиков. Но может ли компьютер действительно оценить тщательно составленное эссе?
Компания edX, безусловно, так считает. Они уже предлагают онлайн-курсы для учреждений, наряду с системой искусственного интеллекта, которая будет оценивать студенческие эссе. Джон Маркофф из New York Times объясняет:
Анант Агарвал, инженер-электрик, который является президентом EdX, предсказал, что программное обеспечение для мгновенной оценки станет полезным педагогическим инструментом, позволяющим студентам проходить тесты и писать эссе снова и снова и улучшать качество их ответов. Он сказал, что технология будет иметь явные преимущества по сравнению с традиционной системой классных комнат, где ученики часто ждут оценки в течение нескольких дней или недель.
«В обучении с мгновенной обратной связью есть огромная ценность», - сказал доктор Агарвал. «Студенты говорят нам, что они учатся намного лучше с мгновенной обратной связью».
Является ли эта мгновенная обратная связь высококачественной - это другой вопрос. Скептиков этих компьютерных грейдеров не сложно найти. Одна группа, которая называет себя «Профессионалы против машинного зачета студенческих эссе в оценке высоких ставок», выступила с заявлением и собирает подписи, чтобы выступить против передачи задания на компьютер. Они пишут:
Давайте посмотрим правде в глаза автоматические оценки эссе. Компьютеры не могут «читать». Они не могут измерить основы эффективного письменного общения: точность, рассуждение, адекватность доказательств, здравый смысл, этическую позицию, убедительные аргументы, содержательную организацию, ясность и правдивость, среди прочего.
В петиции просят законодателей прекратить полагаться на компьютеры для оценки, а школам прекратить покупать автоматизированные системы подсчета очков.
Агарвал признает, что программное обеспечение может быть лучше, и надеется, что оно станет лучше, если отличить хорошее эссе от посредственного. «Это машинное обучение, и ему предстоит пройти долгий путь, но он достаточно хорош и потенциал огромен», - сказал он New York Times . Кроме того, он говорит, что любой, кто думает, что учителя последовательны, обманывает себя. «Мы обнаружили, что качество оценки похоже на разницу, которую вы найдете от инструктора к инструктору».
Фактически, некоторые исследования показали, что компьютеры и учителя демонстрируют одинаковую вариабельность в баллах. Одно исследование, проведенное Марком Шермисом в Университете Акрона, пришло к выводу, что «автоматическая оценка эссе способна давать оценки, подобные человеческим, для предметов с расширенным откликом при одинаковой производительности как для исходного, так и для традиционного жанра письма». Однако исследование Шермиса никогда не был опубликован в журнале, и другие исследователи поставили под сомнение его претензии. Лес К. Перельман из Массачусетского технологического института написал ответ на статью Шермиса, написав, что «тщательное изучение методологии и используемых наборов данных демонстрирует, что такое утверждение не подтверждается данными исследования».
Группа профессионалов также приводит несколько статей о том, что компьютеры не так хороши, как учителя в оценке учеников.
Скорее всего, это вопрос того, достаточно ли хороши эти компьютеры для оценки, а не будут ли они когда-либо. Но не только учителя получат больше высоких технологий, но и студенты. Если учащиеся узнают, что ищет программа, они могут сами написать программу, которая, в свою очередь, напишет идеальное эссе на основе спецификаций программного обеспечения. Возможно, в будущем компьютеризированные учителя будут оценивать компьютеризированных учащихся.
Больше от Smithsonian.com:
Эстония учит 100 процентов своих первоклассников кодировать
Обучающие копы, чтобы увидеть
