понедельник, 7 октября 2013 г.

Эссе 1: Выборочная ручная проверка.

Спешу довести до вас промежуточные итоги обещанной ручной проверки эссе и рецензий. Очень советую всем прочитать это сообщение. Оно относится не только к текущему курсу, но и вообще к учебе в ВШЭ -- не могу не предупредить вас об опасном положении дел.

Итак, что я обещал сделать с работами, которые вы пишете и проверяете? 
  1. Выборочную проверку работ на плагиат;
  2. Выборочную проверку рецензий на соответствие критериям
Как выбирались рецензии, я написал ранее, а с работами всё просто -- выбрал все. Мы посоветовались с товарищами и решили, что Антиплагиат -- это совсем никуда не годная штука, зато есть более действенный сервис, который действительно неплохо находит копипаст по сети, а не какой-то непонятной своей базе. Итоги проверки ужасают, поэтому на первый раз опущу планку аутентичности до позорных 50%, но вообще помните, что в приличных местах работа с уровнем собственного текста ниже 75% -- это верный билет в одну сторону из института. А для диссертаций... вы новости вообще смотрите? Особенно, про какую-нибудь Германию.  Кто сказал, что через 20 лет вас с какого-нибудь важного поста не скинут из-за плагиата, который вы по глупости нашлепали в диплом? Всё вот с таких мелких и незаметных работ и начинается. 
Под катом подробности.

Работы, которые сошли с дистанции из-за плагиата:

  • 7 (47%)
  • 9 (49%)
  • 11 (25%)
  • 15 (26%)
  • 19 (39%)

В зоне риска находятся:

  • 1 (70%)
  • 2 (71%)
  • 5 (70%)
  • 6 (69%)
  • 13 (59%)
  • 17 (61%)
  • 21 (64%)
  • 23 (72%)

Самые самостоятельные работы: 

  • 8 (96%)
  • 14 (97%)
  • 16 (95%)
Авторов по номеру работы и сами работы, напомню, можно найти здесь. Делаем выводы. 
Ещё добавлю, что бегло прочитал все работы и список самостоятельных работ содержит наиболее интересные по содержанию, что, наверное, не так уж удивительно. 

Аннулированные рецензии

Проверялись рецензии, показавшие наибольшее отклонение от средней оценки по данной работе, а заодно -- все остальные рецензии по данной работе.  Это тот самый случай, когда моё мнение вклинивается в оценку вашей работы, наверное, единственный случай, поскольку даже плагиат -- это оценка сторонней программы. Но я пока не придумал, как делегировать эту функцию, а на пиринг полагаться здесь пока рано, очень ненадежная экспертиза и мы увидим примеры тому в последующем при анализе рецензий.

Для работ, рецензии на которые проверялись, я писал свои ответы и дальше автоматически сравнивал с допуском +/- 1 балл. То есть, если я решил, что верстка достойна оценки 2, то оценки 1,2,3 принимались. И так все четыре критерия. Дальше среднее с округлением до целых, то есть, половина оценок попали в этот интервал, все хорошо. Если 1 или 0 -- рецензия аннулируется. В целом, метод работает корректно, хотя я при этом не учитывал комментарии. Если хотите оспорить -- пишите почтой, будем разбирать каждый шаг. 
Принцип оценки рецензии я привел в предыдущем сообщении на примере разбора работы №11. 

В списке: фамилия (номер работы).

  1. Уланов (2)
  2. Чудовская (2)
  3. Леонов (11)
  4. Семенкин (11)
  5. Тимофеев (11)
  6. Нефёдов (13)
  7. Агаджанян (15)
  8. Тарасов (15)
  9. Алёшина (20)
  10. Антимонов (20)
  11. Тарасов (20)
  12. Чаев (20)
Далее будут проверены рецензии этих авторов, данные на другие работы, т.к. есть большая вероятность внесения нежелательных отклонений оценок при таком отношении к работе. Поскольку проверка одной или нескольких рецензий не отличается, то заодно под проверку попадают все, кто так же оценивал те же работы. 

Оценки работ после аннулирования рецензий будут обновлены.

4 комментария:

  1. Этот комментарий был удален автором.

    ОтветитьУдалить
  2. не думаю, что кто-то думает о важных постах в данный момент, третьему курсу важнее первое трудоустройство и выживание.

    ОтветитьУдалить
    Ответы
    1. Интересно, а знает ли третий курс, что выпускники кафедры ИКТ (ЭВА) на моей памяти (я с 2002 года более-менее в курсе) с поиском работы обычно проблем не имели. Скорее наоборот: работа имела сложности с поиском наших выпускников. Ибо нужные люди были всегда. И во много потому, что планку ставили повыше.

      Впрочем, что я о былом... Если люди напряженно думают о выживании, не будем мешать, тем временем подумаем о росте, тогда о выживании думать не придется. Но до этой мысли надо додуматься в свободное от мыслей о выживании время.

      Удалить
  3. Вычищаю из итоговой оценки эссе сейчас аннулированные рецензии, при фильтрации по именам в таблице ответов наблюдаются и такие вот чудесные совпадения (имя автора и группа удалены):

    *** 11 6 4 4 4
    *** 16 6 6 4 4
    *** 5 6 4 4 4

    В этот раз сквозную проверку отличившихся делать не буду, но коллеги, теперь вы понимаете, что ваши работы читают и внимательно изучают, просто сделайте то, что требуется -- внимательно соотнесите при рецензировании работу и критерии. Это ведь не так сложно.

    ОтветитьУдалить