Дипломная (вкр): Изучение пунктуации на примерах корпуса школьных текстов

 - кнопка «Печать»

 - кнопка «Сохранить»

 - кнопка «Статистика»

 - кнопка «Справка»

При загрузке файла с помощью кнопок «Открыть» или «Импортировать» в основной части окна появится пригодный для правки текст с выделенными программой знаками препинания. Все эти знаки препинания будут обозначены синим цветом (например, ), а в TEI-формате им будут присвоены теги с соответствующими значениями.

Система распознает:

".": "dot",

"!": "exclamation",

"?": "question",

",": "comma",

";": "semicolon",

":": "colon",

" - ": "dash","\u2013": "dash","\u2014": "dash",

"-": "hyphen",

"(": "open_parenthesis",

")": "close_parenthesis",

"[": "open_bracket",

"]": "close_bracket",

"{": "open_curly",

"}": "close_curly",

"...": "ellipsis",

"?!.": "qex_ellipsis",

"/": "slash",

"?!": "interrobang",

'"': "quote",

и различные типы кавычек:

u"\u00AB": "left_angle_quote","\u00BB": "right_angle_quote","\u201C": "left_quote","\u201D": "right_quote","\u201E": "low_quote","\u201F": "high_quote","\u2033": "prime_qoute",

u"\u2036": "reversed_prime_quote".

Правка осуществляется с клавиатуры компьютера.

Каждому знаку препинания можно приписать при помощи специальных значков в поле «Разметка» (внизу справа) причину постановки или удаления знака (рис. 2).

Рис. 2 Поле «Разметка» с объяснительными значками

О соответствии объяснительных значков правилам и типам ошибок можно прочесть в конце Главы 3.

При исправлении фон знака препинания меняется с синего на красный. Если знак удаляется (это действие осуществляется с помощью стандартных средств компьютерной клавиатуры), знак препинания зачеркивается и ему присваивается соответствующий TEI-тег исправления. Если понятно, с каким правилом связана ошибка, выбирается соответствующий значок в поле «Разметка» основного окна (справа внизу), а знаку препинания в .ieb-файле присваивается коррелирующий с выбранным значком TEI-тег.

Если знак добавляется, он автоматически оформляется нижним подчеркиванием, а проверяющим из набора значков в поле «Разметка» выбирается один или несколько символов, объясняющих причину постановки знака. В этом случае знаку препинания будет присвоен тег пунктуационной правки с одним или несколькими значениями.

Если один знак исправляется на другой или другие, то неправильный знак зачеркивается, а для новых выбирается значок, указывающий на причину замены, а в TEI-разметке появляется соответствующие теги внесенных исправлений.

Справа в главном окне находится специальное поле для ввода атрибутов текста - «Свойства» (см. рис. 3): автор; класс; тип текста - сочинение, изложение, диктант, другое; название текста; формат - печатный/рукописный; степень доверия - высокая/низкая; проверяющий.

Рис. 3. Поле «Свойства» для ввода значений основных атрибутов текста

Значения свойств будут сохранены в метатегах TEI-размтеки.

Данные о тексте можно вводить в любой момент, даже при повторном открытии документа, так же как и осуществлять пунктуационную правку.

После внесения исправлений и данных о тексте документ сохраняется.

Если интересна статистика об ошибках без вывода на печать, нажимается кнопка «Статистика», которая вызывает появление окна, где последовательно сообщается, в каких знаках ошибся писавший текст и сколько на каждое правило было сделано ошибок (см. рис. 4).

Рис. 4. Окно с выводом статистической информации о пунктуации в тексте

Если интересует TEI - разметка текста, достаточно нажать выбрать в «Сервисе» пункт «Дамп», чтобы вызвать программное окно (Shell, Python) с результатом TEI-обработки (см. рис. 5 и 6).

Рис. 5. TEI-разметка: метатеги

Рис. 6. TEI-разметка: теги

Глава 3. Пунктуационная разметка текстов школьников. Классификация пунктуационных ошибок

Пунктуационная разметка в нашем исследовании определена следующими задачами:

обозначить все встречающиеся в текстах школьников знаки препинания;

отметить все случаи, в которых учащийся допустил пунктуационную ошибку;

осуществить проверку текста учащегося таким образом, чтобы, получив проверенную работу, ученик не только понимал, где он ошибся в пунктуации, но и почему знаки препинания должны были быть поставлены иначе в каждом в конкретном случае.

провести статистический анализ пунктуационных ошибок в школьных текстах.

Для решения этих задач нам предстояло решить, как и по какому принципу собирать, обрабатывать и считать пунктуационные данные.

Сначала был сформирован список того, что мы считаем знаками препинания: "." (точка), "!" (восклицательный знак), "?" (вопросительный знак), "," (запятая), ";"(точка с запятой), ":" (двоеточие), " - " (тире), "-" (дефис: включили в группу пунктуационных знаков, так как с помощью дефисов выделяются одиночные приложения после определяемого слова), "/"(слэш), кавычки, открывающие скобки, закрывающие скобки, комбинированные знаки - "..." (многоточие), "?!." , "?!".

Затем предстояло определить, какие типы ошибок будут учитываться при заметке. При составлении классификации ошибок мы опирались на то, что расчленение письменного текста происходит по трем основаниям, определяющим принципы современной русской пунктуации:

формально-грамматическому (с учетом синтаксического строения предложения и его компонентов),

смысловому (отражение содержательной значимости речи),

интонационному (распределение пауз, логических и смысловых акцентов, передача эмоциональных нюансов речи) (Правила русской орфографии и пунктуации, 2009).

Большая часть пунктуационных правил все же привязана к синтаксическому строению предложения, а именно, это

знаки конца предложения;

знаки, разделяющие части сложного предложения;

знаки, указывающие на синтаксическую однородность;

знаки, выделяющие группы слов с четко фиксируемым местом расположения (Т.В. Базжина, Т.Ю. Крючкова. Русская пунктуация, 2015).

Именно эти знаки препинания составляют необходимый пунктуационный минимум, который обязателен в школьной программе и, следовательно, применим при исправлении школьных текстов в программе Интерробанг.

Поскольку смысловые оттенки речи могут быть разнообразными, то и знаки, ориентированные на их передачу, допускают вариантность в соответствии с возможностью разного осмысления тех или иных конструкций (Правила русской орфографии и пунктуации, 2009). Наша программа не предполагает вариативности. Если вариант ученика допустим, проверяющий по своему усмотрению либо не исправляет его (предусмотрен вариант обозначения знака как авторского), или исправляет на тот, который ближе всего к правилам первого основания, т.е. к норме.

Согласно третьему основанию в программе обрабатываются случаи выделения междометий и конца предложений.

Для удобства школьников и проверяющих при создании типологии ошибок также было решено опираться на самые общие причины постановки/отсутствия знаков препинания, применяемые в школе, и, следовательно, причины ошибок. После нескольких встреч с практикующими преподавателями и обсуждений возможного набора правил, таких позиций было выделено 16. Вслед за [Т.В. Базжина, Т.Ю. Крючкова. Русская пунктуация, 2015], все правила были изначально разделены на две группы - правила, связанные с разделительной функцией, и правила, связанные с выделительной функцией. Затем выделилась также третья группа, куда попали случаи, которые невозможно отнести ни к одной из двух указанных выше групп.

По совету старшего преподавателя филологического факультета Казанского государственного университета и учителя Лицея при КГУ Афанасьевой Т.В. всем правилам были присвоены легко запоминающиеся объяснительные значки. Практика использования подобных значков уже имела место в школе до создания КТШ и хорошо себя зарекомендовала в заданиях, когда детей просят в собственном тексте разметить с помощью объяснительных значков логику расстановки знаков препинания. Такие задания связаны с тем, что на уроке преподаватель обычно не успевает адекватно оценить, усвоил ли ученик правило. Кроме того, используя объяснительные значки, ученики повторяют правила. О том, что использование системы объяснительных значков дает положительные результаты и дети успешно осваивают пунктуационную логику, свидетельствуют высокие баллы, которые получают школьники, знакомые с этой системой, на экзаменах по русскому языку при ответах на вопросы по синтаксису и пунктуации.

В системе Интерробанг используется следующий набор объяснительных значков, соответствующий правилам и типам пунктуационных ошибок:

Разделительные знаки препинания:

      - разделение частей сложного предложения / clauses

      - однородные части / homogeneous clauses

      - однородные члены предложения / homogeneous

      - обобщающее слово при однородных членах предложения / homogeneous generalization

Выделительные знаки препинания:

      - обращение / allocution

      - вводные и вставные конструкции / expletive

      - уточнение, примыкание, присоединение / specifier

      - обособленное дополнение / dangling object

      - сравнительный оборот / similie

      - обособленное обстоятельство / dangling adverbial

      - обособленное определение / dangling attribute

      - приложение / apposition

Другое:

      - тире между подлежащим и сказуемым / subject-predicate dash

      - эллиптическое тире / blank dash

 - кавычки / quotes

      - авторская пунктуация / author mark

Глава 4. Обработка корпуса с помощью программы интерробанг и анализ полученных данных

Корпус школьных текстов был обработан с помощью программы Интерробанг - автоматически выделены знаки препинания (и сходные с ними символы). Затем в программе в ручном режиме исправлены ошибки и во всех допустимых случаях добавленным и удаленным знакам препинания были присвоены объяснительные значки (в TEI-разметке соответствующие значкам значения тегов) - иконки, привязанные к различным пунктуационным правилам и типам ошибок. Затем была произведен статистический анализ данных разметки и собраны примеры по типам ошибок.

В процессе разметки формировалось представление о видах пунктуационных ошибок и того, что принято считать пунктуационными огрехами, делались предположения о частотности тех или иных пунктуационных случаев вообще и некоторых типов ошибок в частности, поднимались вопросы происхождения ошибок, формировалась база интересных случаев. В результате разметки и таких наблюдений программа разметки КШТ несколько раз менялась, в первую очередь изменения коснулись набора объяснительных значков и списка метатегов.

В разделе 4.1 представлены результаты статистической обработки.

В разделе 4.2 приведен анализ данных разметки и статистической обработки.

4.1 Статистический анализ данных

Подсчет статистики ошибок в разметчике Интерробанг осуществляется по TEI-тегам choice при помощи программы stats.py. Знаки, которые попали в тег sic учитываются как удаленные, а те, которые попали в тег cor, - как добавленные проверяющим. Распределение осуществляется на основе значений атрибута subtype тега pc для объяснительных значков и значений атрибута pc для знаков препинания.

Таким образом, статистика учитывает количество недостающих/избыточных знаков (см. рис. 1) и причины постановки/удаления знака препинания (см. рис. 2).

Рис. 1. Распределение удаленных и добавленных знаков препинания в текстах разного типа

Рис. 2. Распределение по типу ошибок

Согласно полученным данным, КТШ в настоящий момент содержит 1168 аннотированных знаков (см. рис. 3), более половины из которых - запятые (630 знаков).

Рис. 3. Частота исправлений знаков препинания

Самый редкий знак в базе ошибок (1 случай) - многоточие. Такие двойные знаки, как "?!" и "?!." не только не удалялись и не добавлялись при проверке, но и не использовались в ученических текстах ни разу.

На данный момент ни разу не производилось никаких операций с такими знаками, как "!", фигурные и квадратные скобки, слеш и дефис для обособления одиночных приложений.

Знак, который чаще всего, 462 раза (см. рис. 2), приходилось добавлять проверяющим, - запятая. Также часто учащиеся пропускали кавычки - 156 раз - так как этот знак парный, следовательно, речь идет о 78 случаях. 75 раз было добавлено тире. Точку в конце предложения пришлось поставить 42 раза.

Самым удаляемым знаком в корпусе также была запятая (168 раз). На втором месте по количеству удалений была точка (84 раза), которую учащиеся часто ставили между частями сложноподчиненного предложения. 42 раза проверяющие убрали ";". Удивительно, что второй по количеству ошибок знак препинания, кавычки, ни разу не был удален - все случаи употребления были уместны.

Согласно данным о количестве использования объяснительных значков, проверяющему была понятна причина ошибки, сделанной учащимся, в 879 случаях, т.е. в корпусе зафиксировано более 250 ошибок неясной этиологии.

Ошибки в разделительных знаках препинания отмечены в 375 случаях, несколько меньше, 310 случаев, ошибок выделения, притом что правил, связанных с обособлением в два раза больше, чем причин для разделения. На остальные 4 объяснительных случая (тире между подлежащим и сказуемым и эллиптическое, употребление кавычек и авторские знаки) приходится суммарно 194 значка, из которых большинство связаны с «забытыми» кавычками (см. рис 2).

Чаще всего ошибки связаны с неправильным разделением частей сложного предложения - 303 случая, из которых 12 на неправильное разделение однородных частей. Большое количество ошибок школьники допускают при обособлении второстепенных членов - 171 пример, из них чаще всего ошибки касались обособления определений 93 случая, где 12 примеров касаются обособления особого типа определений - приложения. На третьем месте по частоте ошибок - использование кавычек (156 значков). Следующая группа - ошибки на знаки препинания при словах, грамматически не связанных с членами предложения: учащиеся ошиблись в 139 случаях, большинство из которых связано с неумением отличать вводные слова от не вводных и только один с обособлением обращения. 72 ошибки допущено школьниками по теме «Однородные члены предложения», причем 15 ошибок связано с использованием обобщающих слов. Учащиеся не всегда справляются с темой «Тире между подлежащим и сказуемым» - 30 примеров на нее. Наконец 5 и 3 случаев приходится на авторские знаки и эллиптическое тире соответственно.