Текстоматика

Оценить текст можно по-разному. Например, установить, что:

• Объем документа превышает допустимый.
• Документ содержит большое количество ошибок.
• Содержание документа не соответствует заголовку.
• Текст труден для понимания.
• Не содержит необходимые разделы или не оформлен в соответствии с требуемым стандартом.

В приложении Текстоматика оценка текста производится по этим и другим показателям, но более конкретно. Здесь вычисляются количественные значения заданных показателей качества текста. Вот несколько примеров:

• Текст документа будет понятен специалисту на 65%.
• Текст документа совпадает по смыслу с текстом документа другого автора на 92%.
• Грамотность текста документа 15%.

Набор показателей качества текста задается в так называемой “модели оценки”.

Профессиональная экспертиза текстовых документов является важной составляющей деятельности квалифицированных специалистов во многих областях.

Преподаватель вуза

• Проверяет тексты рефератов, контрольных, курсовых, дипломных и других письменных работ своих студентов.
• Формирует и обосновывает итоговую оценку проверенной работы.
• Оценивает тексты своих учебных и методических материалов с целью их совершенствования.

Школьный учитель

• Проверяет тексты творческих самостоятельных и контрольных работ, сочинений, изложений своих учеников.
• Формирует и обосновывает итоговую оценку проверенной работы.
• Оценивает тексты своих учебных и методических материалов с целью их совершенствования.

Редактор

• Проверяет авторские тексты (книги, статьи, обзоры). Приводит их в соответствие с установленными требованиями.

Рецензент

• Проверяет тексты рецензируемых материалов.
• Оценивает их соответствие установленным формальным и содержательным требованиям.
• Формирует и обосновывает итоговую оценку отрецензированного материала в рецензии (отзыве).

Эксперт

• Выполняет содержательную проверку текстовых документов, подлежащих экспертизе. Например, может проверяться соответствие содержания документа цели его подготовки, логическая завершенность. Или новизна, востребованность, уникальность.
• Выполняет формальную проверку текстовых документов. Например, корректность структуры, состав реквизитов, размер документа.
• Формирует и обосновывает итоговую оценку экспертизы документов в своем заключении.

Инженер, конструктор, технолог

• Контролирует соответствие проектной и эксплуатационной документации требованиям действующих стандартов.
• Оценивает подготовленные материалы научно-технических мероприятий. К ним относятся презентации, обзоры, пояснительные записки.

Исследователь, автор научных работ

• Оценивает соответствие своих текстов установленным формальным и содержательным требованиям. Этими текстами могут быть научные статьи, отчеты, книги, эссе, доклады, обзоры.

Технический писатель

• Проверяет соответствие подготавливаемой проектной и эксплуатационной документации требованиям действующих стандартов.
• Оценивает подготовленные подготовку проектной и эксплуатационной документации.

Аспирант и магистрант

• Оценивает соответствие своих текстов установленным формальным и содержательным требованиям. Этими текстами могут быть научные статьи, разделы диссертации и диссертация в целом, доклады, обзоры.
• Улучшает тексты своих работ.

Студент университета или колледжа

• Проверяет тексты своих письменных работ на соответствие требованиям. К таким работам относятся рефераты, отчеты по лабораторным работам, контрольные, курсовые, дипломные работы.
• Улучшает тексты своих работ.

Ученик школы

• Проверяет тексты своих письменных работ на соответствие требованиям.
• Улучшает тексты своих работ.

Существует достаточное количество показателей качества текстов. Их вычисление возможно по тому или иному формальному алгоритму. Например, так можно вычислить показатель удобочитаемости текста или степени соответствия текста заданной структуре. Но в отношении многих показателей их вычисление является нетривиальной задачей. Такие задачи не имеют решения с помощью известных простых алгоритмов. Например, это касается показателя обстоятельность (полнота, доскональность, основательность). Или показателя уникальность слабоструктурированных и семантически сложных текстовых объектов. В таких случаях используются модели и методы искусственного интеллекта и машинное обучение. Типичный пример – нейронные сети. В приложении Текстоматика мы применяем аналогичные подходы.

Модель оценки документов нужна для того, чтобы определить:

• Что мы будем оценивать? Для этого надо задать характеристики текста, интересующие нас в данном случае.
• Как мы будем оценивать эти характеристики? Для этого надо выполнить настройку параметров алгоритмов оценки.
• Насколько важна та или иная характеристика относительно других. Для этого надо задать веса оцениваемых характеристик текста.

Также, модель оценки позволяет многократно выполнять оценку с использованием заданного набора оцениваемых характеристик.

Все показателей оценки документов делятся на группы:

• Оценка содержания. Примеры: соответствие содержания документа его заголовку, похожесть текста документа на тексты других документов.
• Оценка текста. Примеры: удобочитаемость текста, смысловая нагрузка текста.
• Оценка представления. Примеры: внутренняя структура документа, размер документа.
• Оценка соответствия стандартам. Примеры: оформление библиографического списка, количество ссылок, число цитирований в тексте.

Полный набор показателей, доступных в настоящее, можно увидеть при создании модели.

Оценка документов происходит следующим образом:

1. Один или несколько документов загружаются на сервер. При этом для каждого пользователя организуется цикл обработки его документов (сеанс). Сеанс полностью изолирован от сеансов других пользователей.
2. Текст документа преобразуется в вид, удобный для анализа. Выделяются разделы документа и их заголовки, абзацы, предложения, отдельные слова.
3. Выполняется анализ документа по каждому показателю, заданному в модели оценки. Используются специализированные алгоритмы, включая лексический и статистический анализ текста, регулярные выражения, нейронные сети.
4. Формируется отчет о результатах оценки документа по каждому показателю и документа в целом. В отчете содержатся рекомендации по совершенствованию текста документа. Отчет сохраняется в базе данных и может быть распечатан.

Приложение Текстоматика привлекательно по следующим причинам:

• Большое количество алгоритмов оценки текстовых документов собраны в одном приложении и управляются из него. Во многих случаях нет необходимости обращаться к другим продуктам.
• Приложение свободно для использования и не требует платы за использование ключевых функций.
• Приложение не требует установки на устройство пользователя. Функции приложения доступны через браузер там, где есть Интернет.
• Сайт приложения адаптирован к мобильным устройствам (смартфонам, планшетам). Их можно использовать точно так же, как и настольный компьютер или ноутбук.
• В приложении поддерживаются все основные форматы текстовых файлов.
• Осуществляется гибкая настройка числа проверок и их параметров. Пользователь может настроить приложение на проверку документов по различным комбинациям показателей оценивания.
• Возможна оценка нескольких документов за один раз. Полезно для анализа и оценивания групп однотипных документов.

Так выглядит веб-форма для показа результатов оценки текстового документа: https://www.ivkconsulting.ru/static/files/result_web.pdf

А здесь можно посмотреть отчет о результатах оценки, предназначенный для печати: https://www.ivkconsulting.ru/static/files/result_pdf.pdf

1. Загрузить один или несколько документов.
2. Выбрать модель оценки или создать новую.
3. Оценить по выбранной модели текст одного или нескольких документов.
4. Изучить и сохранить при необходимости результаты оценки.

• Идея, проектирование, разработка, документирование, продвижение: Владимир Константинович Иванов.
• Опубликованные материалы, имеющие отношение к этому проекту, см. здесь: https://www.ivkconsulting.ru/?p=4030&tgid=243#tppubs.
• Другие проекты см. на сайте Исследования и разработки В.К. Иванова в разделе “Выполненные проекты”: https://www.ivkconsulting.ru/?p=3945