Methodology of digital search of the target audience and data analysis for assessing the quality of distance education

Введение / Introduction

Дистанционное и онлайн-обучение выступают как компоненты образовательной среды практически в каждом образовательном учреждении. Доктор экономических наук, профессор Е. Р. Орлова [1] считает, что невозможно отстраниться от дистанционного обучения, а его дальнейшее развитие в современном мире неосуществимо без применения новых методик. Она выделяет присущие современному состоянию дистанционных технологий проблемы, среди которых, на наш взгляд, наиболее важными являются оценка качества дистанционного обучения и отсутствие методик для эффективной реализации дистанционного обучения.

Как правило, оценка качества и методики реализации дистанционного обучения производится на основе анализа образовательных данных, полученных из внутренней среды образовательного учреждения. Это приводит к субъективной оценке и не всегда отражает истинную оценку качественных и количественных параметров содержания и организации дистанционного и онлайн-обучения.

Таким образом, определена главная проблема исследования, направленная на получение объективной оценки качества дистанционного обучения на основе мнений и суждений, которые репостятся в социальных сетях и других онлайн-сообществах. Для этого нужно определить методологический подход цифрового поиска целевой аудитории, чье мнение будет являться определяющим при оценке качества дистанционного обучения.

Актуальность заявленной проблематики обусловлена рядом как теоретико-методологических, так и практических факторов. В первую очередь это процессы трансформации образования, выражающиеся в изменении его основной формы – глобальный переход на дистанционное и онлайн-образование, о чем говорит С. Ходжес [2]. Во-вторых, в современном обществе достаточно остро стоит вопрос сокращения социальной дистанции и снижения уровня социального напряжения. На данный проблемный фон, как указывает И. З. Ахмадуллин [3], действуют многочисленные факторы, начиная с экономической и финансовой сфер и заканчивая вопросами культуры, воспитания и образования. Оптимальная организация системы получения гражданами образования, безусловно, способствует нормализации и данного аспекта социальной реальности. В-третьих, усиление этого перехода из-за COVID-19. В-четвертых, необходимость оптимизации процессов дистанционного и онлайн-образования на основе актуальных и достоверных данных о них. Поэтому сегодня важными становятся задачи создания актуальной и достоверной базы суждений и оценок дистанционного и онлайн-образования, автоматизированного изучения данных для принятия обоснованных решений по трансформации системы образования.

Обзор литературы / Literature review

Представленное исследование объединяет несколько направлений научной проблематики, которые, переплетаясь, составляют единую междисциплинарную концепцию.

Первое направление – педагогическое, представляет собой исследования, направленные на выявление достоинств и недостатков дистанционного и онлайн-образования, его способов и актуальных форм. Особенно остро данная тема проявилась в период пандемии COVID-19, когда, как отмечают Т. Фавале, Ф. Соро, М. Тревизан, И. Драго и М. Мелиа [4], произошел стремительный перевод обычных образовательных практик в дистанционную и онлайн-форму. В настоящее время идет очень активная научная дискуссия по поводу оптимальной организации данных форм обучения. Некоторые исследователи, например Т. Сурма [5], З. Филиус [6] и В. Лоуэлл [7], говорят об особенной эффективности использования социальных сетей, поскольку они способны оперативно обеспечить необходимую в системе образования обратную связь участников образовательного процесса.

Второе направление связано с активным обсуждением в научной сфере процедуры оптимальной организации дистанционного обучения, его технологии и инструментов, эффективных программ-помощников. Важно отметить, что многие исследователи, в частности Т. Старкова [8] и С. Янг [9], заявляют о необходимости использования средств ИКТ в образовательном процессе, а также вполне убедительно обосновывают выбор в их пользу. Широкое использование ИКТ в образовательном процессе обусловило необходимость повышения цифровой грамотности участников образовательного процесса, о чем в своих работах пишут С. Декстер [10] и Дж. Трентин [11]. Данное направление наряду с образовательными имеет и социальные корни – предполагается потребность в освоении цифровых навыков, необходимость в которых появляется в обществе на современном этапе его развития. Кроме того, есть мнение Н. Джеймс [12], что с помощью средств дистанционного обучения у обучающихся, помимо цифровых навыков, возможно также сформировать еще и навыки, необходимые человеку в XXI веке: командная работа, управление проектами, различные формы общения. Как отмечает исследователь К. Гарсия [13], высокий уровень информационной грамотности позволит гражданам эффективно решать информационные проблемы, свойственные современному обществу, в частности формировать специализированные виртуальные (сообщества) пространства и функционировать в них.

Третье направление разработки заявленной в исследовании проблематики связано с поиском необходимой информации и формированием релевантной базы данных. Цель заявленного поиска – мнения, оценки и суждения обучающихся относительно перехода на дистанционное и онлайн-обучение в период пандемии COVID‑19. Наиболее эффективной площадкой сбора мнений, как утверждает А. В. Лазондер [14], являются социальные сети. В связи с этим в научном сообществе активно обсуждается алгоритм поиска информации в социальной сети. Для примера можно изучить исследование коллектива ученых, проведенное в 2020 году [15]. Другие исследователи пытаются подойти к изучению цифрового следа с других аспектов, предложить свой взгляд на изучаемую проблему. Например, М. Ганза, М. Парцуски и Дж. Стадник рассматривают и сравнивают характеристики различных действующих поисковых систем [16]. А А. Триас, М. Роса, М. Ла и Е. Аскнекст разрабатывают авторские агентские протоколы, ими предлагаются алгоритмы многоадресной маршрутизации запросов [17, 18]. Учеными разрабатываются и предлагаются авторизированные системы социального поиска и нейрокомпьютерные приложения для веб-поиска, а также анализируются возможности визуализации его результатов [19–21]. В современном научном дискурсе очень востребованной темой исследований и обсуждений является эффективность социального поиска, которая основывается на отслеживании релевантности получаемых данных. Достаточно много внимания исследователями уделяется процессу оптимизации социального поиска: например, Дж. Спаволд ведет работу с формулировками запросов [22], а Ф. Сан, М. Ванг и Х. Ванг акцентируют внимание на критериях поиска [23], предлагаются метаэвристические обучаемые алгоритмы для повышения эффективности даже в многоэлементных запросах. Кроме того, ведутся разработки полуобучаемых поисковых систем и алгоритмов их обучения, интерактивных систем поиска информации, программы интеллектуального и выборочного поиска.

Многие исследователи, например Дж. Куи [24], К. Джианг [25] и К. Жанг [26], утверждают, что цифровой поиск может выдать вполне релевантные результаты в случае, если будет основываться на адекватных ключевых словах и фразах, что актуализирует четвертое направление, касающееся нашего междисциплинарного объекта изучения и связанное с лингвистическим контекстом информационного поиска.

Существуют исследовательские коллективы [27], которые изучают возможности и характеристики семантического поиска и проводят разработки семантических обучающих сетей. Также заслуживают внимания аналитические материалы Х. Хие [28] и Дж. Рейнхардта [29], касающиеся области социолингвистики и поднимающие вопросы как лексического кодирования в целом, так и, например, использования метафор в онлайн- и дистанционном обучении. Более того, автоматизированные системы обработки сигналов в социальных сетях будут полезны для оперативного анализа мнений и поведения граждан (как цифрового, так и в обычной жизни). Также подобные системы будут способствовать получению более качественных результатов при поиске целевой аудитории для различного рода исследований.

В соответствии с вышеизложенным вопрос разработки методологического подхода к оценке мнений целевой аудитории о дистанционном обучении является как теоретически, так и практически актуальным. Ввиду сложности и многоаспектности заявленной проблематики степень ее изученности представляется достаточно низкой, затрагивающей только отдельные, разрозненные аспекты темы. Примеров комплексного и системного изучения данной темы не имеется в научном дискурсе.

В связи с этим в представленном исследовании рассмотрим описание методологии цифрового поиска в выборке данных целевой аудитории для последующего использования ее в оценке качества дистанционного образования. Для оценки будет предложен алгоритм, построенный на основе разработанной математической модели.

Методологическая база исследования / Methodological base of the research

Рассмотрим основные этапы методологии цифрового поиска целевой аудитории исследования. В данном исследовании под целевой аудиторией (ЦА) мы будем понимать студентов и преподавателей вузов, которые публикуют разные посты по проблемам высшего образования, онлайн-образования и образования в условиях пандемии.

Методологию поиска ЦА мы определим как общий подход к выбору методов, способов и стратегии информационного поиска применительно к задаче релевантного отбора требуемых по задаче данных. Например, запрос информационного поиска ориентирован на нахождение преподавателей вузов как части ЦА по следующему алгоритму:

1) выбрать группу подписчиков, чье последнее место работы – вуз (институт, университет и т. п.);

2) в полученной выборке п. 1 определить тех, чья должность связана с преподавательской деятельностью;

3) выбрать те подписки на группы, которые являются «живыми» и удовлетворяют следующим критериям:

– нет запретов к комментированию постов;

– одним из основных направлений группы является обсуждение проблем вузовского образования;

– посты связаны с обучением в вузе и/или обучением в условиях пандемии.

Опираясь на представленный алгоритм, предлагаем сформулировать методологию поиска ЦА через описание ее критериев и этапов ее реализации.

Критерии поиска ЦА включают следующие параметры:

– Цель – нахождение ЦА по подпискам в сообществах социальных сетей, которые затрагивают проблемы обучения в вузе (высшего образования, онлайн образования и образования в условиях пандемии), содержат высказывания, суждения и предложения по выделенным проблемам.

– Предмет – собственно организация поиска ЦА, являющейся участниками подписок, посты которых связаны с обсуждением проблем обучения в вузе (высшего образования, онлайн-образования и образования в условиях пандемии), высказыванием собственных суждений и формированием предложений по выделенным проблемам.

– Виды информационного поиска, используемого в исследовании.

Для формирования методологии поиска целевой аудитории в исследовании применяются следующие виды информационного поиска:

– фактографический поиск, в рамках которого осуществляется поиск фактов, соответствующих информационному запросу;

– семантический поиск, в рамках которого анализируется содержание постов по заданным параметрам.

При использовании фактографического поиска в контексте данной работы на первой итерации были найдены все подписчики, у которых последним местом работы является учреждение высшего образования. Затем из полученной выборки были выделены участники, занимающиеся преподавательской деятельностью или являющиеся студентами. На третьем этапе был проведен анализ подписок ЦА для определения их активности на заданный период (иметь «свежие» посты в ленте сообщений и комментарии к ним). С использованием данного подхода был сформирован массив ЦА, являющейся подписчиками сообществ социальных сетей, которые удовлетворяют выделенным критериям информационного запроса поиска (место работы/учебы, должность/статус, активность участников подписок).

В процессе применения семантического поиска были отобраны подписки, затрагивающие проблемы обучения в вузе (высшего образования, онлайн-образования и образования в условиях пандемии) и/или содержащие высказывания, суждения и предложения по выделенным проблемам. Была установлена разметка по смысловому содержанию подписки, определяющая ее отношение к обучению в вузе. Именно это поисковое описание является доминирующим в осуществлении релевантного отбора ЦА в семантическом поиске. С использованием данного подхода были отобраны релевантные подписки ЦА.

Для проведения исследования были использованы следующие методы:

– Выборочный метод. Он позволил выделить ЦА, которая удовлетворяет информационному запросу поиска. В результате применения данного метода была выбрана ЦА, в подписках которой активно обсуждались проблемы высшего образования, онлайн-образования и образования в условиях пандемии.

– Интуитивный метод. Позволил сформировать перечень ключевых слов, положенных в основу информационного запроса поиска ЦА с использованием абстрактно-логического анализа. В результате применения данного метода были определены ключевые параметра поиска (постов), включающие набор контекста: образование, дистант, онлайн, универ, студент, преподаватель, бакалавр, магистр, экзамен, зачет, профессор, доцент, лекция, кафедра, факультет, институт, зачетка, расписание, общежитие, стипендия, коронавирус, COVID-19, карантин, пандемия и др. (а также различные вариации сокращений и морфологических форм выделенных ключевых слов). С использованием обозначенных параметров поиска были отобраны только релевантные подписки ЦА.

– Рецептурный метод. С помощью данного метода была создана модель поисковой задачи, которая сможет однозначно выделить ЦА, которая является участником подписок, удовлетворяющих обозначенным ранее критериям информационного запроса поиска. Модель поисковой задачи включает: специфичность цели, длительность, объем результата. Специфичность цели информационного поиска определяется целевой аудиторией и выделенными критериями. Нахождение ЦА должно быть явным и не затрачивать большой объем времени. В результате применения данного метода была создана модель поискового запроса, которая позволила найти ЦА – участников релевантных подписок.

– Индуктивный метод информационного поиска позволил сформировать некоторую закономерность ключевых слов поиска. В результате применения данного метода был определен массив ключевых слов, например онлайн-обучение, дистанционное обучение, пандемия и т. п., сформированы лингвистические маркеры, специфические для релевантных подписок сообществ в социальных сетях.

– Дедуктивный метод информационного поиска позволил из совокупности всех сообществ, на которые подписана ЦА, выделить только те, которые удовлетворяют критериям информационного запроса поиска. В результате применения данного метода из всех постов были отобраны только те посты ЦА, которые затрагивали проблемы образования в вузе как в условиях нормального функционирования, так и в условиях пандемии.

Для поиска ЦА, являющихся участниками подписок сообществ в социальных сетях, использовался текущий хронологический охват, позволяющий выделить только те подписки, API которых активен.

В результате использования текущего поиска ЦА были отобраны участники подписок сообществ, которые являются студентами или занимаются педагогической деятельностью в высших учебных заведениях на данный период времени и проявляют интерес к проблематике обучения в вузе как в условиях нормального функционирования, так и в условиях пандемии.

Для поиска ЦА была осуществлена многошаговая выборка, описанная в информационном запросе. Поиск активных подписок ЦА осуществлялся по API разово. Для этого были использованы различные методы:

– messages.allowMessagesFromGroup (для подписки на сообщения от сообщества);

– messages.denyMessagesFromGroup (для запрета сообщений от сообщества);

– messages.isMessagesFromGroupAllowed (для проверки, разрешены ли сообщения от сообщества).

Систематизация поиска заключалась в планировании его осуществления для ускорения его реализации, а именно:

– была поставлена задача тщательного отбора критериев поиска (место работы, должность, активность подписки);

– была осуществлена систематизация ключевых слов для поиска (лингвистические маркеры, специфические для релевантных подписок сообществ в социальных сетях);

– была произведена унификация систематизированных ключевых слов с учетом морфологии и сленга.

Таким образом, были определены основные критерии методологии поиска ЦА, включающие описание выбора методов и способов проведенного исследования применительно к задаче релевантного отбора постов ЦА. Для полноты исследования необходимо выделить и описать основные этапы проведения поиска релевантных постов ЦА.

К основным этапам поиска целевой аудитории относятся:

– определение (уточнение) информационной потребности, под которой мы понимаем поиск и удовлетворяющий критериям информационного запроса поиска отбор ЦА, которая обсуждает проблемы онлайн-обучения и классического обучения, в условиях пандемии переведенного в дистанционный формат; ставит проблему; высказывает мнения, суждения и предлагает решения в активных подписках сообществ. В информационную потребность мы также включаем необходимость классификации ЦА по социально-демографическим и профессиональным признакам с целью получения аналитических отчетов по различным критериям для формирования представления о спектре вопросов, обсуждаемых в постах, и основных характеристиках ЦА (возраст, регион, должность и др.);

– формулировка информационного запроса: найти всю ЦА (студентов и педагогов высших учебных заведений), которая является участниками релевантных подписок сообществ в социальных сетях, посты которых «живые» (нет запретов к комментированию постов; посты связаны с обучением в вузе и/или обучением в условиях пандемии); собрать и классифицировать характеристики ЦА по социально-демографическим и профессиональным признакам;

– определение совокупности предполагаемых держателей информации.

В ходе исследования были выделены основные держатели информации по поставленной задаче информационного поиска, к которым мы отнесли студентов и педагогов высших учебных заведений, являющихся подписчиками сообществ в социальных сетях, наиболее распространенных на территории России (ВКонтакте).

Были выбраны следующие поисковые средства для решения задачи отбора ЦА:

– информационно-поисковые системы Интернета – Гугл, Яндекс, Rambler, Mail.ru;

– парсеры для социальных сетей – Facebook, Twitter, Instagram, LinkedIn, ВКонтакте, Одноклассники.

Извлечение информации включало два основных процесса: формирование реестра студентов и педагогических работников высших учебных заведений, являющихся участниками подписок сообществ в социальных сетях, и формирование ЦА по оценке релевантности подписок, в которых они принимают участие.

Первый процесс: формирование реестра студентов и педагогических работников высших учебных заведений, являющихся участниками подписок сообществ в социальных сетях. Например, для выбора всех работников высших учебных заведений была проанализирована информация об их месте работы. Выбор падал на тех, у кого последнее место удовлетворяло критерию.

Для этого был использован фильтр, разработанный в среде MS Excel и позволяющий определить место работы сотрудников.

СЖПРОБЕЛЫ(ПРАВСИМВ(ПОДСТАВИТЬ(B2;» «; ПОВТОР(« «; 50)); 50)),

где B2 – адрес первой ячейки столбца таблицы, который содержит данные о месте работы.

Отфильтрованные данные о местах работы были проанализированы, и отсеяны те, которые не имеют отношения к учреждениям высшего образования. Отсеивание происходило путем применения фильтров и ручного удаления тех записей, которые не удовлетворяли требованиям.

Для выбора работников, занимающихся педагогической деятельностью, был сформирован реестр педагогических должностей высших учебных заведений.

С использованием фильтра

=СЖПРОБЕЛЫ(ПРАВБ(ПОДСТАВИТЬ(B2;",";ПОВТОР(" ";99));99)),

где B2 – адрес первой ячейки столбца таблицы Excel, который содержит данные о должности, был сформирован массив последней должности претендентов на вхождение в ЦА.

Полученные данные были подвергнуты дополнительной обработке с целью извлечения только педагогов. Для этого сначала была произведена унификация наименований должностей путем их автозамены (ст. преподаватель – старший преподаватель, препод – преподаватель и т. п.). Далее была произведена фильтрация с использованием формулы:

=если(или(X1=’ассистент’;X1=’преподаватель;X1=’старший преподаватель’;X1=’доцент’;X1=’профессор’);1;’’),

где X1 – адрес первой ячейки столбца таблицы Excel, который содержит данные о должности.

И наконец, полученные данные были отфильтрованы по признаку «1». Таким образом, был получен реестр педагогических работников высших учебных заведений, являющихся участниками подписок.

Второй процесс – формирование ЦА по оценке релевантности подписок, в которых они принимают участие, проходил следующим образом:

– вручную был осуществлен просмотр сообщений подписки на оценку дат их создания, т. е. оценка активности подписки;

– была произведена оценка возможности добавления комментариев в подписку путем визуального просмотра существующих индикаторов на текущей странице;

– была произведена ручная разметка постов в подписках в соответствии с контекстом ключевых слов с учетом морфологии и сленга, определяющих семантическую сущность информационного запроса поиска.

Результаты исследования / Research results

Была выбрана ЦА, являющаяся участниками релевантных подписок. Поэтому были определены критерии релевантности подписок ЦА и обозначена процедура их применения.

Критерии релевантности:

1) подписка должна содержать активную ленту с сообщениями;

2) не должно быть запретов к комментированию постов;

3) посты должны быть связаны с обучением в вузе и/или обучением в условиях пандемии, т. е. включать:

– контекст ключевых слов с учетом морфологии и сленга, определяющих семантическую сущность информационного запроса поиска с использованием абстрактно-логического анализа;

– лингвистические маркеры, специфические для обозначенной информационной потребности.

Процедура применения критериев релевантности:

1) проверить даты последних 10 постов для формулирования вывода об активности подписки. Необходимо выполнить условие: все посты должны быть созданы не позднее последних 30 дней;

2) оценить возможность добавления комментариев в подписку путем визуального просмотра существующих индикаторов на текущей странице;

3) проанализировать посты и комментарии к ним на предмет соответствия заявленному информационному запросу поиска, сформулированному на первом этапе: ЦА должна затрагивать проблемы онлайн-обучения и классического обучения, в условиях пандемии переведенного в дистанционный формат; высказывать мнения, суждения и предлагать решения.

В ходе проведения исследования было проанализировано 17 057 записей, сделанных ЦА по проблемам онлайн-обучения и классического обучения, в условиях пандемии переведенного в дистанционный формат. В количественный состав ЦА вошел 2731 преподаватель разных должностей в вузах. На рис. 1 представлено графическое распределение ЦА по возрастному критерию.

Табл. 1 содержит более детальную информацию по возрастам ЦА, чье мнение и суждение затрагивало проблемы высшего образования в дистанционном формате и онлайн-обучения в условиях пандемии.

Рис. 1. Распределение ЦА по возрасту

Таблица 1

Распределение ЦА по возрастному критерию

На рис. 2 представлена динамика распределения ЦА с учетом пола.

Рис. 2. Распределение ЦА по возрасту с учетом пола

Полученные результаты позволили рассчитать моду и медиану на всем диапазоне данных (см. табл. 2).

В ходе проведения исследования был осуществлен географический охват ЦА (см. рис. 3), который показал сосредоточенность в центральной части России, где располагается большее количество вузов.

Таблица 2

Мода и медиана на всем диапазоне данных

Рис. 3. Карта, отображающая количество ЦА по регионам

Для чистоты исследования был осуществлен расчет среднего количества подписок у представителя ЦА. Сначала были получены группы и подписки ЦА. Для каждого представителя ЦА было найдено количество групп (groups), количество пабликов (publics) и их сумма. Затем произведен расчет среднего количества. Среднее количество подписок на группы и паблики у представителя целевой аудитории составило 94.

На основе полученных групп и подписок преподавателей были найдены количество уникальных групп и количество уникальных пабликов. Эти значения были просуммированы. Общее количество уникальных сообществ в подписках целевой аудитории составило 178 650.

Далее нужно было определить релевантные сообщества, которые затрагивают вопросы высшего дистанционного образования и онлайн-образования в условиях пандемии. На соотнесение релевантности были выделены 3905 сообществ, из которых было выявлено восемь релевантных сообществ. Количество участников в релевантных и нерелевантных сообществах представлено на рис. 4 и 5 соответственно.

5. Анализ данных в оценке мнений о дистанционном обучении

Все найденные сообщения были разделены на релевантные, то есть соответствующие образовательной тематике, и нерелевантные. Количество релевантных постов различно – в разных регионах и разных вузах по-разному обсуждалась проблема дистанционного образования, особенно когда это было вызвано эпидемиологической ситуацией в стране, мире.

Студенты до перехода на дистанционное обучение не часто представляли тему образования в своих сообществах. Однако анализ показал, что с вынужденным массовым переходом на онлайн-обучение данная тематика стала намного чаще обсуждаться в сообществах как преподавателей, так и студентов.

Рис. 4. Количество участников в релевантных сообществах

Рис. 5. Количество участников в нерелевантных сообществах

Следующим блоком анализа являлась тематика и тональность релевантных сообщений. Тематика высказываний в сообщениях в основном связана с организационно-методическими вопросами: в двух из трёх сообществ доля таких высказываний составляет 66–77%, из которых 16% негативных сообщений и 84% нейтральных.

Вторым по актуальности является вопрос бытовых условий – в двух из трёх сообществ доля таких высказываний составляет 13–18%, из которых 3% позитивных сообщений, 17% негативных сообщений и 80% нейтральных. На третьем месте у студентов социально-финансовая тема: в двух из трёх сообществ доля таких высказываний среди релевантных составляет 5–12%, из которых 24% негативных сообщений и 76% нейтральных. Следующей представлена тема технического обеспечения: в сообществах доля таких высказываний среди релевантных составляет 9%, из которых 28% негативных и 72% нейтральных высказываний. В меньшей степени волнуют студентов самочувствие и иные темы.

На рис. 6 отображается динамика публикационной активности, выявленная на основе анализа релевантных сообщений. Анализ показал, что в разных вузах наблюдается различная периодичность упоминания вопросов, связанных с дистанционным обучением. Например, в сообществах вуза 2 релевантные сообщения не встречаются на 8–11-й неделях, присутствуют только в начале учебного семестра и по 5–9% всех сообщений за остальной период. В сообществах вуза 3 релевантные сообщения встречаются равномерно: 1–4% сообщений от общего количества в неделю. А в сообществах вуза 1 виден явный интерес к вопросам онлайн-обучения.

Рис. 6. Распределение сообщений во времени за заданный период

В период объявления о переходе на дистанционное обучение большинства российских вузов происходит повышение публикационной активности в сообществах: рост с 4% до 9%. Этот период можно считать пиком публикационной активности по обсуждению дистанционного обучения и проблем, которые появились с массовым переходом на онлайн-обучение.

При этом видно, что динамика публикаций вузов различается: в сообществах одних вузов еженедельно появляются релевантные сообщения, наблюдается равномерное распределение, но к середине семестра публикационная активность немного активизируется: рост с 8% до 9%. В этот период зафиксированы пики публикационной активности. Затем к концу семестра активность постепенно падает (до 3%). В других вузах пики публикационной активности приходятся на 17–18-ю недели (рост с 5% до 23%). Затем релевантные сообщения исчезают, появляясь лишь на 21-й неделе (5%).

В целом для вузов характерна низкая публикационная активность в неофициальных сообществах по тематике образования до наступления вынужденного перехода, связанного со всплеском заболеваемости COVID-19. Всплеск активности явно прослеживается в начале перехода на онлайн-обучение, которая достигает пика к середине семестра.

Как правило, тематика постов в релевантных сообществах сфокусирована на трех направлениях: организационно-методические вопросы, техническое обеспечение учебного процесса, личные качества и самочувствие.

В целом для вузов чаще характерны сообщения организационного характера. Наиболее резонансной темой является тема отсутствия четкой информации о процессе обучения, как проходят при онлайн-обучении контрольные мероприятия, как осуществляется взаимодействие, каким образом можно изменить результаты экзаменов и т. д.

На рис. 7 представлен топ наиболее популярных слов из сообщений студентов. С темой обучения связаны слова: сессия, дистанционно, учиться, подсказать, универ. Неоднократно фигурируют слова: экзамен, деканат, студент, стипендия, каникулы.

Рис. 7. ТОП слов из релевантных теме образования сообщений

Заключение / Conclusion

Оценка качества дистанционного образования – это серьезная задача, которая стоит перед образовательными учреждениями, когда на смену традиционным формам обучения пришел дистанционный онлайн-формат предоставления учебного материала. Она позволяет отобразить степень соответствия достигаемых образовательных результатов ожиданиям субъектов образования, социальным запросам и нормативным требованиям. При этом в оценке качества ДО используются разнообразные показатели: от оценок индивидуальных достижений, полученных субъектами образовательного процесса в ходе обучения, до данных суждений и мнений, выявленных в ходе анализа сообщений целевой аудитории.

В ходе исследования был осуществлен информационный поиск показателей, которые необходимы для комплексной оценки. Если данные об индивидуальных достижениях студентов хранятся в образовательном учреждении, то для субъективных данных необходимо было сформулировать основные запросы, чтобы выборка данных была релевантной для принятия решения в оценке качества ДО.

Таким образом, в ходе исследования была определена методология поиска целевой аудитории, включающая выбор методов, способов и стратегий информационного поиска релевантного отбора требуемых данных. Она позволила сформировать набор показателей, которые были в дальнейшем использованы для проведения комплексной оценки качества ДО.

Для оценки качества дистанционного образования был предложен алгоритм, построенный на основе математической модели комплексной оценки интегрального показателя объективных данных субъекта образования и субъективных данных, интегрированных с учетом анализа мнений и суждений целевой аудитории с опорой на проведенный цифровой поиск релевантных сообщений.