Внедрение обучения на основе заданий для межкультурной коммуникации в международных классах по китайскому языку

Краткое содержание

Этот пилотный протокол описывает кластерно-рандомизированное сравнение обучения на основе заданий и презентации-практики-производства в университетских международных классах китайского языка и предоставляет репрезентативные результаты, ориентированные на осуществимость, для прагматичных результатов, межкультурной чувствительности, устной беглости и тревоги при говорении.

Аннотация

Международные программы по китайскому всё чаще требуют от учащихся управления межкультурным взаимодействием не только лингвистически точно, но и прагматично уместно. В этой пилотной статье по методам представлен протокол в классе для сравнения обучения на основе заданий с Презентация-Практика-Производство в университетских международных классах по китайскому языку. Протокол разработан для повышения методологической прозрачности путём сочетания согласованного учебного контента, заблокированных учебных и оценочных материалов, маскированного рейтинга, воспроизводимой плавности, точности и сложности, а также скриптированного кластерного рабочего процесса анализа. Целые классы назначаются на уровне класса по одному из двух учебных условий, а результаты собираются на начальном этапе, сразу после теста и последующего наблюдения с помощью задания на завершение устного выступления, заснятой на видео ролевой оценки, анкет, оценивающих межкультурную чувствительность и тревогу при говорении на иностранном языке, а также индексов беглости речи, точности и сложности. В рамках пилотной реализации на одном месте, включающей четыре целых класса и 48 взрослых учащихся уровня 3 и выше, рабочий процесс предоставил анализируемые данные класса, рейтинга, анкеты и речи на всех трёх этапах оценки. Описательные пилотные результаты показали более заметные послетестовые улучшения в прагматической уместности, межкультурной чувствительности и слов в минуту при условии, основанных на задаче, а также снижение тревоги при говорении. Поскольку протокол был пилотирован в очень небольшой кластерной выборке и остаётся уязвимым к замешательству на уровне класса и учителя, эти результаты предназначены как репрезентативные результаты, ориентированные на осуществимость, а не как надёжные доказательства сравнительной эффективности. Этот протокол обеспечивает воспроизводимую основу для будущей многоклассовой или многосайтовой реализации, адаптации и доработки в международных китайских и связанных с ним условиях второго языка.

Введение

Этот протокол представляет собой пилотный протокол для внедрения и оценки обучения на основе задач для межкультурной коммуникации в университетских международных китайских классах, а не исследование эффективности, направленное на поддержку сильных сравнительных утверждений. В международных программах по китайскому языку от учащихся всё чаще ожидают большего, чем просто произносить грамматически приемлемые высказывания. От них также ожидается, что они будут адекватно реагировать в социально и культурно чувствительных ситуациях, где успешное взаимодействие зависит от прагматичного выбора, позиционирования в отношениях и способности корректировать язык под временным ^{давлением 1,2,3}. Для взрослых студентов университетов это остаётся постоянной проблемой в преподавании, поскольку прогресс в словарном запасе и грамматике не обязательно переносится на контекстуально соответствующую результативность в спонтанном межкультурном^{взаимодействии 4}.

Обучение на основе задач часто предлагается как подходящий подход к этой задаче, поскольку оно ставит в центр обучения значимую деятельность и создаёт возможности для мобилизации языковых ресурсов в ответ на коммуникативные потребности. В отличие от этого, Презентация-Практика-Производство обычно переходит от явной презентации к контролируемой практике, а затем к ограниченному производству, что может поддерживать обучение, ориентированное на форму, но не всегда вызывать условные прагматичные решения, необходимые в^{межкультурной коммуникации 5,6}. В то же время производительность в этой области нельзя понять только через один тип результата. Прагматическая уместность, интерактивная эффективность, межкультурная ориентация, сообщаемая учащимся, тревожность, связанная с речью, а также беглость, точность и сложность речи отражают различные аспекты того, как учащиеся учатся в межкультурных заданиях^{по коммуникации 7,8}.

Несмотря на устойчивый интерес к сравнению учебных последовательностей, предыдущие занятия в классах часто оставались трудными для интерпретации и воспроизведения. Процедуры задач не всегда описываются достаточно подробно; Содержание обучения может различаться в зависимости от состояния; Межкультурные ситуации иногда лишь слабо реализуются; а этапы оценки, обучение оценщиков и обработка данных часто недооцениваются. В результате наблюдаемые различия могут отражать не только последовательность преподавания, но и вариации в дизайне заданий, выполнении учителей, процедурах измерения или аналитических выборах ^9,10. Эти опасения особенно важны в исследованиях целых классов, где распределение на уровне классов часто является единственным практическим вариантом, но также вводит влияние учителей, влияние класса и риски загрязнения, которые бывает сложно распутать, особенно в пилотном проекте на одном участке с очень малым числом^{кластеров 11}.

Вклад настоящего протокола, таким образом, является методологическим. Он сочетает сопоставленные коммуникативные сценарии и целевые выражения в разных условиях, заблокированные учебные и оценочные материалы, слепую оценку на основе рубрик с калибровкой, воспроизводимый извлёк характеристик беглости и сложности на основе речи, а также скриптированный кластерный аналитический процесс в рамках одного аудируемого дизайна^{класса 12,13}. Межкультурная коммуникация реализуется через задание на устное завершение дискурса и снятые ролевые сценарии, требующие от учащихся реагировать на социально обусловленные проблемы взаимодействия, а межкультурная чувствительность и тревога перед речью измеряются через структурированные анкеты с фиксированными правилами оценки. Это сочетание предназначено для отражения взаимодополняющих аспектов эффективности учащихся, а не для того, чтобы опираться на один показатель образовательного^{воздействия 14}.

Поскольку нынешняя реализация ограничена одним учебным заведением, взрослыми студентами университета с уровнем 3 уровня и выше по китайскому языку, а также четырьмя целыми классами, её следует интерпретировать как пилотное применение протокола. В таких условиях нерешённое смешение на уровне учителя и класса не может быть исключено, и любые различия между состояниями следует рассматривать как описательные репрезентативные результаты, а не как надёжные доказательства сравнительной^{эффективности 15}. В рамках этих ограничений протокол разработан для обеспечения прозрачной и воспроизводимой основы для преподавания в классе, оценки, оценки, транскрипции, извлечения речевых признаков и кластерного продольного анализа, которые могут быть доработаны в будущих многоклассовых или многосайтовых исследованиях в международном китайском образовании и смежных условиях изучения второго языка¹⁶.

Протокол

Исследование проводилось в соответствии с нормативными актами Этического комитета Юньнаньского колледжа бизнес-менеджмента под номером одобрения [Одобрение No YCBM-25168]. Перед зачислением каждому потенциальному участнику предоставлялся письменный информационный лист с описанием цели обучения, процедур в классе, аудио-видеозаписи, снятия идентификации, добровольного участия и права на отчисление без академических штрафов. Было получено письменное информированное согласие как на участие в исследовании, так и на съёмку перед проведением любой процедуры, специфичной для исследования¹⁷. Исследовательские инструменты протокола перечислены в Таблице материалов.

1. Определить занятия, результаты и график оценки

1. Определите целевую группу и учебные условия
   1. Определите взрослых, не носителей языка китайского языка, посещающих университетские курсы по международному китайскому с явной целью устного общения.
   2. Используйте целые классы в качестве единицы распределения. Внедрить один 6-недельный модуль межкультурной коммуникации в рамках обычного семестрового расписания, с одной сессией в неделю и 50 минутами обучения за сессию.
   3. В пилотной реализации включите 4 класса по 12 учащихся в каждом классе, чтобы получить запланированную выборку из 48 учащихся.
   4. Используйте одного и того же ведущего преподавателя для обучения обоим условиям с зафиксированными планами уроков и стандартизированным расписанием. Планируйте два учебных подразделения на разные будние дни, сохраняйте фиксированные расписания занятий на протяжении всего периода вмешательства и запрещайте распространение учебных материалов, специфичных для рук, вне назначенного класса, чтобы снизить загрязнение между условиями.
2. Определите первичные, поддерживающие и вторичные результаты
   1. Определите прагматичную производительность как основную область эффективности в классе. Оценивайте её с помощью двух взаимодополняющих инструментов: задания на завершение устного выступления (ODCT) и записанной на видео ролевой игры.
   2. Назначайте 5 подсказок ODCT в каждый момент времени. Оценивайте ODCT по композитной шкале от 0 до 25, используя четыре заранее определённых области: прагматическая уместность (0-10), социокультурное согласование (0-5), полнота дискурса (0-5) и лингвистический контроль (0-5). Суммируем четыре балла по домену, чтобы получить общий балл ODCT. Уведите фиксированные подсказки ODCT в дополнительном файле 1.
   3. Выполняйте по одному снятому ролевому заданию на пару или триаду в каждый момент времени. Оценивайте ролевую игру по отдельной композитной шкале от 0 до 25, используя четыре заранее заданные области: интерактивная адекватность (0-10), отзывчивость и восстановление (0-5), управление реляционной позицией (0-5) и лингвистический контроль (0-5). Вычислите итоговый балл как среднее для двух оценщиков в масках. Если обе суммы разницы более чем на 3 балла, получите третий маскированный рейтинг и рассчитывайте итоговый балл как среднее двух ближайших результатов.
   4. Измеряйте межкультурную чувствительность с помощью межкультурной шкалы чувствительности, проводимой в двуязычной письменной форме на китайско-английском языках, с 24 заданием, оценёнными по 5-балльной шкале Ликерта и общей оценкой от 24 до 120 баллов.
   5. Измеряйте тревогу при говорении с помощью короткой шкалы тревоги в классе иностранных языков, проводящейся в том же двуязычном китайско-английском формате: 8 заданий оцениваются по 5-балльной шкале Лайкерта и общий диапазон от 8 до 40 баллов, где более высокие баллы указывают на повышенную тревогу при говорении.
   6. Определите поддерживающие результаты в произведении речи как индексы беглости и точности и сложности, полученные из записей ролевых игр, включая слова в минуту, беззвучные паузы длительностью 0,25 с и более, процент T-единиц с хотя бы одной морфо-синтаксической ошибкой и среднюю длину предложения.
   7. Для межкультурной шкалы чувствительности общую оценку считайте отсутствующим, если осталось более двух неответных вопросов. В противном случае замените отсутствующие элементы на средний балл респондента по выполненным зачётам по этой шкале. Для краткой шкалы тревоги в классе иностранных языков считайте общий балл отсутствующим, если не было ответа более одного задания. В противном случае замените отсутствующий пункт на средний балл респондента по завершённым заданиям по этой шкале.
   8. Кратко сведите базовый профиль учащегося по учебным условиям, используя возраст, пол, родную языковую группу, уровень теста на владение китайским и предыдущий опыт в китайскоязычных средах. Опубликуйте эти переменные описательно в Таблице 1 , чтобы задокументировать состав когорт, а не утверждать базовую эквивалентность в пилотном проекте из четырёх кластеров.
3. Фиксируйте сроки оценки и картируйте учебный процесс
   1. Запланируйте три срока оценки: базовый уровень (T0, в течение 3 дней до первого интервенционного урока), сразу после теста (T1, в течение 5 дней после финального урока) и последующий (T2, ровно через 28 дней после T1).
   2. В каждом моменте сначала проводите ODCT, затем снятую ролевую игру, а последними — анкеты. Сохраняйте этот порядок одинаковым во всех классах.
   3. Отбор записей, согласие, распределение на уровне класса, завершение, специфичное для результата, исключения, отток и итоговый анализ, проведённый на протяжении всего исследования, чтобы полный поток участников был представлен прозрачно на рисунке 1¹⁸.

2. Блокировать материалы, запускать рандомизацию кластеров и обеспечивать маскировку

1. Заморозка учебных и оценочных материалов
   1. Храните фиксированные учебные и оценочные материалы в запертую папку для изучения перед первым уроком вмешательства.
   2. Установите заблокированную папку для изучения только для чтения перед первым уроком и оставьте её без изменений на протяжении всего сбора данных.
   3. Создавайте новую версию папки только тогда, когда ревизия неизбежна. Записывайте каждое изменение, дату, причину и ответственного человека в журнал изменений в открытом тексте.
   4. Запишите точные версии программного обеспечения, используемые в рабочем процессе, включая Praat v6.4.58, ELAN v7.0, Audacity v3.7.7, R v4.5.2, tidyverse v2.0.0, lme4 v1.1-38, emmeans v2.0.1 и lmerTest v3.2-0.
2. Генерируйте распределение на уровне класса с фиксированным семем
   1. Каждому классу целого присвоение уникальный идентификатор (C1-C4) перед выделением.
   2. Сгенерируйте последовательность распределения в R v4.5.2 с использованием фиксированного случайного посевного 20260301. Используйте простое случайное распределение 1:1 без блокировки или стратификации, так как в пилоте доступны только четыре целых класса.
   3. Пусть координатор исследований сгенерирует последовательность распределения. Убедитесь, что этот координатор не участвует в преподавании, оценке или оценке выявленных материалов. Пусть тот же координатор назначает классы после заморозки базового списка и до начала первого урока интервенции.
   4. Запишите дату и время выделения, засеточное значение, метод рандомизации, R-версию, название генератора последовательностей, имя человека, назначившего классы, и результат sessionInfo().
3. Ограничивайте доступ, минимизируйте загрязнение и маркировки состояния масок
   1. Ограничьте доступ к файлу распределения только координатором исследований и держите файл отдельно от всех неидентифицированных наборов данных.
   2. Используйте одного и того же ведущего инструктора в обоих условиях, но планируйте два подразделения в разные будние дни, распространяйте печатные материалы только во время соответствующей сессии и запрещайте распространение специализированных файлов вне занятий.
   3. Инструктуйте учащихся не делиться учебными материалами, скриншотами или ролевыми подсказками с учениками других классов до завершения сбора данных T2.
   4. Маркировки условий масок от оценщиков и сотрудников, работающих с деидентифицированными данными, используя нейтральные коды состояния в названиях файлов, рейтинговых листах, транскриптах и аналитических наборах данных.
   5. Используйте нейтральные идентификаторы (class_id, student_id, pair_id) в манифестах, рейтинговых листах, транскриптах и аналитических файлах. Храните любой файл связи отдельно в безопасном институциональном хранилище.
      ВНИМАНИЕ: Не позволяйте оценщикам получать доступ к файлу распределения, еженедельным планам уроков или любому исходному имену файла, напрямую раскрывающему условие инструкции.

3. Набирайте целые классы и проводите согласованное обучение

1. Набирайте целые классы и получайте разрешения
   1. Перед тем, как связаться со студентами, получите разрешение у координаторов курса и ведущего преподавателя.
   2. Забирайте нетронутые курсы, которые включают устное общение как официальную цель курса, и сможете пройти полный 6-недельный модуль в течение одного учебного семестра.
2. Проверьте право на участие и получите письменное согласие
   1. Проведите анкету для отбора и согласия с указанием возраста, пола, родного языка, уровня теста на владение китайским языком и времени, проведённого в китайскоязычных регионах за предыдущие 2 года.
   2. Включите взрослых, не носителей языка на уровне 3 и выше, которые не проживали в китайскоязычном регионе более 3 месяцев подряд за предыдущие 2 года.
   3. Исключайте учащихся, которые не дают согласия на съёмку, поскольку запись ролевых игр является обязательным элементом протокола.
3. Сборка и документирование базовых характеристик
   1. Назначьте каждому участнику, дающему согласие, student_id и храните файл связки отдельно от неидентифицированных наборов данных.
   2. Введите одну строку для каждого учащегося в базовый файл с полями: состояние, class_id, возраст, пол, родная языковая группа, уровень теста на владение китайским и предыдущий опыт в китайскоязычных условиях.
   3. Записывайте характеристики исходной линии описательно по условиям обучения для дальнейшей отчётности в Таблице 1. Не воспринимайте их как доказательства того, что классовое смешение было устранено.
4. Подготовьте согласованные учебные программы по разным условиям
   1. Создавайте параллельные еженедельные учебные программы для обучения на основе задач и презентации-практики-производства, используя одни и те же коммуникативные сценарии, коммуникативные функции и целевые выражения.
   2. Используйте одни и те же шесть еженедельных тем в обоих направлениях: разногласия в классе, консультации с учителями, сотрудничество с сверстниками, взаимодействие с принимающей семьёй, коммуникация на стажировках и взаимодействие с общественной службой.
   3. Составьте версии еженедельного расписания уроков, картирования целевых выражений и ролевых сценариев для читателей в дополнительном файле 1.
5. Проводите уроки обучения на основе задач с использованием фиксированного цикла задач
   1. Представьте сценарий и коммуникативную цель на китайском языке в течение 5 минут.
   2. Проведите этап планирования в небольших группах по 5 минут.
   3. Выполняйте основную фазу задания парами или триадами по 18 минут, с минимальным вмешательством учителя, ограниченным уточнением инструкций.
   4. Проведите фазу размышлений и обратной связи в течение 20 минут, сосредоточившись на выборе языка, стратегии взаимодействия, прагматичной уместности и исправлении.
   5. Используйте одинаковый реализованный тайминг во всех шести уроках с задачами, если только отклонение не неизбежно. Записывайте любые отклонения в журнал верности.
6. Проводите уроки по презентации, практике и производству с соответствующим содержанием и таймингом
   1. Покажите целевые выражения и шаблоны предложений в течение 16 минут, используя примеры диалогов или проецируемые материалы.
   2. Проводите контролируемую практику в течение 16 минут, сосредотачиваясь на точном создании форм мишени.
   3. Проводите ограниченное производство в течение 16 минут, используя те же еженедельные сценарии и целевые выражения.
   4. Сопоставьте общую продолжительность урока, охват тем и содержание сценариев с соответствующими заданиями. Запишите все отклонения в журнал Fidelity.
7. Записывайте качество преподавания после каждого урока
   1. После каждого урока фиксируйте дату, класс, метку сценария, реализованную продолжительность каждой фазы и любые отклонения от запланированной структуры, включая любые незапланированные изменения сценария, целевого выражения или времени.
   2. Храните логи точности в таблице под записями обработанного исследования.
   3. Если происходит значительное отклонение в точности, сохраняйте сессию в исследовательском файле, отмечайте её в журнале верности и опишите отклонение в итоговом отчёте, вместо того чтобы удалять сессию posthoc.
      ПРИМЕЧАНИЕ: Типичные отклонения в точности включают сокращение времени выполнения задач из-за перерывов в классе, временного перестановки оборудования или пропуска одного запланированного шага обратной связи. Фиксируйте и интерпретируйте эти события, а не молча их удаляйте.

4. Проведение оценок, запись медиа и оценка результатов

1. Проводите ODCT в каждый момент времени
   1. Present ODCT задаёт заявки по одному на бумаге с фиксированным набором подсказок.
   2. Позволяйте планировать 30 секунд на каждый запрос, записывайте один устный ответ на каждое задание и сохраняйте постоянную установку времени планирования между T0, T1 и T2.
2. Администрирование ролевой игры и запись взаимодействий
   1. Предоставьте письменные карточки сценариев и ролей и выделите 2 минуты на планирование.
   2. Записывайте по одному 8-минутному взаимодействию на пару или триаду и держите целевой длительность взаимодействия постоянной между временными точками.
   3. Определите каждую ролевую игру как межкультурный сценарий коммуникации, связанный с социально обусловленной проблемой выбора, такой как разногласия, смягчение запросов, управление лицом, уточнение или исправление при различных ожиданиях.
3. Стандартизировать запись и создать медиа-манифест
   1. Используйте одну и ту же цифровую видеокамеру и один и тот же внешний микрофон на протяжении всего исследования.
   2. Записывайте все сессии с частотой 1920 × разрешении 1080, 30 кадров в секунду и дискретизации звука на 48 кГц. Оставьте настройку входа-усиления без изменений после первого дня записи.
   3. Разместите внешний микрофон в центре стола пары или триады, примерно в 60 см от динамиков, и задокументируйте установку в чек-листе для записи учебы.
   4. Сохраняйте каждый файл под стандартизированным кодированием имён class_id, student_id или pair_id, таймпойнт и тип задачи.
   5. Храните все записи в папке raw-media. Создайте манифест с указанием имён файлов, размеров файлов, технических заметок и контрольных сумм, а также вычислите контрольные суммы SHA-256 для каждого сырого медиафайла.
      ПРИМЕЧАНИЕ: Убедившись, что все файлы читаемы и контрольные суммы совпадают с манифесом, установите папку raw-media только для чтения и проведите всю последующей обработку копий, хранящихся в папке processing-study.
4. Оценивающие тренировки и оценивайте прагматичную работу при ослеплении
   1. Наберите двух основных оценщиков и одного резервного оценщика, все с опытом преподавания китайского языка или языковой оценки, и убедитесь, что ни один из них не имеет доступа к распределению классов.
   2. Предоставьте калибровочный набор, включающий 12 ответов ODCT и 6 записей ролевых игр, сбалансированных между временными точками и кодами условий, и выберите этот набор до начала формального подсчёта оценок. Не изменяйте калибровочный набор после проверки шаблонов результатов.
   3. Вычислить согласование между оценщиками с использованием коэффициента корреляции внутриклассов ICC(2,k) в R v4.5.2. Повторяйте калибровку до достижения ICC как минимум 0,75, и записывайте тип ICC, размер калибровочного набора значения ICC и решения о остановке в файле журнала калибровки, хранящемся под записями обработанного^{исследования 19}.
   4. Во время формального оценивания назначайте анонимные файлы оценщикам в случайном порядке и записывайте баллы в таблицу с полями для class_id, student_id, таймпоинта, типа задачи, rater_id и балла.
   5. Если заранее заданный порог надёжности не достигнут после двух этапов перекалибровки, приостановите формальное подсчёт, пересмотрите калибровочные материалы, повторите обучение и прозрачно задокументируйте событие в журнале калибровки.
      ВНИМАНИЕ: Не начинайте формальное оценивание, пока порог ICC не будет достигнут и не задокументирован.
5. Транскрибировать записи ролевых игр и вычислять индексы беглости и сложности
   1. Транскрибировать все анализируемые ролевые записи с обеих рук на T0, T1 и T2. Не проводите пост-хок отбор проб после проверки результатов.
   2. Экспортируйте аннотации ELAN в виде текста с разделением UTF-8 и храните файлы в папке расшифровок обработанного исследования.
   3. Применяйте одинаковые транскрипционные конвенции и правила сегментации для всех файлов. Составьте версии рубрик, ориентированных на читателя, правил оценки анкет, рекомендаций по транскрипции и таксономии ошибок в дополнительном файле 2.
   4. Разделите каждую расшифровку на T-единицы и предложения. Опишите количество сегментов записи, метки для спикеров и любые исключения в расшифровке.
   5. Проверьте синхронизацию аудио и вычислите меры на основе паузы с помощью Praat v6.4.58, при этом порог беззвучной паузы фиксирован на уровне 0,25 с.
   6. Вычисляйте слова в минуту по фиксированному правилу, при котором повторяющиеся лексические элементы считаются произведёнными словами, если только они не являются немедленными самокоррекциями, заброшенными до завершения. Определите время выступления как общую продолжительность озвучиваемого результата учащихся, исключая инструкции экзаменатора и незадание подготовки разговоров.
   7. Вычислите беззвучные паузы на 0,25 с или более в минуту, процент T-единиц, содержащих хотя бы одну морфо-синтаксическую ошибку, и среднюю длину предложения как общее количество слов, делённое на общее число предложений.
   8. Записывать все характеристики беглости и сложности на уровне говорящего в один длинный файл с одной строкой на каждого учащегося за каждую временную точку.
   9. Если запись непригодна из-за технической неисправности или невосстановимого перекрытия динамиков, запишите причину, сохраняйте файловую запись в манифесте, кодуйте производные признаки как отсутствующие и переносите исключение в запись участников потока для рисунка 1 и итогового нарративного описания результатов.
6. Проводите анкеты и собирайте набор данных результатов
   1. Применяйте Межкультурную шкалу чувствительности и краткую шкалу тревоги в классе иностранных языков после выполнения устных заданий в каждый момент времени.
   2. Проверяйте анкеты на наличие недостающих вещей до того, как учащиеся выходят из класса, когда это возможно.
   3. Если анкеты остаются неполными, применяйте заранее указанное правило отсутствующего элемента, описанное в разделе 1.2.7, и задокументируйте полученную отсутность в журнале анализа.
   4. Объедините баллы ODCT, результаты ролевых игр, файлы с характеристиками беглости и сложности владения языком, а также баллы анкет в один длинный набор данных с одной строкой на каждого учащегося в каждую точку времени.

5. Модели подгонки и результаты анализа документов

1. Проверьте идентификаторы и подготовьте готовый к анализу набор данных
   1. Проверьте внутреннюю согласованность class_id, student_id, pair_id и timepoint во всех источниках с помощью скриптовых проверок.
   2. Исключения документов, отсутствие документов, непригодные для использования записи, исключения из расшифровок и решения по оценке анкет в журнале.
   3. Сохраните готовый к анализу набор данных в виде CSV-файла и добавьте README со списком скриптов, параметров и версий программного обеспечения, необходимых для его восстановления.
2. Подгонка описательных моделей смешанных эффектов для кластерных продольных результатов
   1. Поскольку в пилотном эпизоде рандомизированы только 4 целых класса, анализ рассматривается как ориентированный на осуществимость и описательный, а не подтверждающий.
   2. Подбирайте одну когерентную модель смешанных эффектов для каждого исхода с использованием R v4.5.2, lme4 v1.1-38 и lmerTest v3.2-0, с фиксированными эффектами для группы, времени и группы × времени и случайными пересечениями для class_id и^{student_id 20}.
   3. Используйте одну и ту же модель для всех исходов и рассматривайте измерение T0 как одно из повторяющихся наблюдений в продольной модели, а не как отдельную пост-хок модель с учётом базовой линии для выбранных результатов.
   4. Отчёт о предельных средних значениях, средних различиях, 95% доверительных интервалах и точных p-значениях только в описании на основе модели. Интерпретировать тестирование номинальной значимости осторожно, поскольку количество кластеров очень мало.
   5. Примените корректировку коэффициента ложного обнаружения только к семейству вторичных результатов и запишите точное имя функции и настройки, используемые в скрипте^{анализа 21}.
3. Подготовьте результаты для последующего отчёта
   1. Сохранить базовую структуру набора данных, метки переменных и знаменатели в виде, позволяющем чётко отражать характеристики обучающегося в Таблице 1.
   2. Сохранить набор результатов по повторяющимся измерениям в форме, позволяющей суммировать прагматичные результаты по T0, T1 и T2 в таблице 2 , а результаты поддерживающей речи и анкет — по тем же трём случаям в таблице 3.
   3. Сохраняйте скрипты построения графиков и выходные метки в виде, позволяющем визуализировать прагматические траектории на рисунке 2 , а многопанельные профили поддерживающих исходов — на рисунке 3, с согласованным определением масштабов и определениями неопределённости.
4. Запись версий пакетов и регенерация выходов
   1. В начале анализа запишите sessionInfo() и установите информацию о пакетах в файлы отслеживания версий.
   2. Загрузите tidyverse v2.0.0 для обработки данных и emmeans v2.0.1 для оценочных предельных средних и контрастов, а также запишите версии пакетов, используемые для окончательного анализа.
   3. Перегенерируйте все отчётные выходы напрямую из готового к анализу данных с помощью сохранённых скриптов. Составьте документацию по рабочим процессам, ориентированную на читателя, кодовую книгу и инвентарь скриптов в дополнительном файле 3.

Результаты

Учебный поток и когорта

Набор, скрининг, письменное согласие, распределение классов, выполнение по результатам и итоговый анализ, установленный на исходном уровне (T0), непосредственно после тестирования (T1) и последующем наблюдении (T2) изложены на рисунке 1. В пилотной реализации на уровне класса были выделены 4 целых класса по 48 учащихся, 2 класса — обучению на основе задач (TBL, n = 24), а 2 — для Презентаци...

Обсуждение

В этой статье представлен пилотный протокол для класса для сравнения обучения на основе задач и Презентация-Практика-Производство в университетских классах по международному китайскому языку. Её основной вклад — методологический. Вместо того чтобы предлагать ещё одно широкое сравнение между двумя учебными последовательностями, протокол определяет, как такое сравнение может быть реализовано в условиях класса, при этом контролируя основные источники процедурных вариаций. Еженедельные темы ...

Материалы

Список материалов, использованных в этой статье

Имя	Компания	Каталожный номер	Комментарии
Папка скриптов анализа	Это исследование	Версия 1.0	Фиксированные скрипты для рандомизации классов, обнаружения пауз, построения набора данных, подгонки модели и построения графиков.
Программное обеспечение для редактирования аудио	Audacity Team	Версия 3.7.7	Используется для проверки аудио и обрезки при необходимости.
Наушники для мониторинга аудио	Audio-Technica	ATH-M20x	Используется для мониторинга качества воспроизведения, искажения и фонового шума при проверках записи.
Чек-лист для записи в классе	Это исследование	Версия 1.0	Чек-лист на уровне сессии для расположения камеры, расположения микрофона, уровня звука, емкости хранилища, шума в комнате и распределения карточек ролей.
Словарь данных / кодовая книга	Это исследование	Версия 1.0	Определяет ID классов, ID обучающихся, временные моменты, целевые переменные, правила отсутствия и названия производных признаков.
Внешний микрофон	Sony	ECM-LV1	Используется в качестве фиксированного внешнего микрофона для записи заданий в классе.
Шаблон журнала лояльности	Это исследование	Версия 1.0	Используется для записи даты, класса, метки сценария, реализованной продолжительности каждой фазы и отклонений от запланированной структуры.
Рубрика оценки сценариев ролевой игры	Это исследование	Версия 1.0	Фиксированная рубрика 0–25 для оценки ролевой игры, включая двойное скрытое оценивание и правила разбирательства.
Форма шкалы межкультурной чувствительности	Это исследование	Версия 1.0	Двуязычный англо-китайский опросник, 24 вопроса, проводится на T0, T1 и T2.
Приглашения для задания на завершение устного дискурса	Это исследование	Версия 1.0	Фиксированный набор из 5 приглашений, используемый на всех трех этапах оценки.
Программное обеспечение для фонетического анализа	Praat	Версия 6.4.58	Используется для обнаружения пауз с фиксированным порогом тишины в 0,25 с.
Планы уроков презентации-практики-производства	Это исследование	Версия 1.0	Фиксированные 6-недельные планы уроков PPP, соответствующие темам, целевым выражениям и коммуникативным функциям условия TBL.
Хранение оригинальных медиа	SanDisk	SDSSDE60-1T00-G25	Внешний SSD, используемый для зашифрованного хранения оригинальных медиа и архивирования с проверкой контрольной суммы.
Сценарии ролевых игр и карточки ролей	Это исследование	Версия 1.0	Фиксированные снятые материалы ролевых игр, используемые для оценки на T0, T1 и T2.
Программное обеспечение для статистических вычислений	R Project for Statistical Computing	Версия 4.5.2	Используется для рандомизации классов, кластерных лонгитюдных моделей и создания выводов.
Планы уроков задачного обучения	Это исследование	Версия 1.0	Фиксированные 6-недельные планы уроков TBL с использованием тех же еженедельных тем и целевых выражений, что и условие PPP.
Программное обеспечение для транскрибирования и аннотации	ELAN	Версия 7.0	Используется для транскрибирования ролевых игр и аннотации с привязкой к времени.
Руководство по транскрибированию	Это исследование	Версия 1.0	Фиксированные соглашения по транскрибированию, маркировке ораторов, сегментации и обработке исключений.
Тренога / подставка для камеры	Manfrotto	MKELES5BK-BH	Используется для стабильного размещения камеры в классе.
Видеокамера	Sony	FDR-AX43	Фиксированная видеокамера класса, используемая на всех сессиях.
Рабочий компьютер	Dell	DC15250	Используется для транскрибирования, извлечения признаков и статистического анализа.
Краткая форма шкалы тревожности иностранных языков в классе	Это исследование	Версия 1.0	Двуязычный англо-китайский опросник, 8 вопросов, проводится на T0, T1 и T2.