<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article
PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.4 20190208//EN"
       "JATS-journalpublishing1.dtd">
<article xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" article-type="research-article" dtd-version="1.4" xml:lang="en">
 <front>
  <journal-meta>
   <journal-id journal-id-type="publisher-id">Standards and Monitoring in Education</journal-id>
   <journal-title-group>
    <journal-title xml:lang="en">Standards and Monitoring in Education</journal-title>
    <trans-title-group xml:lang="ru">
     <trans-title>Стандарты и мониторинг в образовании</trans-title>
    </trans-title-group>
   </journal-title-group>
   <issn publication-format="print">1998-1740</issn>
  </journal-meta>
  <article-meta>
   <article-id pub-id-type="publisher-id">43966</article-id>
   <article-id pub-id-type="doi">10.12737/1998-1740-2021-9-3-39-48</article-id>
   <article-categories>
    <subj-group subj-group-type="toc-heading" xml:lang="ru">
     <subject>Специалисту на заметку</subject>
    </subj-group>
    <subj-group subj-group-type="toc-heading" xml:lang="en">
     <subject>Сhalk up for specialist</subject>
    </subj-group>
    <subj-group>
     <subject>Специалисту на заметку</subject>
    </subj-group>
   </article-categories>
   <title-group>
    <article-title xml:lang="en">Evolution of the Unified State Exam in History: Poems and Prose of Teachers' Practices</article-title>
    <trans-title-group xml:lang="ru">
     <trans-title>Эволюция ЕГЭ по истории: стихи и проза учительских практик</trans-title>
    </trans-title-group>
   </title-group>
   <contrib-group content-type="authors">
    <contrib contrib-type="author">
     <name-alternatives>
      <name xml:lang="ru">
       <surname>Федоров</surname>
       <given-names>О. Д.</given-names>
      </name>
      <name xml:lang="en">
       <surname>Fedorov</surname>
       <given-names>O. D.</given-names>
      </name>
     </name-alternatives>
     <bio xml:lang="ru">
      <p>кандидат исторических наук;</p>
     </bio>
     <bio xml:lang="en">
      <p>candidate of historical sciences;</p>
     </bio>
     <xref ref-type="aff" rid="aff-1"/>
    </contrib>
    <contrib contrib-type="author">
     <name-alternatives>
      <name xml:lang="ru">
       <surname>Веринчук</surname>
       <given-names>К. Д.</given-names>
      </name>
      <name xml:lang="en">
       <surname>Verinchuk</surname>
       <given-names>K. D.</given-names>
      </name>
     </name-alternatives>
     <xref ref-type="aff" rid="aff-2"/>
    </contrib>
   </contrib-group>
   <aff-alternatives id="aff-1">
    <aff>
     <institution xml:lang="ru">Сибирский институт управления ФГБОУ ВО «Российская академия народного хозяйства и государственной службы при Президенте Российской Федерации»</institution>
     <city>Новосибирск</city>
     <country>Россия</country>
    </aff>
    <aff>
     <institution xml:lang="en">Siberian Institute of Management, the Russian Presidential Academy of National Economy and Public Administration</institution>
     <city>Новосибирск</city>
     <country>Russian Federation</country>
    </aff>
   </aff-alternatives>
   <aff-alternatives id="aff-2">
    <aff>
     <institution xml:lang="ru">Европейская гимназия</institution>
     <city>Москва</city>
     <country>Россия</country>
    </aff>
    <aff>
     <institution xml:lang="en">European Gymnasium</institution>
     <city>Москва</city>
     <country>Russian Federation</country>
    </aff>
   </aff-alternatives>
   <volume>9</volume>
   <issue>3</issue>
   <fpage>39</fpage>
   <lpage>48</lpage>
   <self-uri xlink:href="https://naukaru.ru/en/nauka/article/43966/view">https://naukaru.ru/en/nauka/article/43966/view</self-uri>
   <abstract xml:lang="ru">
    <p>В данной статье рассмотрено влияние заданий со свободно конструируемым ответом ЕГЭ по истории на валидность тестовых результатов. ЕГЭ является одним из основных тестов с высокими ставками для российских учащихся. Несмотря на то, что ЕГЭ рассматривается одновременно как выпускной и вступительный экзамен, валидность этого важного теста масштабно не исследовалась. Ярко выраженная эволюция варианта контрольно-измерительного материала (КИМ) экзамена к большему включению заданий с открытым ответом вызывает вопрос о связи между этими изменениями и валидностью тестовых результатов. В рамках данного исследования проведены глубинные полуструктурированные интервью с 36 экспертами ЕГЭ по истории, которые позволили выделить три основные угрозы валидности: критерии оценки заданий 24 и 25, содержание самих заданий, субъективная работа экспертов. Собранные материалы интервью подвергнуты содержательному анализу, результаты которого представлены вместе с рекомендациями по дальнейшему улучшению процесса создания и проверки заданий.</p>
   </abstract>
   <trans-abstract xml:lang="en">
    <p>This paper investigates the effect of сonstructed-response items in the Unified State Exam (ESE) in History on exam’s validity and the threats to validity. The Unified State Exam is the primary high-stakes examination for Russian students. Despite playing a vital role as an achievement and an admission test, this exam’s validity has not been looked into. The evolution of this exam is distinctly marked by a growing change in the number and weight of constructed-response items, which might be affecting the validity of test results in many ways. The research was focused on interviews with 36 history experts. Thematic analysis of transcripts helped to identify three main threats to validity: faulty criteria, task content and expert bias. The paper presents these results along with recommendations on improving the test.</p>
   </trans-abstract>
   <kwd-group xml:lang="ru">
    <kwd>валидность</kwd>
    <kwd>ЕГЭ по истории</kwd>
    <kwd>тесты</kwd>
    <kwd>задания со свободно конструируемым ответом</kwd>
   </kwd-group>
   <kwd-group xml:lang="en">
    <kwd>validity</kwd>
    <kwd>ESE in history</kwd>
    <kwd>tests</kwd>
    <kwd>tasks with a freely constructed answer</kwd>
   </kwd-group>
  </article-meta>
 </front>
 <body>
  <p></p>
 </body>
 <back>
  <ref-list>
   <ref id="B1">
    <label>1.</label>
    <citation-alternatives>
     <mixed-citation xml:lang="ru">Артасов И.А. Методические рекомендации для учителей, подготовленные на основе анализа типичных ошибок участников ЕГЭ 2020 года по истории [Электронный ресурс]. URL : http: // doc.fipi.ru/ege/analiticheskie-i-metodicheskie-materialy/2020/Istoriya_mr_2020.pdf.</mixed-citation>
     <mixed-citation xml:lang="en">Artasov I.A. Metodicheskie rekomendatsii dlya uchiteley, podgotovlennye na osnove analiza tipichnykh oshibok uchastnikov EGE 2020 goda po istorii [Methodological recommendations for teachers, prepared on the basis of the analysis of typical mistakes of participants in the exam in 2020 on history]. Available at: http: // doc.fipi.ru/ege/analiticheskie-i-metodicheskie-materialy/2020/Istoriya_mr_2020.pdf.</mixed-citation>
    </citation-alternatives>
   </ref>
   <ref id="B2">
    <label>2.</label>
    <citation-alternatives>
     <mixed-citation xml:lang="ru">Артасов И.А., Мельникова О.Н. Эволюция экзаменационных моделей КИМ ЕГЭ по истории // Педагогические измерения.  2018.  № 2.</mixed-citation>
     <mixed-citation xml:lang="en">Artasov I.A., Mel'nikova O.N. Evolyutsiya ekzamenatsionnykh modeley KIM EGE po istorii [Evolution of KIM exam models of the USE in history]. Pedagogicheskie izmereniya [Pedagogical measurements].  2018, I. 2.</mixed-citation>
    </citation-alternatives>
   </ref>
   <ref id="B3">
    <label>3.</label>
    <citation-alternatives>
     <mixed-citation xml:lang="ru">Балашов А.И., Баркова Т.Н., Бороденя В.А. и др. Вторая мировая война: защита исторической памяти и противодействие ее фальсификации : Монография / Под ред. А.И. Балашова. - СПб., 2020.</mixed-citation>
     <mixed-citation xml:lang="en">Balashov A.I., Barkova T.N., Borodenya V.A. Vtoraya mirovaya voyna: zashchita istoricheskoy pamyati i protivodeystvie ee fal'sifikatsii [World War II: Protection of Historical Memory and Counteraction to Its Falsification]. St. Petersburg, 2020.</mixed-citation>
    </citation-alternatives>
   </ref>
  </ref-list>
 </back>
</article>
