Разработка системы оценки результатов тестирования когнитивной функции при введении эллипсисов в текстах планиметрических задач

Работа посвящена изучению когнитивной функции, связанной с генерацией эллиптических предложений в русском языке. Тестирование этой функции проводилось с помощью системы с открытым исходным кодом. Материал для тестирования охватывает только глагольные и именные эллипсисы, теоретически полностью восстановимые на основе контекста. В качестве материала тестирования были выбраны тексты планиметрических задач. При анализе результатов тестирования выявлены следующие факты: влияние знаний респондента в предметной области (планиметрии) на понимание предложений и на понимание синтаксических правил конструирования эллипсисов; тенденция к самообучению респондентов; тенденция респондентов удалять из предложений любые фрагменты, которые они считают избыточными. Таким образом, когнитивная функция формирования эллипсисов имеет интегративный характер и включает лингвистическую составляющую (синтаксис), знание предметной области и мыслительные операции формирования предложений. В связи с выявленной сложностью тестируемой функции усложняется и задача оценки результатов тестирования. Статья посвящена рассмотрению различных моделей оценивания работы респондентов как на интегральной основе, так и по отношению к каждой выявленной составляющей когнитивной функции.

1. E. Paducheva, About semantics of syntax. URSS, 2019, (in Russian).

2. R. Jackendoff, Semantics and Cognition. MIT Press, 1983.

3. “Information is in the mind of the beholder,” Linguistics and Philosophy, vol. 8, p. 23–33, 1985.

4. “Grammar as evidence for conceptual structure,” Linguistic Theory and Psychological Reality, pp. 201 228, 1978.

5. A. Putintseva, L. Kovrigina, and I. Shilin, “Automatic classification of elliptical constructions in Russian spontaneous speech,” in R. Piotrowski’s Readings in Language Engineering and Applied Linguistics, vol. 2233, 2017, pp. 120–133, (in Russian). Available: https://ceur-ws.org/Vol-2233/Paper 16.pdf, accessed 10.10.2024.

6. X. A. Naidenova, “Cognitive elements in forming and understanding sentences,” in Proceedings of the International Workshop on Digital Technologies for Teaching and Learning (DTTL-2021), Kazan, Russia, March 22-28, 2021, ser. CEUR Workshop Proceedings, O. A. Nevzorova, N. V. Loukachevitch, and E. K. Lipachev, Eds., vol. 2910. CEUR-WS.org, 2021, pp. 65–73. Available: http://sunsite.informatik.rwth-aachen.de/Publications/CEUR-WS/Vol-2910/short6.pdf, accessed 12.10.2024.

7. The national corpus of the Russian language. Available: https://ruscorpora.ru/, accessed 15.11.2024.

8. Taiga corpus. Available: https://tatianashavrina.github.io/taiga site/, accessed 15.11.2024.

9. X. Naidenova, E. Bulykina, V. Parkhomenko, A. Schukin, and T. Martirova, “Developing computer system for testing cognitive respondents’ abilities based on elliptical sentences”, “Electronic Libraries”, Scientific Publications of KFU – Kazan (Volga Region) Federal University, vol. 26, no. 3, pp. 340–364, 2023, (in Russian). Available: https://rdl-journal.ru/article/view/784/856, accessed 12.10.2024.

10. X. Naidenova, V. Parkhomenko, E. Bulykina, A. Schukin, Y. Lizunov, and T. Martirova, “A system of software tools for investigation of the cognitive function of elliptical sentence generation,” in 2023 Ivannikov ISPRAS OPEN Conference (ISPRAS), 2023, pp. 112–117.

11. V. Parkhomenko, X. Naidenova, and A. Martirova, T.and Schukin, “Ex- perimental study of cognitive function of generating elliptical sentences in planimetric tasks”, “Electronic Libraries”, Scientific Publications of KFU – Kazan (Volga Region) Federal University, vol. 27, no. 3, pp. 316–335, 2024, (in Russian).

12. A. Gvozdev, Modern Russian literary language. Part II. Moscow: Uchpedgis, 1958, (in Russian).

13. G. Zhao, “A cognitive approach to ellipsis,” Theory and Practice in Language Studies, vol. 6, p. 372, 02 2016.

14. P. Culicover and R. Jackendoff, Simpler Syntax, ser. Oxford linguistics. OUP Oxford, 2005.

15. S. Nesterov and M. Smetanina, “Assessment of the quality of test tasks by means of the moodle distance learning environment”, Computer Science, Telecommunications and Management, no. 5(181), pp. 87–92, 2013, (in Russian).

16. I. Protasova, A. Tolstobrov, and I. Korzhik, “Methodology for analyzing and improving the quality of tests in the moodle e-learning system,”, Vestnik of the Voronezh State University. Series: System Analysis and Information Technology, no. 3, pp. 61–72, 2014, (in Russian).