Abstract
数字化数学评估中的数字工具旨在帮助学生更有效地解决数学问题。然而，不当使用这些工具可能会导致负面结果。利用来自 NAEP 的过程数据，我们推广了差异试题功能（DIF）方法，并对工具使用的有效性进行了系统调查。我们提出了三个衡量指标来评估数字工具对于试题的有效性：数字工具的受欢迎程度（使用它的学生比例）、数字工具对题目分数的影响（匹配成绩分数和使用其他工具时得分的增加/减少）以及数字工具对题目回答时间的影响（匹配成绩分数和使用其他工具时节省/损失的时间）。使用来自 NAEP 数字平台上数万名学生的数据，我们发现计算器似乎是最有用的工具，而荧光笔在比对的十几种数字工具中使用最少。机器学习算法的进一步应用揭示了各个题目的工具使用集群与学生的数学能力和时间管理技能有关联。我们对数字工具的系统评估有助于形成通用方法、可靠的数据证据和宝贵的见解，不仅为NAEP平台，也为广泛的学习和评估平台的数字工具设计提供参考。
Recommended Citation
Guo, Hongwen; Johnson, Matthew S.; Saldivia, Luis; and Worthington, Michelle
(2025)
"探求更好的数字工具设计来帮助参加数学评估的学生,"
Chinese/English Journal of Educational Measurement and Evaluation | 教育测量与评估双语期刊: Vol. 6:
Iss.
1, Article 6.
Available at:
https://www.ce-jeme.org/journal/vol6/iss1/6
COinS
