Designing Web-Based “Measurement and Evaluation” Learning Modules for Teachers' Needs

Abstract

The challenging aspects of scheduling face-to-face in-service training programs are a barrier to make needed training widespread and accessible. Due to the limitations, the necessity has arisen to design interactive and updatable digital learning materials for teachers that have been prepared by experts and that can be accessed whenever desired. This design and development research presents a design of digital learning materials that has been drawn up on the basis of scientific processes and in the knowledge of teachers' inadequacies as regards the topic of measurement and evaluation. The learning materials produced in this research, Web-based Measurement and Evaluation Learning Modules (W-MELM), are based on the critical aspects of item writing and test development and the needs of teachers based on the literature. The ADDIE model was taken as the basis of W-MELM in the design process. Five experts were consulted in leading to the revision of the modules to make them ready for operation. The evaluation stage consisted of using a Likert-type data collection tool of 18 items to collect teachers' (n=50) opinions regarding W-MELM. As a result of analysis, the teacher's views acknowledged that W-MELM that had been designed met their needs and was an effective learning tool.

Ağırlıklı puanlama ile ilgili geçmiş çalışmalar incelendiğinde, genellikle ağırlıklandırılmamış puanlarla olan korelasyonların incelendiği, buna karşın ağırlıklandırmanın öğrencilerin geçme – kalma oranlarına olan etkisinin araştırılmadığı görülmüştür. Bu çalışmada öğretmen yapımı çoktan seçmeli 34 maddelik bir başarı testinin 431 kişilik bir gruba öğrenme yönetim sistemi aracılığıyla uygulanmıştır. Daha sonra ağırlıklandırılmamış (1 – 0) ve madde güçlüğüne göre ağırlıklandırılmış (Qj – 0) puanlara göre madde ve test istatistiklerinin, öğrencilerin dersten geçme ve kalma durumlarının karşılaştırılması amaçlanmıştır. Aynı zamanda ağırlıklandırılmış puanların 100'lük puan sistemine çevrilmesine yönelik bir öneri de sunulmuştur. Veri analizi sonucunda 1 – 0 ve Qj – 0 yöntemlerine göre elde edilen McDonald's Omega iç tutarlık katsayıları sırasıyla .725 ve .721 olarak elde edilmiştir. İki yönteme göre elde edilen öğrenci puanları arasında ise Pearson momentler çarpım korelasyon katsayısı .916 ve Spearman sıra farkları korelasyon katsayısı .926 olarak bulunmuştur. Aynı zamanda sırasıyla 50 ve 60 puana göre ölçüt dayanaklı bir değerlendirme yapıldığında, her iki yönteme göre dersten başarılı ve başarısız sayılan öğrenci sayıları belirlenmiştir. Buna göre Qj – 0 puanlama yöntemine göre daha çok öğrencinin dersten başarısız sayılacağı bulunmuş, ancak buna karşın bu yöntemin bireyler arasındaki farklılıkları daha iyi ortaya koyabileceği anlaşılmıştır.