Еще раз о качестве тестов
Недавно в обсуждении к одному из постов в этом блоге (Бизнес хочет больше тестов) возникал вопрос о важности тестов в LMS и что без них LMS вообще не нужна (с чем я наверное соглашусь). Никто не сомневается, что тесты важны, но задумываемся ли мы об их качестве.
Один добрый клиент, разрешил мне построить отчет с распределением баллов по различным тестам в его боевой системе. То, что получилось можно посмотреть на картинках ниже (по оси X - баллы, по оси Y - количество тестируемых, набравших столько баллов). Что вы скажете о качестве этих тестов? Некоторые вопросы (например, местами отсутствие нормального распределения) возникают даже при элементарном анализе. А что если посмотреть внутрь и посчитать пару корреляций?
Кто-нибудь анализирует результаты своих тестов на предмет надежности и валидности?
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEglS9XNoHxb6bwBIdSdYsk6vGkDjOo_Q_GCVNlkGNPy6lSIxeKULqCRGSPDv-4nOJisg7UdNWvnQMEMXgvNYBLlfeN79sZNOrNBedL5lLlozGNHGlPobjeDP1avoWa4oRs-M3x7/s400/chart2.jpg)
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEhhoS03gAvGLfq77osMYc57VqPwFZ0NoeY0IuTiQyXQ9vq7hynUK_xBppLznTCUienpH87ASpzz7NOzHhSIBirNu9qRsHyxGmF0aFmkev2JfsNpEtvPVQrF5jsWzF2_2KaLTaob/s400/chart1.jpg)
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEiCMVWMqVcVeuQxKSc16Is7xXOrrjwaRlSQ6q1Omp-Otxfc2IvRlt0XxsmZ6xQXyyORGwD_noiQY5U34JHDHEV1adQq8XAm2gWmLQZvuyh8ELEkAG80c6inK1kmt04X34KqWjw8/s400/chart7.jpg)
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEjvZvkkmP39TDb8AHsbxy6WP5wDDhFF8cJqqXDf5XiZ_f6BsqgRbnD27uLo9kF7eLx83hGZXD6qXYzeGto6zA7jCwF7XzRF7deUDY10g2wD5V7UZSfzLXnAweELALfWa1GKK5sT/s400/chart6.jpg)
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEgpVzvk2XBkwKbviutZPHp8RrXwjDSa05G2Lj8jCbWYsi7o_U4BBdTdlOT1GBSkmDqpISjBK9OEruZDzgbsTairL3LqeoeqZZboP2jCGqWgOoLjsshsoDuZK44ZPPkmCxk56X-Z/s400/chart5.jpg)
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEhzYWiJJNq6HvMgVbplHGhwSXLTy0Ay_yGSne2gnOQ_2AFVTkWT-PnFypSzOxd5GSffEfbk0TMdtSMJ9IIgBvxreDFStXlh5Ju7VunW0rv4bsXi66n4e98Y1Mu4KWxIxOHsOkeR/s400/chart4.jpg)
Один добрый клиент, разрешил мне построить отчет с распределением баллов по различным тестам в его боевой системе. То, что получилось можно посмотреть на картинках ниже (по оси X - баллы, по оси Y - количество тестируемых, набравших столько баллов). Что вы скажете о качестве этих тестов? Некоторые вопросы (например, местами отсутствие нормального распределения) возникают даже при элементарном анализе. А что если посмотреть внутрь и посчитать пару корреляций?
Кто-нибудь анализирует результаты своих тестов на предмет надежности и валидности?
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEglS9XNoHxb6bwBIdSdYsk6vGkDjOo_Q_GCVNlkGNPy6lSIxeKULqCRGSPDv-4nOJisg7UdNWvnQMEMXgvNYBLlfeN79sZNOrNBedL5lLlozGNHGlPobjeDP1avoWa4oRs-M3x7/s400/chart2.jpg)
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEhhoS03gAvGLfq77osMYc57VqPwFZ0NoeY0IuTiQyXQ9vq7hynUK_xBppLznTCUienpH87ASpzz7NOzHhSIBirNu9qRsHyxGmF0aFmkev2JfsNpEtvPVQrF5jsWzF2_2KaLTaob/s400/chart1.jpg)
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEiCMVWMqVcVeuQxKSc16Is7xXOrrjwaRlSQ6q1Omp-Otxfc2IvRlt0XxsmZ6xQXyyORGwD_noiQY5U34JHDHEV1adQq8XAm2gWmLQZvuyh8ELEkAG80c6inK1kmt04X34KqWjw8/s400/chart7.jpg)
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEjvZvkkmP39TDb8AHsbxy6WP5wDDhFF8cJqqXDf5XiZ_f6BsqgRbnD27uLo9kF7eLx83hGZXD6qXYzeGto6zA7jCwF7XzRF7deUDY10g2wD5V7UZSfzLXnAweELALfWa1GKK5sT/s400/chart6.jpg)
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEgpVzvk2XBkwKbviutZPHp8RrXwjDSa05G2Lj8jCbWYsi7o_U4BBdTdlOT1GBSkmDqpISjBK9OEruZDzgbsTairL3LqeoeqZZboP2jCGqWgOoLjsshsoDuZK44ZPPkmCxk56X-Z/s400/chart5.jpg)
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEhzYWiJJNq6HvMgVbplHGhwSXLTy0Ay_yGSne2gnOQ_2AFVTkWT-PnFypSzOxd5GSffEfbk0TMdtSMJ9IIgBvxreDFStXlh5Ju7VunW0rv4bsXi66n4e98Y1Mu4KWxIxOHsOkeR/s400/chart4.jpg)
![](https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEiflYrDnA-pg8Bu09roC-meTkxYMoJhv1CycbXofi_DtkquQ24CPWEtE_iwXuvb_OXcocGdCTJaCNs_WJVbrvlaKkEixnJkNTxyDA4xt_y5B0hFc7j1w9C8VeUcTItWLzSOmPqW/s400/chart3.jpg)