Педагогічна експертиза учбової книги

При експертній оцінці якості учбової книги основні операції виконуються в чотири етапи: підготовчий етап, етап робочої групи, етап експертної групи, завершальний етап.

I. На підготовчому етапі проводиться відбір учбових книг для експертної оцінки керівниками Міністерства просвіти СРСР, АПН СРСР, НДІ СиМО і т. п., формулюють ця цілі експертизи. Керівниками відповідних відомств видається наказ про створення експертної комісії, призначаються організатор експертизи і технічні працівники. Організатор експертизи формує склад робочої групи, складає програму експертизи, організовує експертні групи і комісії і руководить їх діяльністю. Окрім виконання звичних функцій по ГОСТ 23554.0–79, він розподіляє роботу технічних робітників. Робоча група включає, окрім організатора експертизи і технічних працівників, групу ведучих експертів консультантів, мають досвід роботи в експертних комісіях.

II. На етапі робочої групи визначаються методи, способи іпроцедури, які слід застосувати при рішенні задач експертною групою. При цьому робоча група виходить з особливостей учбової книги, термінів і умов проведення експертизи, допустимий трудомісткості. Робоча група з числа кандидатів в експерти формує експертну групу, визначаючи її структуру, професійний склад, кількість експертів.

Однією з важливих проблем експертизи є проблема, як визначити до початку опиту необхідне і достатнє число експертів. Деякі розрахункові формули для визначення необхідної і достатньої чисельності експертної групи приведені в роботі Р.Г. Азгальдова. Оскільки чисельність експертів залежить від багатьох чинників, таких, як допустимі витрати праці, кваліфікація експертів, погрішність колективної оцінки і т. п., то привести єдину формулу, що дозволяє визначати чисельність експертної групи, нам представляється неможливим. Ми приведемо тут деякі загальні міркування щодо шляхів рішення цього питання.

Виходячи з поставленої задачі, робоча група визначає верхню і нижню межі можливої кількості експертів. Ці межі ми позначимо відповідно Nmax і Nmin . Виходячи з цього, утворюється група кандидатів в експерти. Якщо Nке – число кандидатів в експерти, то ясно, що Nmax ≥ Nке . Рішення про включення того або іншого фахівця в групу кандидатів в експерти приймає організатор експертизи і консультант після бесіди, що дозволяє проаналізувати ступінь відповідності фахівця вимогам, що пред'являються.

Уточнюючи параметри поставленої задачі, робоча група приводить формулу знаходження N. Найпростіша з них:

. (1)

Нижче ми приведемо і інші формули для розрахунку чисельності експертної групи.

Для відбору експертів з числа кандидатів в експерти можна користуватися відомими методами: взаємних рекомендацій, документальних оцінок, самооцінки або різними комбінаціями цих методів. Повна характеристика якості експерта може бути одержана шляхом обчислення комбінованої оцінки j -го кандидата в експерти:

де α, β, γ, – коефіцієнти ваговитості анкет взаємних рекомендацій анкетних даних, самооцінки, відповідно;

– відповідні коефіцієнти, одержані кандидатом в експерти при аналізі вище перелічених анкет.

Як ілюстрацію приведемо можливі розрахункові формули чисельності експертної групи для оцінки якості учбової книги по даній анкеті.

Хай k – кількість основних пунктів анкети, q^е _і – значення колективної експертної оцінки і -гo пункту (l≥i≥k ), q^іс _і – істинне значення оцінюваного пункту, Δ q_і = | q^е _і – q^іс _і | – абсолютная погрішність q^е _і , γ_і – довірча вірогідність (надійність), з якою визначено q^е _і , d_і = d_і ^тах – d_і ^тіп – розмах оцінок i-гo пункту, δ_i = di /Δq_і , а_і – коефіцієнт ваговитості і-го пункту анкети .

Відомо, що визначення q^іс _і часто утруднено по ряду «принципових» міркувань, але можна вказати верхню і нижню межі допустимих значень Δ q^е _і : [a_qі ,b _qі ]. По аналогії з безліччю допустимих значень для Δ q^е _і введемо безліч допустимих значень і для довірчої вірогідності – . Виходячи з формули δ_i = di /Δq_і можна визначити безліч допустимих значень , = di /аq_і , = di /βq_і .

Термін «допустимі значення» доречний, оскільки межі цих інтервалів «допускає» робоча група, призначаючи одночасно і «встановлені» значения- . . Тоді Nmax, Nmin і N , можуть бути знайдені по формулах:

(2)

де знаходиться з таблиці:

Приведемо приклад. Хай анкета містить 10 пунктів, коефіцієнти ваговитості яких рівні відповідно: