close

Вход

Забыли?

вход по аккаунту

?

Необходимость повторения основ

код для вставкиСкачать
Измерение и мониторинг
уровня образовательных услуг
аккредитованных вузов РФ
(2002-2006)
Маслак Анатолий Андреевич,
доктор технических наук, профессор,
руководитель научно-образовательного центра
«Измерение и мониторинг качества образования»,
Региональный открытый социальный институт (РОСИ)
22.09.2014
Общественная аккредитация
1
План выступления
1. Актуальность измерений в
образовании
2. Отличие измерений от оценивания в
классическом тестировании
3. Измерение и мониторинг уровня
образовательных услуг аккредитованных
вузов России (2002-2006гг.)
22.09.2014
Общественная аккредитация
2
Актуальность тематики
измерения латентных переменных (1)
• «Измеряй измеримое и делай неизмеримое
измеримым»
(Галилео Галилей)
• «Наука начинается с измерения»
(Д.И. Менделеев)
• «Если что-то существует, то оно существует в
каком-то количестве»
(Э. Торндайк)
• «История науки – это история измерений»
(Дж. Кеттелл)
22.09.2014
22.09.2014
Общественная аккредитация
3
Актуальность тематики
измерения латентных переменных (2)
• «Когда вы можете измерить то, о чем говорите и
•
выразить это числом, вы что-то знаете об этом. Но
когда вы не можете это измерить, не можете
выразить это числом, ваше знание является
скудным и недостаточным»
(лорд Кельвин)
«Вы не можете управлять тем, чего не можете
измерить»
(Том Демарко)
22.09.2014
22.09.2014
Общественная аккредитация
4
Актуальность тематики
измерения латентных переменных (3)
• «Знание о том, что и как нужно измерять,
является ключом к пониманию современной
жизни»
(Стивен Д. Левитт)
• Более категоричное высказывание «Все, что
можно узнать, имеет число, без него ничего
нельзя понять или осмыслить»
(Филолаос из Кротона, 5 век до н.э.)
• «Миром правят числа»
(Пифагор из Кротона, 6 век до н.э.)
22.09.2014
22.09.2014
Общественная аккредитация
5
Актуальность измерений
в современном образовании
Измерения - это одна из составных частей новых
образовательных стандартов, в которых представляются
требования: к программам, условиям их реализации и
результатам освоения образовательных программ.
Важность и необходимость измерений не вызывает
сомнений. Дискуссионным является вопрос о том кто, как
и какими измерениями будет определять эффективность
обучения.
В современном обществе знание и измеряемые
результаты обучения стали средством доступа к
общественным благам и возможностям карьеры».
22.09.2014
22.09.2014
Общественная аккредитация
6
Отличие измерений,
от «оценивания»
1. Средняя успеваемость в школе
(3 + 5) / 2 = 4
В школах США, Австралии A=5, B=4, C=3
(A + C) / 2 = B?
2. Покупка яблок, помидор и т.д.
по весу, а не по штукам
(тестовые задания различаются по трудности,
так же как яблоки по весу)
22.09.2014
22.09.2014
Общественная аккредитация
7
Латентная переменная
это конструкт (теоретический), который
представляет интерес для исследователя
22.09.2014
Общественная аккредитация
8
Расположение индивидов и тестовых
заданий на линейном континууме
22.09.2014
2
1
2
1
2
1
2
1
2
1
Общественная аккредитация
9
Нелинейность тестового балла
22.09.2014
Общественная аккредитация
10
Основатель теории измерения
латентных переменных
22.09.2014
22.09.2014
Общественная аккредитация
11
Ученик № 1 B.D. Wright
22.09.2014
22.09.2014
Общественная аккредитация
12
B.D. Wright at his home
22.09.2014
22.09.2014
Общественная аккредитация
13
22.09.2014
14
Измерение и мониторинг
уровня образовательных услуг
аккредитованных вузов РФ
Цель:
- измерить в виде интегрального
показателя уровень образовательных услуг
аккредитованных вузов России;
- провести мониторинг этого показателя;
- оценить информативность индикаторов
собираемых для этих целей Федеральным
агентством по образованию.
22.09.2014
Общественная аккредитация
15
Контентные группы индикаторов
1. Профессорско-преподавательской состав (без
совместителей);
2. Профессорско-преподавательский состав по
совместительству (без учета внутривузовского
совместительства);
3. Студенты и аспиранты;
4. Подготовка научных и научно-педагогических кадров
высшей квалификации;
5. Объем научных исследований в отчетном году;
6. Издательская деятельность за последние два года;
7. Бюджетные ассигнования и основные фонды по
состоянию на 1 января года;
8. Передача денежных средств;
9. Общежития, столовые, профилактории, спортивные
сооружения.
22.09.2014
Общественная аккредитация
16
Профессорско-преподавательской состав
(без совместителей)
I01 Лица, имеющие ученую степень доктора наук, чел.
I02 Лица, имеющие ученое звание профессора (без учета индикатора
i01), чел.
I03 Доктора наук и лица, имеющие ученое звание профессора, в
возрасте до 50-ти лет (одно и то же лицо учитывается один раз), чел.
I04 Лица, имеющие ученую степень кандидата наук (без учета
индикаторов i1 - i3), чел.
I05 Кандидаты наук в возрасте до 30-ти лет (без учета индикаторов i1 i3), чел.
I06 Члены Российской академии наук, чел.
I07 Члены других государственных академий России, чел.
I08 Общее количество штатных преподавателей, чел.
22.09.2014
Общественная аккредитация
17
Профессорско-преподавательский
состав по совместительству (без учета
внутривузовского совместительства)
I09
Лица, имеющие ученую степень доктора наук, чел.
I10
Лица, имеющие ученое звание профессора (без учета
индикатора 9), чел.
I11
Члены Российской академии наук, чел.
I12
Члены других государственных академий России, чел.
I13
Общее количество преподавателей, работающих по
совместительству, чел.
22.09.2014
Общественная аккредитация
18
Студенты и аспиранты
I14
Студенты дневной формы обучения, чел.
I15
Студенты очно- заочной формы обучения, чел.
I16
Студенты заочной формы обучения, чел.
I17
Аспиранты дневной формы обучения, чел.
I18
Аспиранты заочной формы обучения, чел.
I19
Все иностранные граждане, обучавшиеся в отчетном
году на контрактной основе, в том числе и относящиеся
к индикаторам i14 - i18, чел.
22.09.2014
Общественная аккредитация
19
Подготовка научных и научно-педагогических
кадров высшей квалификации
I20
Количество утвержденных ВАК докторских диссертаций,
защищенных в советах вуза за последние три года, един.
I21
Количество успешно защищенных в советах вуза за последние три
года кандидатских диссертаций, един.
Количество аспирантов вуза, успешно защитивших кандидатские
диссертации в отчетном году, но не позднее одного года после
окончания аспирантуры, чел.
I23 Количество утвержденных ВАК докторских диссертаций,
защищенных сотрудниками вуза за последние три года вне советов
вуза, един.
I24 Количество аспирантов и сотрудников вуза, успешно защитивших
кандидатские диссертации за последние три года вне советов вуза,
чел.
I22
22.09.2014
Общественная аккредитация
20
Объем научных исследований в
отчетном году
I25
Объем госбюджетных работ и освоенных
грантов на научные исследования,
выполненных собственными силами, тыс. руб.
I26
Объем хоздоговорных работ, выполненных
собственными силами, тыс. руб.
22.09.2014
Общественная аккредитация
21
Объем научных исследований в
отчетном году
I27
I28
I29
I30
Учебники с грифами Минобразования России и других
министерств и ведомств, имеющих подведомственные вузы,
един.
Учебники с грифами Учебно-методических объединений
вузов и Научно-методических советов Минобразования
России по дисциплинам, един.
Учебные пособия с грифами Минобразования России и
других министерств и ведомств, имеющих
подведомственные вузы, един.
Учебные пособия с грифами Учебно-методических
объединений вузов и Научно-методических советов
Минобразования России по дисциплинам, един.
22.09.2014
Общественная аккредитация
22
Бюджетные ассигнования и основные
фонды (индикаторы i32 - i35 по
состоянию на 1 января года,
следующего за отчётным)
Сумма бюджетных ассигнований на отчетный год (без
учета индикатора 25), тыс. руб.
I32 Общая стоимость машин и оборудования, тыс. руб.
I31
I33
Общая площадь учебно-лабораторной базы, тыс. кв.м.
Общее количество персональных компьютеров и
компьютерных рабочих станций в вузе, един.
I35 Общее количество единиц хранения библиотечного
фонда, тыс.
I34
22.09.2014
Общественная аккредитация
23
Передача денежных средств
I36
Внебюджетные средства, перечисленные вузу в
отчетном году физическими и юридическими лицами
(без учета индикаторов 26 и 37), включая стоимость
переданного оборудования, тыс.руб.
I37
Средства, полученные вузом в отчетном году за
подготовку иностранных граждан (включая стоимость
переданного оборудования), тыс.руб.
22.09.2014
Общественная аккредитация
24
Общежития, столовые, профилактории,
спортивные сооружения
I38
I39
I40
I41
Обеспеченность иногородних студентов общежитием
(вузы, не имеющие иногородних студентов,
показывают 100), %
Обеспеченность местами в предприятиях
общественного питания (в процентах к нормативу,
норматив - 200 мест на 1000 студентов), %
Количество мест в санаториях-профилакториях, един.
Общая полезная площадь крытых спортивных
сооружений, кв.м.
22.09.2014
Общественная аккредитация
25
Высшие учебные заведения (1)
№
п/п
1
2
3
4
5
6
7
8
9
Группа
Университеты
Технические и технологические
Архитектурные, художественные
Право
Сельское хозяйство
Экономика
Культура
Медицина
Педагогические вузы
22.09.2014
Общественная аккредитация
Объем данных
457
831
33
51
261
145
104
206
355
26
Высшие учебные заведения (2)
№
п/п
Группа
10 Физическая культура
11 Консерватории
12 Негосударственные аккредитованные
(более 700 студентов)
13 Негосударственные аккредитованные
(менее 700 студентов)
14 Социальные
15 Разные
16 Государственной службы
17 Вузы сервиса
18 Негосударственные аккредитованные
(менее 100 студентов)
22.09.2014
Общественная аккредитация
Объем данных
55
17
215
370
19
47
65
41
79
27
Минимальные оценки уровня образовательных услуг
вузов в 2002-2006 гг.
Высшее учебное заведение
Стандартная
Уровень
ошибка
образовательных
услуг (логиты)
(логиты)
Год
Северо-Кавказский гуманитарный институт
-6,677
0,56
2002
Институт правовой экономики
-5,878
0,49
2006
Северо-Кавказский институт бизнеса,
инженерных и информационных технологий
-5,645
0,48
2003
Институт менеджеров пищевых и
перерабатывающих производств
-5,214
0,45
2003
Международный институт бизнеса,
информационных технологий и финансов
-5,214
0,45
2004
Международный институт бизнеса,
информационных технологий и финансов
-5,214
0,45
2005
22.09.2014
Общественная аккредитация
28
Максимальные оценки уровня образовательных
услуг вузов в 2002-2006 гг.
Высшее учебное заведение
Стандартная
Уровень
ошибка
образовательных
услуг (логиты)
(логиты)
Год
Санкт-Петербургский государственный университет
3,320
0,33
2004
Южный федеральный университет (Ростов-на-Дону)
3,320
0,33
2006
Санкт-Петербургский государственный университет
3,426
0,33
2005
Санкт-Петербургский государственный университет
3,751
0,33
2006
Московский государственный университет
3,971
0,33
2002
Московский государственный университет
4,194
0,34
2003
Московский государственный университет
4,423
0,34
2005
Московский государственный университет
4,913
0,37
2004
Московский государственный университет
4,913
0,37
2006
22.09.2014
Общественная аккредитация
29
Индикаторная
переменная
Местоположение
индикаторной
переменной (логит)
Стандартная
ошибка
(логит)
I38
I41
I35
I30
I32
I34
I33
I25
I09
I08
I36
I26
I29
I14
-1,891
-1,530
-1,432
-1,313
-1,111
-0,956
-0,932
-0,901
-0,884
-0,863
-0,782
-0,761
-0,742
-0,723
0,023
0,026
0,038
0,027
0,039
0,04
0,036
0,028
0,037
0,04
0,035
0,031
0,024
0,039
22.09.2014
Общественная аккредитация
30
Индикаторная
переменная
Местоположение
индикаторной
переменной (логит)
Стандартная
ошибка
(логит)
I04
I13
I39
I24
I01
I16
I18
I02
I05
I22
I03
I19
I17
I31
-0,700
-0,582
-0,532
-0,515
-0,403
-0,154
-0,066
-0,046
-0,037
-0,006
0,003
0,254
0,260
0,287
0,039
0,036
0,037
0,036
0,044
0,032
0,031
0,030
0,034
0,029
0,032
0,028
0,032
0,030
22.09.2014
Общественная аккредитация
31
Индикаторная
переменная
Местоположение
индикаторной
переменной (логит)
Стандартная
ошибка
(логит)
I37
I40
I10
I21
I15
I12
I07
I23
I20
I11
I06
I27
I28
0,619
0,681
0,708
0,826
1,021
1,067
1,103
1,106
1,160
1,613
2,071
2,378
2,701
0,028
0,027
0,032
0,035
0,031
0,030
0,031
0,052
0,034
0,036
0,045
0,040
0,040
22.09.2014
Общественная аккредитация
32
Отличительные индикаторы
1. Наиболее «легкие» индикаторы
2. Наиболее «трудные» индикаторы
3. Адекватные модели измерения индикаторы
4. Неадекватные модели измерения
индикаторы
22.09.2014
Общественная аккредитация
33
Характеристическая кривая для «легкой»
индикаторной переменной 41 «Общая полезная
площадь крытых спортивных сооружений»
22.09.2014
Общественная аккредитация
34
Характеристическая кривая для «легкой»
индикаторной переменной 35 «Общее количество
единиц хранения библиотечного фонда»
22.09.2014
Общественная аккредитация
35
Характеристическая кривая для «легкой»
индикаторной переменной 30 «Учебные пособия с
грифом УМО объединений вузов»
22.09.2014
Общественная аккредитация
36
Характеристическая кривая для «трудной»
индикаторной переменной 28 «Учебники с грифом
УМО объединений вузов»
22.09.2014
Общественная аккредитация
37
Характеристическая кривая для «трудной»
индикаторной переменной 27 «Учебники с грифом
Минобрнауки»
22.09.2014
Общественная аккредитация
38
Характеристическая кривая для «трудной»
индикаторной переменной 06 «Члены Российской
академии наук»
22.09.2014
Общественная аккредитация
39
Характеристическая кривая для неадекватной
индикаторной переменной 39 «Обеспеченность
местами в предприятиях общественного питания»
22.09.2014
Общественная аккредитация
40
Характеристическая кривая для «трудной»
индикаторной переменной 38 «Обеспеченность
иногородних студентов общежитием (вузы не
имеющие иногородних студентов показывают 100%»
22.09.2014
Общественная аккредитация
41
Распределение оценок вузов и индикаторов
на шкале «уровень образовательных услуг»
22.09.2014
Общественная аккредитация
42
Дисперсионный анализ
уровня образовательных услуг
российских вузов в 2002-2006 годах
Источник
дисперсии
Сумма
квадратов
Степени
свободы
Средний
квадрат
Fэксп
р
22,69
4
5,672
3,196
0,012
Ошибка
5937,827
3346
1,775
Всего
5960,517
3350
Годы
22.09.2014
Общественная аккредитация
43
Динамика уровня образовательных услуг
вузов России в 2002-2006 годах
Год
Образовательные
услуги
(логит)
Стандартная
ошибка
(логит)
2002
-1,197
2003
95% доверительный
интервал
нижняя
граница
верхняя
граница
0,054
-1,303
-1,09
-1,193
0,051
-1,294
-1,093
2004
-1,162
0,050
-1,261
-1,063
2005
-1,025
0,051
-1,124
-0,925
2006
-1,012
0,051
-1,111
-0,912
22.09.2014
Общественная аккредитация
44
Дисперсионный анализ
уровня образовательных услуг
вузов РФ в зависимости от их статуса
Источник
дисперсии
Сумма
квадратов
Степени
свободы
Статус вуза
3235,571
2
1617,79
Ошибка
2724,946
3348
0,814
Всего
5960,517
3350
22.09.2014
Средний
квадрат Fэксп
Общественная аккредитация
р
1987,7 <0,001
45
Уровень образовательных услуг
российских вузов
в зависимости от их статуса
Образовательные
услуги
(логит)
Стандартная
ошибка
(логит)
Университет
-0,259
Академия
Институт
Статус вуза
22.09.2014
95% доверительный
интервал
нижняя
граница
верхняя
граница
0,022
-0,301
-0,217
-1,377
0,034
-1,444
-1,309
-2,558
0,030
-2,617
-2,500
Общественная аккредитация
46
Дисперсионный анализ
уровня образовательных услуг вузов РФ
в зависимости от их отраслевой принадлежности
Источник
дисперсии
Сумма
квадратов
Степени
свободы
Отрасль
2982,874
17
175,463
Ошибка
2977,643
3333
0,893
Всего
5960,517
3350
22.09.2014
Средний
квадрат Fэксп
Общественная аккредитация
р
196,40 <0,001
47
Уровень образовательных услуг вузов РФ
в зависимости от их отраслевой принадлежности
Год
1 Университеты
Технические и
2
технологические
3 Вузы сервиса
4 Медицина
Уровень
Стандартная
95%
образовательных
ошибка
доверительный
услуг вузов России
(логит)
интервал
(логит)
-0,158
0,044
-0,245 -0,072
-0,343
0,033
-0,407
-0,278
-0,543
0,148
-0,833
-0,254
-0,666
0,066
-0,795
-0,537
5 Экономика
6 Сельское хозяйство
-0,764
0,078
-0,917
-0,61
-0,953
0,059
-1,068
-0,838
7 Педагогические
8 Социальные
-1,083
0,05
-1,181
-0,984
-1,333
0,217
-1,758
-0,908
9 Государственные службы
-1,356
0,117
-1,586
-1,126
22.09.2014
Общественная аккредитация
48
Уровень образовательных услуг вузов РФ
в зависимости от их отраслевой принадлежности
Уровень
Стандартная
95%
образовательных
ошибка
доверительный
услуг вузов России
(логит)
интервал
(логит)
Год
10 Право
-1,620
0,132
-1,879
-1,360
11 Физическая культура
Негосударственные аккредит.
12
(более 700 студентов)
-1,730
0,127
-1,980
-1,480
-2,003
0,064
-2,130
-1,877
13 Другие
-2,004
0,138
-2,274
-1,734
14 Архитектурные и художественные
-2,016
0,165
-2,339
-1,694
15 Культура
-2,020
0,093
-2,202
-1,838
16 Консерватории
Негосударственные аккредит.
17
(менее 700 студентов)
Негосударственные аккредит.
18
(менее 100 студентов)
-2,175
0,229
-2,625
-1,726
-2,922
0,049
-3,018
-2,825
-3,379
0,106
-3,587
-3,170
22.09.2014
Общественная аккредитация
49
Благодарю за внимание!
22.09.2014
Общественная аккредитация
50
Документ
Категория
Презентации по социологии
Просмотров
2
Размер файла
2 828 Кб
Теги
1/--страниц
Пожаловаться на содержимое документа