48
Некоторые аспекты подготовки и проведения ГИА в Кировской области в 2015 году Галина Леонидовна Маренина начальник отдела итоговой аттестации 1 КОГАУ «Центр оценки качества образования»

Проведение государственной итоговой ...https://школа48.дети/wp-content/uploads/2015/03... · 2015-03-18 · ЕГЭ (вход в ... - Плакаты

  • Upload
    others

  • View
    7

  • Download
    0

Embed Size (px)

Citation preview

Некоторые аспекты подготовки и проведения ГИА в Кировской

области в 2015 году

Галина Леонидовна Маренина

начальник отдела итоговой аттестации

1

КОГАУ «Центр оценки качества образования»

Федеральные

Федеральный закон от 29.12.2012 № 273-ФЗ «Об образовании в Российской Федерации» Постановление Правительства Российской Федерации от 31.08.2013 № 755 «О федеральной информационной системе обеспечения проведения государственной итоговой аттестации обучающихся, освоивших основные образовательные программы основного общего и среднего общего образования, и приема граждан в образовательные организации для получения среднего профессионального и высшего образования и региональных информационных системах обеспечения проведения государственной итоговой аттестации обучающихся, освоивших основные образовательные программы основного общего и среднего общего образования» Приказ Минобрнауки России от 28.06.2013 №491 «Об утверждении порядка аккредитации граждан в качестве общественных наблюдателей при проведении государственной итоговой аттестации по образовательным программам основного общего и среднего общего образования, всероссийской олимпиады школьников и олимпиад школьников» (с изменениями) Приказ Минобрнауки России от 26.12.2013 №1400 «Об утверждении Порядка проведения государственной итоговой аттестации по образовательным программам среднего общего образования» (с изменениями)

2

ГИА 11 Нормативные правовые акты

Приказ Минобрнауки России от 03.02.2015 №44 «Об утверждении единого расписания и продолжительности проведения единого государственного экзамена по каждому учебному предмету, перечня средств обучения и воспитания, используемых при его проведении в 2015 году»:

досрочный период – 23 марта – 24 апреля

основной период – 25 мая – 26 июня (иностранный язык, раздел «Говорение» – 17 и 18 июня)

математика П, физика, литература, информатика и ИКТ, обществознание – 3 часа 55 минут

русский язык, история – 3 часа 30 минут

математика Б, биология, география, химия, иностранный язык – 3 часа

раздел «Говорение» - 15 минут

3

Нормативные правовые акты

Распоряжение Рособрнадзора от 04.09.2014 № 1701-10 «Об установлении минимального количества баллов единого государственного экзамена, необходимого для поступления на обучение по программам бакалавриата и программам специалитета»:

русский язык 36 баллов

математика 27 баллов

физика 36 баллов

химия 36 баллов

информатика 40 баллов

биология 36 баллов

история 32 балла

география 37 баллов

обществознание 42 балла

литература 32 балла

иностранный язык 22 балла

4

Нормативные правовые акты

Методические материалы по подготовке и проведению единого государственного экзамена в пунктах проведения экзаменов в 2015 году Методические рекомендации по организации систем видеонаблюдения при проведении государственной итоговой аттестации по образовательным программам среднего общего образования Методические рекомендации по организации и проведению государственной итоговой аттестации по образовательным программам основного общего и среднего общего образования в форме основного государственного экзамена и единого государственного экзамена для лиц с ограниченными возможностями здоровья, детей-инвалидов и инвалидов Методические материалы по осуществлению общественного наблюдения при проведении государственной итоговой аттестации по образовательным программам среднего общего образования в форме единого государственного экзамена Методическое письмо о проведении государственной итоговой аттестации по образовательным программам основного общего и среднего общего образования по русскому языку в форме государственного выпускного экзамена (письменная и устная формы) Правила заполнения бланков единого государственного экзамена в 2015 году

5

Нормативные правовые акты

Региональные

- Постановления Правительства Кировской области

- Приказы департамента образования Кировской области:

от 11.02.2014 № 5-166 «Об утверждении Положения о государственной экзаменационной комиссии по проведению государственной итоговой аттестации по образовательным программам среднего общего образования в Кировской области»

от 12.05.2014 № 5-581 «Об утверждении Положения о конфликтной комиссии по проведению государственной итоговой аттестации по образовательным программам среднего общего образования в Кировской области»

от 16.12.2014 № 5-1359 «Об утверждении мест расположения пунктов проведения государственной итоговой аттестации по образовательным программам среднего общего образования»

от 19.12.2014 № 5-1388 «Об утверждении состава государственной экзаменационной комиссии по проведению государственной итоговой аттестации по образовательным программам среднего общего образования в Кировской области в 2015 году»

от 18.02.2015 № 5-151 «Об утверждении состава конфликтной комиссии по по проведению государственной итоговой аттестации по образовательным программам среднего общего образования в Кировской области в 2015 году»

6

Нормативные правовые акты

ППЭ – здание (сооружение), которое используется для проведения ЕГЭ (вход в ППЭ - либо вход в здание, на территории которого расположен ППЭ, либо (в зависимости от конфигурации здания, а также при наличии неблагоприятных климатических условий) – вестибюль (холл) здания):

досрочный период – 1 ППЭ основной период – 72 ППЭ ППЭ на дому - для лиц, имеющих медицинские основания для обучения на дому и соответствующие рекомендации психолого-медико-педагогической комиссии

В каждой аудитории присутствует не менее 15 участников ЕГЭ, при этом в каждой аудитории присутствует не более 25 участников ЕГЭ В ППЭ выделяется отдельное место (помещение) для хранения личных вещей участников ЕГЭ, изолированное от аудиторий для проведения экзамена. (Место для личных вещей участников ЕГЭ организуется до установленной рамки стационарного металлоискателя или до места проведения уполномоченными лицами работ с использованием переносного металлоискателя). 7

Требования к ППЭ

Видеонаблюдение

9

Видеонаблюдение

Руководитель и организаторы ППЭ –

в состав организаторов не входят специалисты по учебному предмету

не допускается привлекать в качестве руководителей и организаторов ППЭ педагогических работников, являющихся учителями обучающихся, сдающих экзамен в данном ППЭ

Не менее одного члена ГЭК

Руководитель организации, в помещениях которой организован ППЭ, или уполномоченное им лицо

Технические специалисты –

не допускается привлекать в качестве технических специалистов педагогических работников, являющихся учителями обучающихся, сдающих экзамен в данном ППЭ

Медицинские работники

Ассистенты (при необходимости) -

не допускается привлекать в качестве ассистентов педагогических работников, являющихся учителями обучающихся, сдающих экзамен в данном ППЭ

Работники, осуществляющие охрану правопорядка

Сопровождающие

10

Лица, привлекаемые к проведению ЕГЭ в ППЭ

Проверка готовности ППЭ проводится в 2 этапа:

Члены ГЭК (по решению председателя ГЭК) - не позднее чем за две недели до начала экзаменов. По итогам проверки составляется протокол готовности ППЭ.

Руководитель ППЭ и руководитель организации, на базе которой организован ППЭ - не позднее чем за 1 день до начала экзамена. По итогам проверки заполняется форма ППЭ-01 «Акт готовности ППЭ».

11

Готовность ППЭ

Управление специальной связи по Кировской области - с 00 часов 00 минут дня экзамена (проверка - целостность упаковки; адрес и номер ППЭ; учебный предмет; дата проведения соответствующего экзамена; соответствие номера указанного в реестре ф.5 и на адресном ярлыке секьюрпака)

Решение ГЭК (22.01.2015) – автоматизированное распределение участников ЕГЭ и организаторов производится на уровне РЦОИ (получение вместе с ЭМ):

до 1 апреля – ОМС прикрепляют участников ЕГЭ, руководителей и организаторов к ППЭ

за 3 дня до экзамена – РЦОИ осуществляет автоматизированное распределение (рассадку) участников по аудиториям

12

Доставка экзаменационных материалов

Не позднее чем за 15 минут до начала экзамена – штаб ППЭ - организатор в аудитории принимает у руководителя ППЭ экзаменационные материалы (форма ППЭ-14-02 «Ведомость выдачи и возврата экзаменационных материалов по аудиториям ППЭ»)

10.00 – производится вскрытие доставочного пакета с ИК. Вскрытие доставочного пакета с ИК ранее 10.00 по местному времени запрещено.

13

Проведение ЕГЭ

Участникам ЕГЭ – запрещается иметь при себе средства связи, электронно-вычислительную технику, фото, аудио и видеоаппаратуру, справочные материалы, письменные заметки и иные средства хранения и передачи информации, А также: выносить из аудиторий и ППЭ ЭМ на бумажном или электронном носителях, фотографировать ЭМ

Лица, допустившие нарушение указанных требований

или иное нарушение порядка проведения экзамена, удаляются из ППЭ (ППЭ – 21)

14

Требования к соблюдению порядка проведения ЕГЭ

При установлении фактов нарушения порядка проведения ГИА со стороны обучающихся председатель ГЭК принимает решение об аннулировании результатов ГИА по соответствующему учебному предмету

Для принятия решения об аннулировании результата ГИА ГЭК запрашивает у уполномоченных лиц и организаций необходимые документы и сведения, в том числе экзаменационные работы, сведения о лицах, присутствовавших в ППЭ, и другие сведения о соблюдении порядка проведения ГИА, проводит проверку по фактам нарушения установленного порядка проведения ГИА

15

Требования к соблюдению порядка проведения ЕГЭ

45. Лица, допустившие нарушение установленного порядка проведения ГИА, удаляются с экзамена. Для этого организаторы, руководитель ППЭ или общественные наблюдатели приглашают членов ГЭК, которые составляют акт об удалении с экзамена и удаляют лиц, нарушивших устанавливаемый порядок проведения ГИА, из ППЭ.

Административные штрафы:

на граждан в размере от 3000 руб. до 5000 руб.

на должностных лиц от 20000 руб. до 40000 руб.

на юридических лиц от 50000 руб. до 200000 руб.

За нарушение порядка проведения ЕГЭ: удаление участника ЕГЭ из аудитории

аннулирование результатов

штраф

16

Требования к соблюдению порядка проведения ЕГЭ

Апелляция о нарушении установленного порядка

проведения ГИА

Подается в день проведения экзамена на покидая ППЭ

Член ГЭК:

- проводит проверку при участии организаторов, не задействованных в аудитории, технических специалистов, ассистентов, общественных наблюдателей, сотрудников УМВД, медицинских работников

- оформляет результаты проверки в форме заключения

- заполняет форму ППЭ – 03

- апелляционные документы передает в конфликтную комиссию

Апелляция о несогласии с выставленными баллами

Подается в образовательную организацию в течение двух

рабочих дней со дня объявления результатов ГИА

17

Прием и рассмотрение апелляций

Изменена структура варианта КИМ: каждый вариант состоит из двух частей (часть 1 - задания с кратким ответом, часть 2 - задания с развернутым ответом)

Задания в варианте КИМ представлены в режиме сквозной нумерации без буквенных обозначений А, В, С

Изменена форма записи ответа в заданиях с выбором одного ответа: как и в заданиях с кратким ответом, записывается цифрой номер правильного ответа (а не крестик)

По большинству учебных предметов сокращено количество заданий с выбором одного ответа

18

Совершенствование структуры КИМ

19

Совершенствование структуры КИМ

Изменение структуры КИМ – изменение формы бланка ответов

№ 1

• Изменена нумерацию полей для внесения ответов на задания КИМ

• Исключена область ответов на задания части А (с выбором ответа из предложенных вариантов)

• Исключена область замены ошибочных ответов на задания части А

• Увеличено количество полей для внесения ответов на задания с кратким ответом до 40

• Увеличено количество полей для замены ошибочных ответов на задания с кратким ответом до 8

Тренинг по заполнению бланков

на основе демоверсий 2015 года

20

Совершенствование структуры КИМ

21

Совершенствование структуры КИМ

22

Устная часть по иностранному языку

• Письменная часть, устная часть (разделены во времени)

• Письменная часть – максимально 80 баллов

• Устная часть – максимально 20 баллов

• Для поступления в вуз – 22 балла

• Апелляция о нарушении установленного порядка проведения ГИА – раздельно

• Апелляция о несогласии с выставленными баллами –по всей работе

• Использование компьютера со специализированным ПО и гарнитурой

• Электронный КИМ

• Монолог

• В аудитории – 4 участника (оптимальный вариант)

• Апробация – 26 февраля 2015 года

23

Устная часть по иностранному языку

4 задания:

1 – чтение вслух небольшого текста научно-популярного характера (1,5 минуты на подготовку, 1,5 - на ответ)

2 – ознакомление с рекламным объявлением, 5 вопросов на основе ключевых слов (1,5 минуты на подготовку, 1,5 - на ответ)

3 – описание одной из трех фотографий на основе плана (1,5 минуты на подготовку, 2 - на ответ)

4 – сравнение двух фотографий на основе предложенного плана (1,5 минуты на подготовку, 2 - на ответ)

24

Устная часть по иностранному языку

Базовый уровень

(для получения аттестата и поступления в вуз на направления

подготовки, по которым математика не включена в перечень

вступительных испытаний)

Оценка по 5-балльной системе

Профильный уровень

(для поступления в вуз на направления подготовки, по

которым математика включена в перечень вступительных

испытаний)

Оценка по 100-балльной системе

Минимальный балл – 27

Пересдача на базовом уровне

25

Базовый и профильный уровни по математике

- 2 дня для сдачи (1 июня(базовый) и 4 июня (профильный)

26

Базовый и профильный уровни по математике

Информирование (под роспись)

27

Подготовка к ЕГЭ

О месте и сроках проведения ГИА

ППЭ – приказ департамента образования Кировской области от 16.12.2014 № 5-1359 Расписание - приказ Минобрнауки России

О порядке проведения ГИА, в том числе об основаниях для удаления с экзамена, изменения или аннулирования результатов ГИА, о ведении во время экзамена в ППЭ и аудитории видеозаписи, о порядке подачи и рассмотрения апелляций, о времени и месте ознакомления с результатами ГИА, а также о результатах ГИА

Порядок проведения ГИА 11 – приказ Минобрнауки России от 26.12.2013 № 1400 Методические рекомендации – Рособрнадзор (Памятка о правилах проведения ЕГЭ в 2015 году) Информационные письма департамента образования Кировской области – сайт ege.43edu.ru

Проверка экзаменационных работ

Региональный уровень

Русский язык – 6 календарных дней Математика (профиль) – 4 календарных дня Математика (базовый) – 3 календарных дня Предметы по выбору – 4 календарных дня

Федеральный уровень

Не позднее 5 рабочих дней с момента получения результатов обработки бланков ЕГЭ из всех субъектов РФ

28

Подготовка к ЕГЭ

Информирование (под протокол)

- Выпускники (особое внимание – дети группы риска)

- Родители (законные представители)

Информационные материалы (ege.edu.ru)

- Плакаты

- Видеоролики

ПСИХОЛОГИЧЕСКАЯ ПОДГОТОВКА

Письмо Рособрнадзора от 29.01.2015 № 10-30

29

Подготовка к ЕГЭ

30

Подготовка к ЕГЭ

Руководители ППЭ: - не видно нумерации столов - в аудиториях открыты стенды - не опечатаны шкафы в аудиториях - отсутствие в аудиториях мест для личных вещей Организаторы в аудитории: - разговоры с участниками ЕГЭ - не подвели итог экзамена на камеру - сбор экзаменационных материалов со стола участников ЕГЭ, вкладывание КИМ в пакет - просьба сдать экзаменационные материалы при выходе участника из аудитории - организатор увлеченно читает книгу, не обращая внимания на участников ЕГЭ Участники ЕГЭ: - подозрение на использование шпаргалок - использование постороннего предмета - подозрение на пользование средствами связи 31

Основные нарушения порядка проведения ЕГЭ в 2014 году, зафиксированные общественными онлайн - наблюдателями

Федеральные

Федеральный закон от 29.12.2012 № 273-ФЗ «Об образовании в Российской Федерации» Постановление Правительства Российской Федерации от 31.08.2013 № 755 «О федеральной информационной системе обеспечения проведения государственной итоговой аттестации обучающихся, освоивших основные образовательные программы основного общего и среднего общего образования, и приема граждан в образовательные организации для получения среднего профессионального и высшего образования и региональных информационных системах обеспечения проведения государственной итоговой аттестации обучающихся, освоивших основные образовательные программы основного общего и среднего общего образования» Приказ Минобрнауки России от 28.06.2013 №491 «Об утверждении порядка аккредитации граждан в качестве общественных наблюдателей при проведении государственной итоговой аттестации по образовательным программам основного общего и среднего общего образования, всероссийской олимпиады школьников и олимпиад школьников» (с изменениями) Приказ Минобрнауки России от 25.12.2013 №1394 «Об утверждении Порядка проведения государственной итоговой аттестации по образовательным программам основного общего образования» (с изменениями)

32

ГИА 9 Нормативные правовые акты

Приказ Минобрнауки России от 03.02.2015 №44 «Об утверждении единого расписания и продолжительности проведения основного государственного экзамена по каждому учебному предмету, перечня средств обучения и воспитания, используемых при его проведении в 2015 году»:

досрочный период 20 апреля – 7 мая

основной период 27 мая – 18 июня

дополнительный период (август) 3 августа – 14 августа

дополнительный период (сентябрь) 7 сентября–22 сентября

Математика, русский язык, литература – 3 часа 55 минут

Физика, обществознание, история, биология – 3 часа

География, химия – 2 часа

Информатика и ИКТ – 2 часа 30 минут

Иностранный язык – 2 часа 10 минут

33

Нормативные правовые акты

Методические рекомендации по подготовке и проведению государственной итоговой аттестации по образовательным программам основного общего образования в форме основного государственного экзамена Методические рекомендации по организации и проведению государственной итоговой аттестации по образовательным программам основного общего и среднего общего образования в форме основного государственного экзамена и единого государственного экзамена для лиц с ограниченными возможностями здоровья, детей-инвалидов и инвалидов Методическое письмо о проведении государственной итоговой аттестации по образовательным программам основного общего и среднего общего образования по математике в форме государственного выпускного экзамена (письменная и устная формы) Методическое письмо о проведении государственной итоговой аттестации по образовательным программам основного общего и среднего общего образования по русскому языку в форме государственного выпускного экзамена (письменная и устная формы)

34

Нормативные правовые акты

Региональные

Приказы департамента образования Кировской области

от 03.03.2014 № 5-222 «Об утверждении Положения о государственной экзаменационной комиссии по проведению государственной итоговой аттестации по образовательным программам основного общего образования в Кировской области»

от 22.04.2014 № 5-501 «Об утверждении Порядка обеспечения доставки и хранения экзаменационных материалов для проведения государственной итоговой аттестации по образовательным программам основного общего образования на территории Кировской области»

от 25.04.2014 № 5-520 «Об утверждении Положения о конфликтной комиссии по проведению государственной итоговой аттестации по образовательным программам основного общего образования в Кировской области»

от 12.01.2015 № 5-1 «Об установлении минимального количества баллов при проведении государственной итоговой аттестации по образовательным программам основного общего образования, подтверждающего освоение образовательных программ основного общего образования, в Кировской области»;

от 14.01.2015 № 5-15 «Об утверждении состава государственной экзаменационной комиссии по проведению государственной итоговой аттестации по образовательным программам основного общего образования в Кировской области в 2015 году»

35

Нормативные правовые акты

Формы ГИА 9

ОГЭ ГВЭ

36

ГИА 9

ОГЭ – использование контрольных измерительных материалов, представляющих собой задания стандартизированной формы

ГВЭ – использование текстов, тем, заданий, билетов (обучающиеся с ОВЗ, дети-инвалиды, инвалиды, УФСИН)

Копия рекомендаций ПМПК – статус обучающегося с ОВЗ

Справка об инвалидности

Отметка по 5-балльной

шкале

«2» «3» «4» «5»

Русский язык

Первичный балл

0 - 5 6 -11 12 -15 16 - 17

Математика

Первичный балл

0 - 3 4 - 6 7 - 8 9 -10

37

Минимальные баллы (ГВЭ)

Отметка по 5-балльной

шкале

«2» «3» «4» «5»

Русский язык

Общий балл 0-14 15-24 25-33, из них не менее 4

баллов по критериям ГК1 – ГК4.

34-39, из них не менее 6

баллов по критериям ГК1 – ГК4.

Математика (минимальный результат – 8 баллов, из них не менее 3 баллов – по модулю

«Алгебра», не менее 2 баллов – по модулю «Геометрия», не менее 2 баллов – по модулю «Реальная математика»)

Общий балл 0-7 8-15 16-22 23-38

38

Минимальные баллы (ОГЭ)

Риски изменения системы перевода баллов:

- Существенное искажение представлений участников образовательного процесса о результатах обучения по программам основного общего образования

- Низкая эффективность обучения по программам среднего общего образования, отсутствие необходимых коррекционных программ

- Неверный прогноз результатов ЕГЭ

Выполнение только заданий по алгебре не является основанием для признания программы курса

«Математика» освоенным.

39

Минимальные баллы (ОГЭ)

Изменения КИМ:

- Варианты состоят из 2 частей

- Задания представлены в режиме сквозной нумерации без буквенных обозначений А, В, С

- Изменена форма записи ответов (инструкция в КИМ к заданию или группе заданий)

40

Совершенствование структуры КИМ

ППЭ – здание (сооружение), которое используется для проведения ОГЭ.

Специально выделенное в здании (комплексе зданий), где расположен ППЭ, место для личных вещей обучающихся.

Для лиц, имеющих медицинские показания для обучения на дому и соответствующие рекомендации психолого-медико-педагогической комиссии, экзамен организуется на дому.

41

Проведение ОГЭ

Руководитель и организаторы ППЭ –

в состав организаторов не входят специалисты по учебному предмету

не допускается привлекать в качестве руководителей и организаторов ППЭ педагогических работников, являющихся учителями обучающихся, сдающих экзамен в данном ППЭ

Уполномоченный представитель ГЭК

Руководитель организации, в помещениях которой организован ППЭ, или уполномоченное им лицо

Технические специалисты –

не допускается привлекать в качестве технических специалистов педагогических работников, являющихся учителями обучающихся, сдающих экзамен в данном ППЭ

Медицинские работники

Специалист по проведению инструктажа и обеспечению лабораторных работ

Экзаменатор-собеседник, ведущий собеседование при проведении устной части экзамена по иностранному языку

Ассистенты (при необходимости) -

не допускается привлекать в качестве ассистентов педагогических работников, являющихся учителями обучающихся, сдающих экзамен в данном ППЭ

Работники, осуществляющие охрану правопорядка

Сопровождающие

42

Лица, привлекаемые к проведению ОГЭ в ППЭ

В аудиториях ППЭ:

рабочее место для организаторов в аудитории

подготовлены часы, находящиеся в поле зрения участников ОГЭ

закрыты стенды, плакаты и иные материалы со справочно-познавательной информацией по соответствующим учебным предметам

43

Проведение ОГЭ в ППЭ

Участникам ОГЭ – запрещается иметь при себе

средства связи,

электронно-вычислительную технику,

фото, аудио и видеоаппаратуру,

справочные материалы,

письменные заметки и иные средства хранения и передачи информации

Лица, допустившие нарушение указанных требований или иное нарушение порядка проведения экзамена,

удаляются из ППЭ

44

Требования к соблюдению порядка проведения ОГЭ

получившие на ГИА неудовлетворительный результат по одному из обязательных учебных предметов

не явившиеся на экзамены по уважительным причинам (болезнь или иные обстоятельства, подтвержденные документально)

не завершившие выполнение экзаменационной работы по уважительным причинам (болезнь или иные обстоятельства, подтвержденные документально)

апелляция которых о нарушении установленного порядка проведения ОГЭ конфликтной комиссией была удовлетворена

результаты которых были аннулированы ГЭК в случае выявления фактов нарушений установленного порядка проведения ГИА, совершенных лицами, привлекаемыми к проведению ГИА

45

Повторный допуск

Обработка и проверка экзаменационных работ занимает не более десяти рабочих дней

Утверждение результатов ГЭК - в течение одного рабочего дня с момента получения результатов проверки экзаменационных работ

Ознакомление - не позднее трех рабочих дней со дня их утверждения ГЭК

46

Ознакомление с результатами ГИА

Апелляция о нарушении установленного порядка

проведения ГИА

Подается в день проведения экзамена на покидая ППЭ

Уполномоченный представитель ГЭК:

- проводит проверку при участии организаторов, не задействованных в аудитории, технических специалистов, ассистентов, общественных наблюдателей, сотрудников УМВД, медицинских работников

- оформляет результаты проверки в форме заключения

- апелляцию и заключение передает в конфликтную комиссию

Апелляция о несогласии с выставленными баллами

Подается в образовательную организацию или

непосредственно в конфликтную комиссию в

течение двух рабочих дней со дня объявления результатов

ГИА

47

Прием и рассмотрение апелляций

8(8332) 71-44-06

[email protected]

48