МОСКВА, 18 мар - РИА Новости. Нейросеть GigaChat подтвердила знания по математике и компьютерным наукам на уровне выпускника магистратуры и получила оценку "хорошо", сообщили в пресс-службе Сбербанка.
"Нейросеть "Сбера" "ГигаЧат" подтвердила уровень знаний, достаточный для успешной сдачи экзамена по направлению "Математика и компьютерные науки" на уровне выпускника магистратуры. В ходе аттестационного испытания, проведенного на базе Сколтеха, работа модели была оценена аттестационной комиссией на оценку 4 ("хорошо")", - говорится в сообщении.
Проверка проходила в два этапа. Сначала модель прошла тестирование на 500 уникальных вопросах закрытого типа, они охватывали девять тем в области компьютерных наук: алгоритмы и структуры данных, базы данных, кибербезопасность, программное обеспечение, программирование, сети и оборудование, специализированное ПО, управление и искусственный интеллект. Средний показатель правильных ответов модели на вопросы составил 76,9%.
Вторым этапом был очный экзамен с участием аттестационной комиссии, состоящей из докторов технических и физико-математических наук. Эксперты комиссии выбрали три билета из 45, по которым проводили оценку знаний. По итогам очного экзамена модель набрала 7 из 10 баллов, что соответствует итоговой оценке "хорошо".
В пресс-службе добавили, что все задачи были разработаны специально для этого испытания и отсутствовали в открытых базах, что исключало возможность поиска готовых ответов и требовало от нейросети применения реальных знаний.
Для объективной оценки глубины компетенций эксперты не только проверяли ответы, но и задавали уточняющие вопросы, просили объяснить ход рассуждений и анализировали работу модели с нестандартными формулировками, отметили там.
При перепечатке и цитировании (полном или частичном) ссылка на РИА "Новости" обязательна. При цитировании в сети Интернет гиперссылка на сайт http://ria.ru обязательна.
