|
|
От
|
Филич
|
|
|
К
|
Бульдог
|
|
|
Дата
|
02.06.2023 23:09:17
|
|
|
Рубрики
|
Современность;
|
|
Re: Открываем "Гардиан"
На 24-х часовых соревнованиях по программированию IEEEXtreme поставили эксперимент и привлекли к участию ChatGPT. https://arxiv.org/abs/2305.06934
Результаты не впечатлили.
Language Complexity Avg Avg
ChatGPT Score Human Score
-----------------------------------------------------------
Python 3 Easy 22.17 51.96
Hard 8.69 46.70
Medium 1.53 38.99
Advanced 3.19 21.89
-----------------------------------------------------------
Java 7 Easy 30.06 51.96
Hard 9.21 46.70
Medium 4.24 38.99
Advanced 0.00 21.89
-----------------------------------------------------------
C++ Easy 22.02 51.96
Hard 4.35 46.70
Medium 4.64 38.99
Advanced 0.00 21.89