На 24-х часовых соревнованиях по программированию IEEEXtreme поставили эксперимент и привлекли к участию ChatGPT. https://arxiv.org/abs/2305.06934
Результаты не впечатлили.
Language Complexity Avg Avg
ChatGPT Score Human Score
-----------------------------------------------------------
Python 3 Easy 22.17 51.96
Hard 8.69 46.70
Medium 1.53 38.99
Advanced 3.19 21.89
-----------------------------------------------------------
Java 7 Easy 30.06 51.96
Hard 9.21 46.70
Medium 4.24 38.99
Advanced 0.00 21.89
-----------------------------------------------------------
C++ Easy 22.02 51.96
Hard 4.35 46.70
Medium 4.64 38.99
Advanced 0.00 21.89
В интернете задают много вопросов начинающие программисты и получают простые ответы. Поэтому результаты не впечатлили.
Признаком "осмысленного" программирования ИИ будет не читаемый и не понимаемый человеком код. ИИ не будет ограничен условностями при создании кода, которыми подвержен человек и которые вынуждают его писать понятный на глаз код.
>Признаком "осмысленного" программирования ИИ будет не читаемый и не понимаемый человеком код. ИИ не будет ограничен условностями при создании кода, которыми подвержен человек и которые вынуждают его писать понятный на глаз код.
Чат не может работать иначе кроме как методом копипасты : найти похожее в Интернете и передрать самое правдоподобное.Само собой, на сложных задачах это не работает, так как их аналогов нет в Интернете.Потому - только когда бот выйдет за пределы анализа текстов, а он не может, так как таким образом сконструирован.