Смешное: как я ни пытался заставить ChatGPT-4 (!) закодить простейшую задачку на питоне -- сгенерировать список всех файлов и каталогов в заданном каталоге, включая список всех файлов и каталогов одного уровня вложенности если включён флажок (простая задачка для моих начинающих курсантов с околонуля), оно так и не смогло.

Генерит код, который при флажке выдаёт все вложенные подкаталоги (оно и понятно, тупо берёт os.walk). И как я не возмущался и не уточнял что и как именно надо сделать, так и не исправилось. Ну, за такое даже из стажёров сразу выгоняют.

Может и вышло бы, если целый час детально уточнять и мучить промтами на такой элементарной задачке, что требуется; да, но час сеньора стоит в 10 раз дороже часа джуниора.

А вы говорите, скоро заменит профессиональных программистов....

С другой стороны, никто и не обещал, что AI действительно буквально будет писать любой код, нет конечно. Его относительный успех в кодинге объясняется прежде всего тем, что миллионы программистов (да и вообще белковые мозги в целом) мыслят крайне шаблонно, и число типовых приёмов в programming in small оказалось невелико, сотни, может быть тысячи, их надо просто уметь комбинировать. Если задача похожа на что-то ранее решавшееся, может быть решена по аналогии короткой комбинацией паттернов, то AI дописывает, а если хотя бы немного оригинальное, где надо немножечко оригинально подумать в формате символьных вычислений, сразу пасует. На codeforces например AI откровенно зашкварилось, вообще ничего не может.