Не знаю насчёт gpt-4, но gpt-3 без помощи программиста мало что может написать. Он может лишь направить, подсказать идею, дать полурабочий код какого-то отдельного участка приложения, а доделывать придется программисту.
Инженеры Микрософта говорят что у него уровень начинающего и серьезный крупный проект chatGPT сгенерировать не может. Сильно похоже на правду, если посмотреть на тот код от него которым здесь повадились спамить школьники