AI로 쓴 글은 티가 난다: 평균으로의 회귀와 모델 붕괴 AI는 학습 데이터를 평균내 ‘밍밍한 슬롭’을 만들기 쉽고, AI가 쓴 글로 다음 AI를 학습하면 모델이 붕괴한다. 플라톤 동굴·다크시티 비유로 사람의 글이 귀해지는 이유를 정리했습니다.
비개발자를 위한 LLM: 학습·추론·RAG를 한 줄로 잇다 코퍼스→토큰→다음 토큰 예측→역전파로 학습하고, Attention·Softmax·Temperature·KV Cache로 추론한다. 문제 유형에 따라 프롬프트·RAG·파인튜닝을 고른다.