NLP 기술 발전 엔그램(통계) > 인공신경망(LSTM) > 트랜스포머 > LLM 오늘날 LLM 은 심층신경망의 트랜스포머를 이용한다. 아Decoder > 자연어 생성 Encoder > 자연어 이해Encoder-Decoder 같이 이용 > BART 등 LLM 의 핵심 기능은 Attention LLM 의 핵심 기능은 Attention LSTP 의 단점을 극복하는 LLM 의 Attention Transformer 등장 이후 LLM 의 발전 Transformer 가 2014년에 등장한 이후 LLM 발전은 빠르게 이어지고 있다. 프롬프트 엔지니어링 LLM 에 질의하는 것을 '프롬프트 한다'라고 표현한다. '프롬프트'는 Windows 출시 전에 DOS 에서 등장한 단어다. DOS 를 실행하면 CMD 창에..