[프롬프트 엔지니어링] AI가 의미를 이해하는 방법과 Transformer
모든 내용의 출처 프롬프트 엔지니어링 챗GPT, 바드, 빙, 하이퍼클로바X까지 한 권으로 끝내기 저자 반병현 / 출판사 생능북스 AI가 단어의 의미를 이해하는 방법 반복되는 힌트(데이터)와 매칭되는 단어(레이블)를 반복하여 입력받다 보면 레이턴트 스페이스에 단어의 의미 저장 ==> 인간이 단어의 의미를 이해하는 방법 Word2Vec = 빈칸 맞추기, 어울리는 단어 찾기 방대한 데이터를 학습하는 과정에서 단어와 단어 사이의 의미 차이 역시 벡터 형태로 표현 가능 ==> 유의어 탐색, 단어들이 가진 관계의 유사도까지 추론 가능 관심 단어 + 문장 → 인코더(손실 압축) → 레이턴트 스페이스상의 벡터 AI, 문장의 의미와 뉘앙스 이해 Seq2Seq(시퀀스 투 시퀀스) : 문장의 의미를 통째로 이해할 수 있는 ..