시퀀스-투-시퀀스 (Sequence-To-Sequence, seq2seq)

정의

입력된 시퀀스로부터 다른 도메인의 시퀀스를 출력하는 모델

 

출처 : https://wikidocs.net/24996

 

활용

• 챗봇 (Chatbot)
• 기계 번역 (Machine Translation)
• 내용 요약(Text Summarization)
• STT(Speech to Text) 

용어정리

- 임베딩 벡터

기계는 텍스트보다 숫자를 잘 처리합니다. 그래서 자연어 처리에서 텍스트를 벡터로 바꾸어 처리를 하는데 
단어들을 벡터화 한 것을 말합니다.

 

출처 : https://wikidocs.net/24996

 

- 컨텍스트 벡터

입력 받은 모든 단어 정보들을 압축해서 하나의 벡터로 만드는데, 이를 컨텍스트 벡터(context vector)라고 합니다. 

 

출처 : https://wikidocs.net/24996

 

- 인코딩

입력받은 문장의 단어들을 압축해서 하나의 컨텍스트 벡터로 만드는 역할을 합니다.

 

- 디코딩

입력받은 문장의 단어들을 압축해서 하나의 컨텍스트 벡터로 만드는 역할을 합니다.컨텍스트 벡터를 입력 받아서 번역된 단어를 한 개씩 순차적으로 출력한다.

 

동작 구조

 

출처 : https://wikidocs.net/24996