본문 바로가기

Study

Greedy Search

argmax 설명

 

과거에 출력되었던 단어들을 기반으로 뽑는게 아니라, 모든 가능한 단어를 전수 조사해서 가장 확률을 극대화 시킬 수 있는 한 단어를 뽑는 방식이다. 

하지만 단어 한 개씩을 서칭해 나가기 때문에 사실상 시퀀스 공간보다는 훨씬 작은 공간에서 적합한 단어를 찾아나가는 방식이고, 만약 우리가 1스텝에서라도 문법 상 실수를 하게 된다면 전체 문장의 번역 합격 여부에 돌이킬 수 없이 큰 실수가 된다는 점에서 추천하지 않는다.

반응형

'Study' 카테고리의 다른 글

NLP(자연어처리) - Language Model (언어 모델)  (0) 2020.07.07
Markov Process  (0) 2020.04.07
Optimizer : RAdam - Rectified Adam  (0) 2020.03.19
자연어 언어 모델  (0) 2020.03.12
자연어 처리  (0) 2020.03.11