Universal Sentence Encoder

요약

문장 단위 임베딩을 사용하여 sentence Representation이나 문장간 유사도 구하는 task에 적절한 임베딩

문장 단위의 임베딩을 사용한 전이학습이 단어 단위의 임베딩을 사용한 것 보다 좋은 성능

Model Toolkit

2개의 모델 모두 문장을 input으로 넣으면 고정된 차원의 임베딩 벡터로 바뀌어서 나옴

1) Transformer

2) DAN(deep averaging network)