UAS, LAS 의 차이

ML의 sequence labeling 의 평가 지표로 UAS와 LAS을 주로 사용하는데, 이 둘 간의 차이를 비교해보자. dependency parsing을 기준으로 설명하며, 해당 자료는 CS224n의 강의에서 가져옴. 1. UAS : Unlabeled Attechment Score의 약자로, 의미론적 관계를 고려하지 않는다.

의미론적 관계를 고려하지 않는다는 말의 의미는 다음과 같다. Universal Dependency(UD) Tag를 고려하지 않는 다는 말인데, UD tag에는 nsubj, ROOT, det, conj, ...

등이 있다. 그러나 UAS에서는 Unlabeled 를 고려하면 이와 같은 relation tag는 고려하지 않고, dependency parsing의 head와 dependent의 관계가 제대로 연결되었는가 만 고려한다.

위의 그림에서 UAS를 구해보자. Gold(정답)와 Parsed(모델예측 결과)에서 가장 오른쪽에 위치한 tag는 신경쓰지 않고, ...