어휘 정규화
Lexical Normalization은 자연어 처리의 하위 작업으로, 비표준 텍스트를 표준 언어로 변환하는 것을 목표로 합니다. 이 작업은 어휘 수준의 치환에 초점을 맞추며, 단어 순서 조정이나 추가/삭제는 포함하지 않습니다. 소셜 미디어 플랫폼 등에서 발생하는 비표준 언어 현상을 해결함으로써 Lexical Normalization은 텍스트 데이터의 품질을 개선하고, 이후 NLP 작업의 정확성과 신뢰성을 높일 수 있습니다.
Lexical Normalization은 자연어 처리의 하위 작업으로, 비표준 텍스트를 표준 언어로 변환하는 것을 목표로 합니다. 이 작업은 어휘 수준의 치환에 초점을 맞추며, 단어 순서 조정이나 추가/삭제는 포함하지 않습니다. 소셜 미디어 플랫폼 등에서 발생하는 비표준 언어 현상을 해결함으로써 Lexical Normalization은 텍스트 데이터의 품질을 개선하고, 이후 NLP 작업의 정확성과 신뢰성을 높일 수 있습니다.