Ich hoffe, es wird vielen JMP-Benutzern in Korea hilfreich sein!
불용어(Stoppwörter) Updateverlauf
Erstveröffentlichung 2021-07-21 (693개)
Aktuelle Veröffentlichung 30.07.2021 (2.256개)
2022년 10월 JMP 17 Text Explorer . JMP 17 Early Adopter Koreanisch TE 만나보실 수 , 통한 Koreanisch TE 활용방법을 아래 링크와 같이 .
JMP를 활용한 한국어 텍스트 분석(koreanische Textanalyse)
Text Mining 기법을 활용하기 위해선 자연 언어 (NLP: Natural Language Processing)가 우선되어야 하며, NLP 방법론에서도 아래 링크에 정리된 것처럼 여러 복잡한 형태소 분석(morphologische Analyse) 기능이 요구되기도 합니다.
한국어 형태소 분석기
한글의 경우 단순히 공백(Leerzeichen), 쉼표 등의 구분자로 단어를 구분한다거나, 수많은 품사(명사/동사/형용사/부사/조사/지시대명사 등)와 함께 파생어 또한 복잡한 구조로 되어 있어 자연어 처리가 쉽지 않다는 단점이 있습니다. 위에 링크로 안내드린 형태소 알고리즘도 저마다의 장단점을 , 완벽한 형태소 분석은 불가능 한 것으로 .
JMP 17버전에서 Text Mining 같은 형태소 지원하지 . 공개가능한 한글단어사전(약 80만개 단어)를 통해 Begriff / Phrase를 구분하게 되어 있습니다. 따라 사전에는 있으나 분석자가 않는 단어가 분석결과에 포함되는 경우가 자주 발생하게 .
"세우"라는 단어를 예로 들어보겠습니다(해양생물인 "새우"가 아닙니다). "세우"를 네이버 한글사전으로 검색 해 보면 아래와 같은 결과를 얻게 됩니다.
분석자(Analyst)는 , . 판단하면 분석결과에 포함시키겠지만 의미가 아래와 같이 불용어로 등록하여 분석결과에서 제외시키면 .
JMP가 무리가 . 이러한 경우가 많이 발생할 있게 됨에 따라 있어서의 단어 선택여부는 분석자의 의사결정이 중요하게 .
단어의 포함여부에 대해 (無)에서 시작하기엔 가게 .
JMP Korea Team은 첨부와 같이 불용어 사전 파일(Textdatei)을 공유드리고자 합니다. 해당 파일은 본 포스팅을 통해 지속 업데이트 예정입니다. 다운로드 받으신 후 본인만의 사전을 만들어 . 다운받으신 파일은 아래 경로에 저장하시면 됩니다.
C:\Benutzer\(Persönliche ID)\AppData\Roaming\SAS\JMP\TextExplorer\ko
JMP 17 , Analysieren >> Text Explorer >> Sprache >> Koreanisch으로 지정하시면 한글 사전(80만 단어)이 다운로드되면서 생성됩니다. 해당 경로는 숨김처리되어 있어, 윈도우 탐색기에서 보시려면 탐색기 >> 보기 >> 숨긴 항목 >> 해 주시면 됩니다.
물론, 첨부된 불용어 직접 수정하여 사용하셔도 .
.
