빠른 인터넷 뉴스 세계의 단점 중 하나는 실제 콘텐츠와 가짜 콘텐츠를 구분하기가 어렵다는 것입니다.새롭고 선정적인 이야기는 서로 다른 의견을 담은 수많은 블로그, 기사, 트윗을 생성하는 것처럼 보입니다.이 모든 소음을 실제로 분류하고 진실을 찾는 데 도움이 되는 도구가 있다면 좋지 않을까요?무엇을 보아야 할지 즉시 알려줄 수 있는 "마법의 8구"는 없지만 도움이 될 수 있는 새로운 분석 방법이 있습니다.텍스트 탐색은 문장, 댓글, 텍스트의 본문에서 패턴을 찾는 기능입니다.이 방법이 내가 살고 있는 세계에서 큰 반향을 불러일으킨 새로운 이야기에서 진실을 찾는 데 도움이 될 수 있는지 살펴보겠습니다!
텍사스 중부 지역의 봄을 알리는 신호 중 하나는 들판과 길가를 따라 다채로운 색상으로 피어나는 야생화를 감상하는 것입니다.특히 중요한 것은 우리의 공식 주화인 야생화 중 가장 아름다운 블루보닛(Bluebonnets)이 얼마나 풍부한지 확인하는 것입니다.충성스러운 텍사스 주민으로서 당신은 매년 봄에 가족을 데리고 나가서 Bluebonnet 패치에서 사진을 찍는 것을 영광으로 생각합니다.그러나 최근 불길한 사진(위 참조)이 게시되었습니다. 텍사스 힐 컨트리 페이스북 페이지 인터넷 전체에 들불처럼 퍼졌습니다.이 사진의 설명은 푸른색을 띠고 블루보넷 속에 숨어 진화한 방울뱀의 발견을 경고했습니다!"텍사스 블루보닛 방울뱀"이라고 불리는 이 사건은 공포를 불러일으켰고 이 새로운 방울뱀을 어떤 학명으로 부를지부터 다음 번 블루보닛 사진을 찍는 동안 뱀에게 물린 경우 어떻게 해야 하는지까지 인터넷에서 다양한 의견을 불러일으켰습니다!
이 새로운 방법이 진실을 찾는 데 도움이 되는지 확인하기 위해 우리는 9개의 무작위 기사에서 텍스트 전체를 복사하는 것부터 시작하여 이를 JMP 데이터 테이블 열에 직접 복사했습니다.그런 다음 JMP 텍스트 탐색기를 사용하여 모든 글에서 가장 자주 나타나는 단어와 문구를 찾았습니다.이를 수행하기 위해 텍스트 탐색기는 먼저 알려진 일반 표현식(종종 토큰화라고 함) 라이브러리를 통해 이 모든 텍스트를 실행하여 먼저 분석에서 도움이 되지 않는 텍스트를 제거합니다(예: 마침표 및 쉼표와 같은 구두점, "and" 또는 "but와 같은 단어 연결). ").텍스트 탐색은 유사한 단어(종종 형태소 분석이라고 함)를 결합할 수도 있습니다(예: "실패, 실패, 실패, 실패"를 하나의 루트 단어 "실패" 아래에 그룹화).그러면 아래에 보이는 것처럼 총 539개의 항목이 포함된 용어 및 구문 목록이 남습니다(용어 및 구문 목록의 일부에 대한 스냅샷은 아래 참조).
그런 다음 원치 않는 용어를 추가로 제거하고(불용 단어 추가라고 함) 논리적으로 함께 속하는 다른 용어를 결합하여 이 용어 목록을 편집하고 단축할 수 있습니다.녹음을 통해 "발견/발견"과 같은 단어를 결합하고 "만우절"과 같은 유용한 문구를 추가하면 총 16개 항목의 감소된 양을 포함하는 아래의 새로운 용어 및 문구 목록을 만드는 데 도움이 되었습니다.(축소된 기간 및 단계 목록은 아래 참조)
마지막으로 Word Cloud라는 그래픽 레이아웃으로 결과를 시각화하여 분석을 더욱 효과적으로 수행하겠습니다.이는 가장 큰 용어가 먼저 나열되고 더 큰 글꼴 크기가 제공되는 "순서 있는 레이아웃" 버전입니다.모든 기사에 "방울뱀, 블루보닛 및 사진"이라는 단어가 포함될 것으로 예상하기 때문에 일부 큰 용어는 그리 놀랄 일이 아닙니다. 그러나 단어 클라우드의 목록을 아래로 내려가면 이 이야기가 가짜일 수 있음을 나타내는 더 큰 단어 인스턴스를 만나게 됩니다(아래 단어 클라우드의 "만우절, 가짜/사기/농담/장난" 참조). 이야기는 실제입니다(아래 단어 구름에서 "실제/사실/사실" 참조).
실제로 그래픽에서 단어/문구("만우절, 가짜/사기/농담/장난" 및 "신화/사실을 폭로/알았어")를 강조 표시하면 이러한 텍스트 요소가 포함된 기사로 바로 이동할 수 있습니다. .이 텍스트 표시 기능을 사용하여 진실을 밝히기 위해 꼭 봐야 할 기사에만 주의를 집중할 수 있었습니다.
그러면 9개 기사 중 하나의 텍스트가 나옵니다. https://www.hoaxorfact.com/Pranks/texas-blue-bonnet-rattlesnake-new-species-discovered-facts.html 그들은 이것을 사기로 보고했을 뿐만 아니라 그 사진이 실제로 Wikipedia.org를 통해 볼 수 있는 전형적인 서부 다이아몬드 방울뱀 중 디지털 방식으로 변경된 것임을 발견했습니다.아래 사진의 비교를 보면 이제 이것이 단지 좋은 만우절 농담이었다는 것을 확신할 수 있으며 블루보넷 패치에서 사진을 찍는 것을 두려워해야 합니다!
보시다시피 텍스트 탐색은 정보 이해에 더 많은 정보를 추가하는 매우 유연하고 강력한 도구입니다!가짜 뉴스를 분류하기 위해 이 접근 방식을 사용할 수 있는 정치 세계와 같은 더 큰 응용 프로그램에 적용될 수 있습니까?그럴 수도 있겠지만, 우리는 진실로 이끄는 말이 오해를 불러일으키거나 거짓 정보를 제공하는 말보다 더 자주 보도되기를 바랄 것입니다. 따라서 아마도 이것은 우리가 듣는 것에 도전하고 항상 실제 진실을 찾고/보고해야 할 필요성에 대해 더 큰 중요성을 부여합니다. 그렇지 않으면 Steve Earl이 그의 클래식 노래 "Snake Oil"에서 경고한 것처럼 우리 모두는 쉽게 오해를 받게 될 것입니다.
“신사숙녀 여러분, 주목해 주십시오.
모두가 볼 수 있도록 가까이 다가가세요.
할 이야기가 있는데,
듣는 데는 한 푼도 들지 않습니다.
그리고 만약 당신이 우리가 잘 지낼 수 있을 것이라고 믿는다면”
