
似乎我們的快速網路新聞世界的缺點之一是通常很難區分真實內容和虛假內容。任何新的聳人聽聞的故事似乎都會產生大量持有不同觀點的部落格、文章和推文。如果有一個工具能夠真正理清所有這些噪音並幫助我們找到真相,那不是很好嗎?雖然不存在可以立即告訴我們該看什麼的“神奇八球”,但有一些更新的分析方法可能會有所幫助。文本探索是在句子、評論和文本中尋找模式的能力。讓我們看看這個方法是否可以幫助我們在一個在我所在的地區引起轟動的新故事中找到真相!
德州中部春天的標誌之一就是欣賞田野和路邊盛開的五顏六色的野花。特別重要的是看看矢車菊有多豐富,它是我們的官方州花中最美麗的野花。身為一個忠誠的德州人,你似乎每年春天都會榮幸地把你的家人拖出來,在矢車菊田裡給他們拍照。然而,最近一張不祥的圖片(見上圖)被發佈在德州山鄉村臉書頁面並像野火一樣在網路上傳播。這張照片的描述警告人們發現了一條響尾蛇,它是透過呈現藍色進化而來並隱藏在矢車菊中的!這種被稱為“德克薩斯州矢車菊響尾蛇”的現象引起了恐慌,並在互聯網上產生了許多不同的意見,從如何稱呼這種新響尾蛇的學名,甚至如果您在拍攝下一張矢車菊照片時被蛇咬傷該怎麼辦!
為了看看這種新方法是否可以幫助找到一些真相,我們首先複製九篇隨機文章的全文文本,並將它們直接複製到 JMP 資料表列中。然後,我們使用 JMP 文字瀏覽器來尋找所有這些文章中最常出現的單字和片語。為此,文本資源管理器首先通過已知廣義表達式庫(通常稱為標記化)運行所有這些文本,以首先從分析中刪除無用的文本(例如:句點和逗號等標點符號,連接“and”或“but”等單字) ”)。文本探索還可以組合相似的單字(通常稱為詞幹提取)(例如將「失敗、失敗、失敗、失敗」分組到一個詞根「失敗」下)。這給我們留下瞭如下所示的術語和短語列表,其中總共包含 539 個項目(請參閱下面的術語和短語列表的一部分的快照)

然後,我們可以透過刪除更多不想要的術語(稱為新增停用詞)並組合邏輯上屬於在一起的其他術語來編輯和縮短此術語清單。透過重新編碼組合「找到/發現」等單字並添加有用的短語(例如「愚人節」)幫助我們創建了下面的新術語和短語列表,其中包含的總項目數量減少了 16 個。(有關縮減的期限和階段列表,請參見下文)

最後,我們將透過在稱為詞雲的圖形佈局中可視化結果來更好地進行分析。這是「有序佈局」的一個版本,其中最大的術語首先列出,並給出更大的字體大小。一些大術語並不令人意外,因為我們預計所有文章都包含「響尾蛇、矢車菊和照片」等字眼。但是,在我們的詞雲中向下列出,我們會遇到更大的單字實例,表明這個故事可能是假的(請參閱下面詞雲中的“愚人節,假/惡作劇/笑話/惡作劇”) ,然後再遇到表明該故事的單字故事是真實的(參見下面詞雲中的“真實/事實/真實”)。

事實上,如果我們突出顯示圖形中的單字/短語(“愚人節、假/惡作劇/笑話/惡作劇”和“神話/揭穿/陷阱”),我們可以直接轉到包含這些文字元素的文章。使用此顯示文字功能,我們能夠將注意力集中在我們需要查看以揭開真相的文章上。

這將我們引向九篇文章之一的文本https://www.hoaxorfact.com/Pranks/texas-blue-bonnet-rattlesnake-new-species-discovered-facts.html該公司不僅將此報導為騙局,還進一步發現該圖片實際上是經過數位修改的典型西部響尾蛇,可在 Wikipedia.org 上找到。看看下面的圖片比較,我們現在非常確定這只是一個愚人節玩笑,我們應該不要害怕在矢車菊田裡拍照!

正如我們所看到的,文本探索是一個非常靈活和強大的工具,它為我們對資訊的理解添加了更多資訊!它是否可以應用於更大的應用程序,例如政治世界,我們可以使用這種方法來分類假新聞?有可能,但我們不得不希望那些導致真相的話語比那些誤導或提供虛假資訊的話語更頻繁地被報導。 因此,也許這使得挑戰我們所聽到的並始終尋求/報告真實真相的需要變得更加重要。 否則我們都會很容易被誤導,正如史蒂夫厄爾在他的經典歌曲“蛇油”中警告的那樣:
「女士們、先生們,請注意,
靠近點讓大家都能看到
我有一個故事要說
聽一聽不花一毛錢
如果你相信我們會相處得很好”