幾週前,華盛頓郵報發了言一張廣為流傳的圖表華盛頓特區,最近就職典禮和1月21日女性三月的地鐵早上乘客數量。大事件出勤次數可能難以計算,並且即使計數僅與出勤次數大致相關,乘客數也會給對話帶來吸引人的客觀性。有些參加者不乘坐地鐵,有些車手不參加活動;但是,當計數異常時,必須繼續進行。
為了確定它們是否特殊,我們需要將計數放在上下文中,因此我著手尋找DC Metro的每日乘客數據。我找到的最好的是每日乘客量估計值打開數據DC 2004年至2015年。雖然不是最新的,但通過查看2010年舉行的典型計數,三次就職典禮和兩次週六集會,足以給出所引用數字的一些背景: 恢復榮譽 (格倫貝克)和恢復理智和/或恐懼 (Jon Stewart和Stephen Colbert)。我參加了恢復理智集會和那天早上乘坐地鐵,兩人都是身體對抗擁擠,所以我把它作為體驗基線。
數據的初始視圖
以下是對計數數據的初步了解 JMP 。即使在這種粗略的視圖中,一些異常值和模式也會跳出來。

我們已經可以看到一個與2009年就職典禮相對應的突出異常值。低和高群集表明至少有兩種類型的天,按星期幾分組驗證工作日是最大的群集。

然而,工作日仍有大量的異常值,特別是星期一。徘徊在其中幾個上面證實了我懷疑那些是假期。按星期幾分割圖表是一個簡單的右鍵單擊轉換,但是 JMP 不知道美國假期,所以我寫了一個腳本來標記官方假期,然後將它們與星期日結合起來以獲得概覽圖。

我標記了幾個值得注意的日子,並添加了更順暢的表現明顯的季節性模式(稍後會詳述)。通過分類,我們可以看到2009年MLK假期,即2009年就職典禮前一天,以及2013年就職典禮/ MLK假期,在假期的背景下也是例外。
最近的乘客數量不在此數據集中。但據華盛頓都市區交通管理局(WMATA)稱,2017年就職典禮的數量為570,000。華盛頓郵報的文章而2017年女子三月的成績僅為100多萬,根據WMATA的推文 。
Restore Sanity集會在典型的周六乘客量級(800,000對300,000)中脫穎而出;但是,確定就職日期的正確基線並不容易。就職日是聯邦工作人員的當地假期。為了估計其影響,我們可以使用2013年勞工統計局的數據,該數據顯示,DC有大約740,000名工人,其中20萬人是聯邦工人。典型的工作日乘客量大約為70萬人,幾乎每人每次乘坐一次(大概有一半的工人每次乘坐地鐵兩次)。按照這一比例,在就職日將減少約200,000名工人車手,並且可能還有一些非聯邦工作人員也將參加就職日。這將使基線就職日的乘客數量達到400,000至500,000。
如果你想知道一些未標記的異常值,你可以試試這個圖表的交互式版本並將鼠標懸停在興趣點上。週六其他高的乘客數量主要是四月初的國家櫻花節。許多高假期都是為了獨立日。寒冷的冬天是暴風雨。
注意心靈的錯誤!
在Twitter上分享了上面的圖表之後,我更加關注季節性模式,並意識到我已經墮落了所有三個認知陷阱,Alberto Cairo在他的書中描述為“心靈錯誤” 真實的藝術 :模式性,講故事和確認。
我看到了一個上下圖案在點,創造了一個故事在我看來,乘客與季節有關,而且確認它通過添加樣條平滑器,具有正弦波外觀。幸運的是,我並沒有完全按照這個確認進行銷售,並且意識到無論數據是什麼樣的,樣條平滑器都被限制為平滑,並且11年的波動可能太多而無法理清。所以我打算在每年的日子裡仔細查看數據。該圖顯示了所有11年的工作日。

現在我可以看到圖案不是那麼正弦。我們有一些局部效應,而不是隨季節流動的乘客。最大的是一年中最後幾週的下降,而第100天左右的小幅下滑可能是春季的國家櫻花節。我想遊客可以說是夏天的顛簸,但是八月的下降呢?這是當地人度假以逃避高溫和濕度?或者是因為國會通常在8月份離開?(DC居民:請在評論中告訴我!)
在意識到我的季節性故事是錯誤的之後,我用更簡單的更平滑的方式重新編制了我的整體圖表,這顯示了多年來乘客的長期趨勢。

我仍在尋找更完整的數據,但這個數據集一直很有趣。我學到了很多關於人們如何使用DC Metro的知識!親身體驗心靈錯誤為分析探索提供了一個很好的教訓。最後,我想我想出了一個提供一些有用背景的圖表。
有趣的看著交互式HTML版本。 有一些極端低數天。 能夠看到日期,看起來很多是由於天氣相關的事件。 特別是,2012年10月29日和30日的“零點數”和接近零點的天數是針對颶風桑迪的,聯邦政府於30日關閉 。 另一天,在2010年非常低,這是一個“ 暴風雪事件 “。 與任何中等到大數據一樣,這些點的影響在您的分析中可能不會很大,但我總是想了解這些異常值來自何處。 更詳細的數據清理可能會查找所有惡劣天氣事件,並將它們與週末和假日組分組。