
如何建立時間序列預(yù)測模型?
1. 背景
先來看兩個例子,下面兩幅圖展示了百度在趨勢預(yù)測方面的應(yīng)用案例,一個是世界杯期間的比賽輸贏預(yù)測,另一個是北京各旅游景區(qū)的游客人數(shù)預(yù)測。
這兩幅圖代表了大數(shù)據(jù)環(huán)境下趨勢預(yù)測的典型場景,即事件預(yù)測和時序預(yù)測,本文重點(diǎn)關(guān)注第二幅圖中的場景,即與時間維度相關(guān)的時間序列預(yù)測。
2. 時間序列預(yù)測
時間序列預(yù)測即以時間數(shù)列所能反映的社會經(jīng)濟(jì)現(xiàn)象的發(fā)展過程和規(guī)律性,進(jìn)行引伸外推,預(yù)測其發(fā)展趨勢的方法,簡單來說就是從已知事件測定未知事件。
上圖展示了時間序列的一般趨勢,時間序列數(shù)據(jù)的趨勢變動可分為以下四點(diǎn):
趨勢性:某個變量隨著時間進(jìn)展或自變量變化,呈現(xiàn)一種比較緩慢而長期的持續(xù)上升、下降、停留的同性質(zhì)變動趨向,但變動幅度可能不等。周期性:某因素由于外部影響隨著自然季節(jié)的交替出現(xiàn)高峰與低谷的規(guī)律。
隨機(jī)性:個別為隨機(jī)變動,整體呈統(tǒng)計(jì)規(guī)律。
綜合性:實(shí)際變化情況一般是幾種變動的疊加或組合。預(yù)測時一般設(shè)法過濾除去不規(guī)則變動,突出反映趨勢性和周期性變動。
3. 方法綜述
時間序列預(yù)測法分為傳統(tǒng)的時間序列預(yù)測方法和機(jī)器學(xué)習(xí)方法。傳統(tǒng)的時間序列方法指僅根據(jù)歷史時間序列的趨勢發(fā)展來預(yù)測未來時間序列的趨勢發(fā)展的方法,此類方法通過建立適當(dāng)?shù)臄?shù)學(xué)模型擬合歷史時間趨勢曲線,根據(jù)所建模型預(yù)測未來時間序列的趨勢曲線,常見模型包括ARMA,VAR,TAR,ARCH等。傳統(tǒng)時間序列方法所依賴的數(shù)據(jù)較簡單,只需要?dú)v史時間序列趨勢曲線便可構(gòu)建模型,因此可適用于多種場景,模型較為通用。但是,傳統(tǒng)時間序列預(yù)測法常面臨滯后性問題,即預(yù)測值晚于真實(shí)值幾個時間單位。
為提高預(yù)測的精度,機(jī)器學(xué)習(xí)算法被引入時序預(yù)測,此類方法根據(jù)具體的應(yīng)用場景,選取可能影響預(yù)測值的features,將這些features引入模型,應(yīng)用機(jī)器學(xué)習(xí)的分類/回歸模型來進(jìn)行預(yù)測。為提取features,機(jī)器學(xué)習(xí)方法需要多個維度的數(shù)據(jù),預(yù)測精度較高,建立的模型較為復(fù)雜,但是模型往往不夠通用,針對不同應(yīng)用場景需要重新提取features,建立模型?,F(xiàn)實(shí)預(yù)測中,機(jī)器學(xué)習(xí)方法往往結(jié)合傳統(tǒng)時序預(yù)測法來運(yùn)用。
4. ARIMA模型
ARIMA模型全稱自回歸積分滑動平均模型(Autoregressive Integrated Moving Average Model),是經(jīng)典的時間序列預(yù)測方法,我們從ARIMA模型入手,進(jìn)行了實(shí)時趨勢預(yù)測的初步探索。
ARIMA模型公式分為自回歸(AR)和移動平均(MA)兩部分,p為自回歸項(xiàng)數(shù),q為移動平均項(xiàng)數(shù),為保證時間序列的平穩(wěn)性,往往需對時間序列做d階差分。自回歸方法基于假設(shè)當(dāng)前時期的指標(biāo)值依賴于過去時期的指標(biāo)值,對過去時期的指標(biāo)值進(jìn)行加權(quán)平均得到當(dāng)前的指標(biāo)值;移動平均方法的思想是模擬指標(biāo)值的隨機(jī)性,指標(biāo)值受白噪聲序激勵的影響。
5. 預(yù)測實(shí)驗(yàn)
我們采用了某個業(yè)務(wù)的ctr數(shù)據(jù),分別以分鐘為單位和以小時為單位進(jìn)行預(yù)測,希望可以準(zhǔn)確預(yù)測下一時間單位(分鐘,小時)的ctr。
分鐘ctr預(yù)測(一天內(nèi)的ctr變化情況):
局部細(xì)節(jié)展示:
小時ctr(一周內(nèi)的小時ctr變化情況):
6. 展望
大數(shù)據(jù)時代的時序預(yù)測得到越來越多的關(guān)注,能夠準(zhǔn)確預(yù)測趨勢是時序預(yù)測的基礎(chǔ)應(yīng)用,其他場景如異常檢測等也應(yīng)用了時序預(yù)測方法,我們期待時序預(yù)測能夠有更多的應(yīng)用場景,比如通過精準(zhǔn)預(yù)測,發(fā)現(xiàn)可能出現(xiàn)的突發(fā)事件以提高應(yīng)對措施;加入空間維度,產(chǎn)生時空組合下的預(yù)測,提高預(yù)測的實(shí)際應(yīng)用價值,比如通過預(yù)測滴滴打車某一地區(qū)的打車人數(shù),引導(dǎo)用戶和出租車,產(chǎn)生更好的資源利用;精準(zhǔn)的金融預(yù)測,如預(yù)測理財(cái)通的買入買出數(shù)額,以幫助管理者合理指定策略等。這里初步探索的ARIMA模型是通用場景下的時序預(yù)測,在具體應(yīng)用場景下,預(yù)測可以做的更精確。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報(bào)考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計(jì)的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報(bào)考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗(yàn):捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計(jì)學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計(jì)學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03