機(jī)器學(xué)習(xí)中的范數(shù)規(guī)則化之 L0、L1與L2范數(shù) 今天我們聊聊機(jī)器學(xué)習(xí)中出現(xiàn)的非常頻繁的問題:過擬合與規(guī)則化。我們先簡單的來理解下常用的L0、L1、L2和核范數(shù)規(guī)則化。最后聊下規(guī)則化項(xiàng)參數(shù)的選擇問題。這里因?yàn)槠?...
2017-05-11Python里面的矩陣與矢量化運(yùn)算 Python在數(shù)據(jù)挖掘、數(shù)據(jù)分析中用的很多。最基礎(chǔ)的矩陣與矢量化運(yùn)算需要掌握。 需要下載安裝的包:Numpy Windows下cmd窗口輸入以下命令即可成功安裝 ...
2017-05-11R語言學(xué)習(xí)之矩陣 很多人是在線性代數(shù)課學(xué)的矩陣,當(dāng)時(shí)什么問題都沒有,除了一個(gè)問題:學(xué)習(xí)矩陣到底有什么用呢?矩陣是一個(gè)集合,它里面可以存放很多對象,比如一個(gè)行就是一個(gè)對象(或者說記錄),每一個(gè)對象又 ...
2017-05-11R語言中的數(shù)組和列表 R語言中的數(shù)組與其它語言數(shù)組類似,它是一種高維的數(shù)據(jù)結(jié)構(gòu)。維數(shù)過高運(yùn)算會很不方便,所以用的很少,這里介紹是本著不落下任何知識點(diǎn)的目的。萬一以后遇到了,雖然不方便,還是可以進(jìn)行運(yùn) ...
2017-05-11SPSS:如何進(jìn)行探索分析 探索分析是在對數(shù)據(jù)的基本特征統(tǒng)計(jì)量有初步了解的基礎(chǔ)上,對數(shù)據(jù)進(jìn)行的更為深入詳細(xì)的描述性觀察分析。它在一般描述性統(tǒng)計(jì)指標(biāo)的基礎(chǔ)上,增加了有關(guān)數(shù)據(jù)其他特征的文字與圖形描述,顯得 ...
2017-05-10SPSS分析技術(shù):多重線性回歸模型;極端值與多重共線性的識別與處理 如果擬合質(zhì)量不好,可能存在的問題主要有以下兩個(gè)方面: 極端值(強(qiáng)點(diǎn))的影響。我們都知道,在線性回歸分析中,自變量回歸系數(shù)的確定主要 ...
2017-05-10SPSS詳細(xì)操作:碰見有序分類資料,怎么辦 經(jīng)常聽到有小伙伴剛學(xué)了武林秘籍之卡方檢驗(yàn),只要碰到分類資料就一通亂打,雖說有時(shí)候能贏幾場,但是也有被打的鼻青臉腫的,還自言自語的說,招數(shù)沒毛病呀!?事實(shí)上毛 ...
2017-05-10機(jī)器學(xué)習(xí)項(xiàng)目中的數(shù)據(jù)預(yù)處理與數(shù)據(jù)整理之比較 要點(diǎn) 在常見的機(jī)器學(xué)習(xí)/深度學(xué)習(xí)項(xiàng)目里,數(shù)據(jù)準(zhǔn)備占去整個(gè)分析管道的60%到80%。 市場上有各種用于數(shù)據(jù)清洗和特征工程的編程語言、框架和工具。它們之間的 ...
2017-05-10SPSS語法的使用 通過使用強(qiáng)大的命令語言,您可以保存并自動執(zhí)行許多常規(guī)任務(wù)。它還提供一些在菜單和對話框中沒有的功能。大多數(shù)命令可以從菜單和對話框訪問。但是,某些命令和選項(xiàng)只能通過命令語言使用。命令語 ...
2017-05-10如何將連續(xù)變量創(chuàng)建為變量 要?jiǎng)?chuàng)建分類變量inccat: 從數(shù)據(jù)編輯器窗口的菜單中選擇: 轉(zhuǎn)換> 可視離散化... 在初始的“可視離散化”對話框中,選擇要為其創(chuàng)建新的離散化變量的刻度變量和/或 有序變 ...
2017-05-10R文本分類之RTextTools 古有曹植七步成詩,而RTextTools是一款讓你可以在十步之內(nèi)實(shí)現(xiàn)九種主流的機(jī)器學(xué)習(xí)分類器模型的文本分類開發(fā)包。 它集成了(或者說支持)如下算法相關(guān)的包: 支持向量機(jī)(Support Vec ...
2017-05-09Python中的線性代數(shù)運(yùn)算 這里,為了熟悉Python語言的特性,我們采用一種最原始的方式去定義線性代數(shù)運(yùn)算的相關(guān)函數(shù)。如果是真實(shí)應(yīng)用場景,則直接使用NumPy的函數(shù)即可。 1.向量 創(chuàng)建一個(gè)向量 我們可以把P ...
2017-05-09使用Python進(jìn)行線性回歸 線性回歸是最簡單同時(shí)也是最常用的一個(gè)統(tǒng)計(jì)模型。線性回歸具有結(jié)果易于理解,計(jì)算量小等優(yōu)點(diǎn)。如果一個(gè)簡單的線性回歸就能取得非常不錯(cuò)的預(yù)測效果,那么就沒有必要采用復(fù)雜精深的模型了 ...
2017-05-09干貨 :用戶細(xì)分的流程與方法 通常,用戶細(xì)分既不是分析的不是起點(diǎn)也不是分析的終點(diǎn),而是伴隨某個(gè)特定的分析而存在。精準(zhǔn)化營銷,需要用戶細(xì)分,譬如你擁有同城的數(shù)十萬消費(fèi)者的資料數(shù)據(jù)庫,隨時(shí)為有需要的同 ...
2017-05-09三張圖讀懂機(jī)器學(xué)習(xí):基本概念、五大流派與九種常見算法 機(jī)器學(xué)習(xí)正在進(jìn)步,我們似乎正在不斷接近我們心中的人工智能目標(biāo)。語音識別、圖像檢測、機(jī)器翻譯、風(fēng)格遷移等技術(shù)已經(jīng)在我們的實(shí)際生活中開始得到了應(yīng)用 ...
2017-05-09為什么你的數(shù)據(jù)分析那么好,圖表做得那么爛 所有優(yōu)秀的數(shù)據(jù)可視化依賴優(yōu)異的設(shè)計(jì),并非僅僅選擇正確的圖表模板那么簡單。全在于以一種更加有助于理解和引導(dǎo)的方式去表達(dá)信息,盡可能減輕用戶獲取信息的成本。當(dāng) ...
2017-05-09寫論文,沒數(shù)據(jù)?R語言抓取網(wǎng)頁大數(shù)據(jù) 縱觀國內(nèi)外,大數(shù)據(jù)的市場發(fā)展迅猛,政府的扶持也達(dá)到了空前的力度,甚至將大數(shù)據(jù)納入發(fā)展戰(zhàn)略。如此形勢為社會各界提供了很多機(jī)遇和挑戰(zhàn),而我們作為衛(wèi)生(醫(yī)學(xué))統(tǒng)計(jì)領(lǐng)域 ...
2017-05-08數(shù)據(jù)人才工種之?dāng)?shù)據(jù)分析師 什么是數(shù)據(jù)分析師呢? 關(guān)于這個(gè)問題,仁者見仁,智者見智。 在我看來,數(shù)據(jù)分析師就一群做數(shù)據(jù)分析工作的人,要做好數(shù)據(jù)分析工作,并不容易。數(shù)據(jù)分析師在做數(shù)據(jù)分析工作時(shí),他們 ...
2017-05-08R語言玩數(shù)據(jù):數(shù)據(jù)+算法+計(jì)算引擎+知識表達(dá) 本文介紹玩數(shù)據(jù)的四部曲,分別是數(shù)據(jù)、算法、計(jì)算引擎和知識表達(dá)。 一、數(shù)據(jù) 數(shù)據(jù)的觀點(diǎn),如下: 玩數(shù)據(jù)首先要擁有數(shù)據(jù),”巧婦難為無米之炊“。 業(yè)務(wù) ...
2017-05-08R文本挖掘之tm包 tm包是R文本挖掘方面不可不知也不可不用的一個(gè)package。它提供了文本挖掘中的綜合處理功能。如:數(shù)據(jù)載入,語料庫處理,數(shù)據(jù)預(yù)處理,元數(shù)據(jù)管理以及建立“文檔-詞條”矩陣。 下面,即從tm包提 ...
2017-05-08訓(xùn)練與驗(yàn)證損失驟升:機(jī)器學(xué)習(xí)訓(xùn)練中的異常診斷與解決方案 在機(jī)器學(xué)習(xí)模型訓(xùn)練過程中,“損失曲線” 是反映模型學(xué)習(xí)狀態(tài)的核心指 ...
2025-09-19解析 DataHub 與 Kafka:數(shù)據(jù)生態(tài)中兩類核心工具的差異與協(xié)同 在數(shù)字化轉(zhuǎn)型加速的今天,企業(yè)對數(shù)據(jù)的需求已從 “存儲” 轉(zhuǎn)向 “ ...
2025-09-19CDA 數(shù)據(jù)分析師:讓統(tǒng)計(jì)基本概念成為業(yè)務(wù)決策的底層邏輯 統(tǒng)計(jì)基本概念是商業(yè)數(shù)據(jù)分析的 “基礎(chǔ)語言”—— 從描述數(shù)據(jù)分布的 “均 ...
2025-09-19CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-19SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實(shí)戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫管理中,“大表” 始終是性能優(yōu)化繞不開的話題。 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動態(tài)隨機(jī)一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價(jià)值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實(shí)戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫)處理 Excel 數(shù)據(jù)時(shí),“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗(yàn)與 t 檢驗(yàn):差異、適用場景與實(shí)踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計(jì)學(xué)領(lǐng)域,假設(shè)檢驗(yàn)是驗(yàn)證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計(jì)劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計(jì)劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對象的 text 與 content:區(qū)別、場景與實(shí)踐指南 在 Python 進(jìn)行 HTTP 網(wǎng)絡(luò)請求開發(fā)時(shí)(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價(jià)值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請求工具對比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長浮點(diǎn)數(shù)據(jù)的科學(xué)計(jì)數(shù)法問題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長浮點(diǎn)數(shù)據(jù)時(shí)的科學(xué)計(jì)數(shù)法問題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價(jià)值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運(yùn)營問題、提升執(zhí)行效率的核心手段,其價(jià)值 ...
2025-09-12用 SQL 驗(yàn)證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實(shí)戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計(jì)” 與 “用戶體驗(yàn) ...
2025-09-11塔吉特百貨孕婦營銷案例:數(shù)據(jù)驅(qū)動下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見頂” 的當(dāng)下,精準(zhǔn)營銷成為企業(yè)突圍的核心方 ...
2025-09-11