R+SQLServer的大數(shù)據(jù)管理 在學(xué)習(xí)和使用R語(yǔ)言的過(guò)程中,在數(shù)據(jù)文件的選擇方面,由于csv文件在各大數(shù)據(jù)庫(kù)軟件以及統(tǒng)計(jì)分析軟件都有很好的兼容性,所以一直被廣泛地用作數(shù)據(jù)儲(chǔ)存?zhèn)鬏?。筆者最近手頭上有一個(gè)10多G的 ...
2017-06-04SAS—HASH對(duì)象的應(yīng)用 HASH table原理 先介紹下hash的原理吧。hash table其實(shí)就是散列表,也叫哈希表,根據(jù)關(guān)Key-value鍵值對(duì)而直接進(jìn)行訪問(wèn)的數(shù)據(jù)結(jié)構(gòu)。它通過(guò)把key-value映射到表中一個(gè)位置來(lái)訪問(wèn)記錄,不 ...
2017-06-04sas信用評(píng)分之第二步變量篩選 今天介紹變量初步選擇。這部分的內(nèi)容我就只介紹information –value,我這次做的模型用的邏輯回歸,后面會(huì)更新以基尼系數(shù)或者信息熵基礎(chǔ)的篩選變量,期待我把。 Iv值的介紹你們 ...
2017-06-04主成分分析在SPSS中的應(yīng)用 一、引言 主成分分析的背景是研究中經(jīng)常會(huì)遇到多指標(biāo)的問(wèn)題,這些指標(biāo)間往往存在一定的相關(guān),直接納入分析不僅復(fù)雜,變量間難以取舍,而且可能因多元共線性而無(wú)法得出正確結(jié)論。主成 ...
2017-06-04如何利用SPSS產(chǎn)生隨機(jī)數(shù)字表 在醫(yī)學(xué)研究中,科研工作者常常需要把研究對(duì)象進(jìn)行隨機(jī)分組,實(shí)現(xiàn)不同處理因素實(shí)驗(yàn)順序的隨機(jī)化或在總體中隨機(jī)抽取部分樣本作為研究。以上問(wèn)題均涉及到統(tǒng)計(jì)學(xué)中隨機(jī)化的問(wèn)題,其目的主 ...
2017-06-04Python標(biāo)準(zhǔn)庫(kù)的學(xué)習(xí)準(zhǔn)備 Python標(biāo)準(zhǔn)庫(kù)是Python強(qiáng)大的動(dòng)力所在,我們已經(jīng)在前文中有所介紹。由于標(biāo)準(zhǔn)庫(kù)所涉及的應(yīng)用很廣,所以需要學(xué)習(xí)一定的背景知識(shí)。 硬件原理 這一部份需要了解內(nèi)存,CPU,磁盤(pán)存儲(chǔ)以 ...
2017-06-04如何寫(xiě)出高性能SQL語(yǔ)句 1、 首先要搞明白什么叫執(zhí)行計(jì)劃? 執(zhí)行計(jì)劃是數(shù)據(jù)庫(kù)根據(jù)SQL語(yǔ)句和相關(guān)表的統(tǒng)計(jì)信息作出的一個(gè)查詢方案,這個(gè)方案是由查詢優(yōu)化器自動(dòng)分析產(chǎn)生的,比如一條SQL語(yǔ)句如果用來(lái)從一個(gè) 10萬(wàn) ...
2017-06-03SQL優(yōu)化經(jīng)驗(yàn)總結(jié)34條 我們要做到不但會(huì)寫(xiě)SQL,還要做到寫(xiě)出性能優(yōu)良的SQL,以下為筆者學(xué)習(xí)、摘錄、并匯總部分資料與大家分享! (1) 選擇最有效率的表名順序(只在基于規(guī)則的優(yōu)化器中有效): ORACLE 的解 ...
2017-06-03spss中syntax經(jīng)典程序 spss中compute生成隨機(jī)數(shù): INPUT PROGRAM. - LOOP #I=1 TO 1000. - COMPUTE Uniform_Distribution = UNIFORM(100). - COMPUTE Normal_Distribution = RV.NORMAL(50,25). - COMPUTE Po ...
2017-06-03spss中table容易被忽視的技巧 1、變量的類(lèi)型: 注:想要變類(lèi)型的話,直接用左鍵點(diǎn)變量,然后點(diǎn)右鍵(選擇你想要的類(lèi)型點(diǎn)左鍵) 2、output的數(shù)據(jù)形式設(shè)置,菜單操作見(jiàn):(format是數(shù)據(jù)形式,Decimal ...
2017-06-03SPSS把一個(gè)數(shù)據(jù)樣本隨機(jī)分為兩部分 1、打開(kāi)SPSS數(shù)據(jù)文件。 2、選擇DATA>SELECT CASES,打開(kāi)“Select Cases”對(duì)話框 3.選擇“Random sample of cases”, 單擊“Sample”按鈕,打開(kāi)“Select Ca ...
2017-06-03R語(yǔ)言-選擇“最佳”的回歸模型 嘗試獲取一個(gè)回歸方程時(shí),實(shí)際上你就面對(duì)著從眾多可能的模型中做選擇的問(wèn)題。是不是所有的變量都要包括?抑或去掉那個(gè)對(duì)預(yù)測(cè)貢獻(xiàn)不顯著的變量?還是需要添加多項(xiàng)式項(xiàng)和/或交互項(xiàng) ...
2017-06-03SPSS能做Cochran-Armitage趨勢(shì)檢驗(yàn)嗎 Cochran-Armitage (CA) 趨勢(shì)檢驗(yàn)是一種用于分析1個(gè)二分類(lèi)變量和1個(gè)有序分類(lèi)變量關(guān)聯(lián)性的統(tǒng)計(jì)方法,由Cochran和Armtiage創(chuàng)建和完善。線性趨勢(shì)檢驗(yàn)中最常用的一種方法就是Coc ...
2017-06-02R語(yǔ)言學(xué)習(xí)之向量—啟航 通過(guò)前面幾篇,相信就算是新手也對(duì)R語(yǔ)言的歷史,R運(yùn)行環(huán)境有了大概的了解。下面就R語(yǔ)言特殊的賦值符號(hào)與基本數(shù)據(jù)元素——向量做簡(jiǎn)要概述。 1、賦值符號(hào) 相信大家學(xué)過(guò)的編程語(yǔ)言中,賦值 ...
2017-06-02如何用SPSS做ROC曲線分析 一、ROC曲線的概念 受試者工作特征曲線(receiver operator characteristic curve, ROC曲線),最初用于評(píng)價(jià)雷達(dá)性能,又稱為接收者操作特性曲線。ROC曲線是以真陽(yáng)性率(靈敏度)為 ...
2017-06-02七個(gè)你現(xiàn)在就該學(xué)習(xí)Python的理由 實(shí)際上這要看你怎么看待它,生命線長(zhǎng)本身就是件好事,說(shuō)明它穩(wěn)定且可靠。如果你是像其他許多人一樣都是從 Java、C 或者 Perl 開(kāi)始進(jìn)入職業(yè)生涯的,那么學(xué)習(xí)Python的曲線基本上 ...
2017-06-02R語(yǔ)言-基本數(shù)據(jù)管理合作 在開(kāi)始數(shù)據(jù)分析之前,我們有必要按照自身對(duì)數(shù)據(jù)的需求,對(duì)數(shù)據(jù)管理。數(shù)據(jù)管理是數(shù)據(jù)分析工作的前提,只有保障數(shù)據(jù)合理、可靠、有效的獲取,才能使得后續(xù)對(duì)數(shù)據(jù)的處理工作順利開(kāi)展。以下 ...
2017-06-02R語(yǔ)言-數(shù)據(jù)的重構(gòu)和整合 在數(shù)據(jù)初步處理過(guò)程中,我們時(shí)常遇到這樣的問(wèn)題,就是數(shù)據(jù)包含我們所要的信息,格式卻與我們預(yù)期的樣式不符。我們可能需要在原有數(shù)據(jù)的基礎(chǔ)上進(jìn)行處理,增加變量的個(gè)數(shù)或者對(duì)數(shù)據(jù)框進(jìn)行 ...
2017-06-02【SAS宏】使用WOE和IV實(shí)現(xiàn)風(fēng)險(xiǎn)因素篩選 在信用風(fēng)險(xiǎn)評(píng)估領(lǐng)域,信用評(píng)分卡模型在國(guó)內(nèi)外都是一種非常成熟的預(yù)測(cè)模型,無(wú)論是使用傳統(tǒng)的Logistic回歸建模乃至一些使用Neural networks算法建模,變量篩選都是整個(gè)建 ...
2017-06-01SAS數(shù)據(jù)集中重復(fù)數(shù)據(jù)的處理方法 在使用SAS在處理數(shù)據(jù)的時(shí)候,經(jīng)常會(huì)遇到或產(chǎn)生一些重復(fù)數(shù)據(jù),有些重復(fù)數(shù)據(jù)是我們需要的,而有的則是多余的。下面講到的內(nèi)容就是篩選/排除某一數(shù)據(jù)集里重復(fù)數(shù)據(jù)以及去重的幾種常 ...
2017-06-01訓(xùn)練與驗(yàn)證損失驟升:機(jī)器學(xué)習(xí)訓(xùn)練中的異常診斷與解決方案 在機(jī)器學(xué)習(xí)模型訓(xùn)練過(guò)程中,“損失曲線” 是反映模型學(xué)習(xí)狀態(tài)的核心指 ...
2025-09-19解析 DataHub 與 Kafka:數(shù)據(jù)生態(tài)中兩類(lèi)核心工具的差異與協(xié)同 在數(shù)字化轉(zhuǎn)型加速的今天,企業(yè)對(duì)數(shù)據(jù)的需求已從 “存儲(chǔ)” 轉(zhuǎn)向 “ ...
2025-09-19CDA 數(shù)據(jù)分析師:讓統(tǒng)計(jì)基本概念成為業(yè)務(wù)決策的底層邏輯 統(tǒng)計(jì)基本概念是商業(yè)數(shù)據(jù)分析的 “基礎(chǔ)語(yǔ)言”—— 從描述數(shù)據(jù)分布的 “均 ...
2025-09-19CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫(kù)表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-19SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實(shí)戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無(wú)論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫(kù)管理中,“大表” 始終是性能優(yōu)化繞不開(kāi)的話題。 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動(dòng)態(tài)隨機(jī)一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開(kāi)始提取前,需先判斷 TIF 文件的類(lèi)型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價(jià)值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲(chǔ)的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫(kù)表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實(shí)戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫(kù))處理 Excel 數(shù)據(jù)時(shí),“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗(yàn)與 t 檢驗(yàn):差異、適用場(chǎng)景與實(shí)踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計(jì)學(xué)領(lǐng)域,假設(shè)檢驗(yàn)是驗(yàn)證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤(pán)手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲(chǔ)的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計(jì)劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計(jì)劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對(duì)象的 text 與 content:區(qū)別、場(chǎng)景與實(shí)踐指南 在 Python 進(jìn)行 HTTP 網(wǎng)絡(luò)請(qǐng)求開(kāi)發(fā)時(shí)(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價(jià)值的核心操盤(pán)手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫(kù)表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請(qǐng)求工具對(duì)比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請(qǐng)求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長(zhǎng)浮點(diǎn)數(shù)據(jù)的科學(xué)計(jì)數(shù)法問(wèn)題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長(zhǎng)浮點(diǎn)數(shù)據(jù)時(shí)的科學(xué)計(jì)數(shù)法問(wèn)題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價(jià)值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運(yùn)營(yíng)問(wèn)題、提升執(zhí)行效率的核心手段,其價(jià)值 ...
2025-09-12用 SQL 驗(yàn)證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實(shí)戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過(guò)程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計(jì)” 與 “用戶體驗(yàn) ...
2025-09-11塔吉特百貨孕婦營(yíng)銷(xiāo)案例:數(shù)據(jù)驅(qū)動(dòng)下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見(jiàn)頂” 的當(dāng)下,精準(zhǔn)營(yíng)銷(xiāo)成為企業(yè)突圍的核心方 ...
2025-09-11