
臺灣是如何應用大數(shù)據(jù)分析提高半導體競爭力
自引進IC封裝開始,臺灣半導體產(chǎn)業(yè)已發(fā)展40余年,近年來總產(chǎn)值已近20,000億元新臺幣,在全世界占有一席之地。半導體產(chǎn)業(yè)競爭力來自於成本、良率及交貨時間,其中良率更是一家公司有競爭力之所在。近年來自動化生產(chǎn)及物聯(lián)網(wǎng)(技術發(fā)展,使得所有半導體制程相關的數(shù)據(jù)得以蒐集與保存,這些數(shù)據(jù)包含產(chǎn)品數(shù)據(jù)、機臺數(shù)據(jù)、量測數(shù)據(jù)、缺陷機數(shù)據(jù)、晶圓接受度測試數(shù)據(jù)及晶圓測試數(shù)據(jù),如何有效的使用這些大數(shù)據(jù)數(shù)據(jù)一直是半導體產(chǎn)業(yè)重要的課題之一。除了提升產(chǎn)品良率之外,產(chǎn)品/制造流程缺陷追蹤、供應計畫、提升能源效率…等都可以利用大數(shù)據(jù)分析提升公司競爭力。
處理這些數(shù)據(jù)主要可分成三個步驟:數(shù)據(jù)前處理、數(shù)據(jù)分析、驗證與評估。在數(shù)據(jù)前處理時必須先修正數(shù)據(jù)錯誤,常見的數(shù)據(jù)錯誤有以下兩種:
1.數(shù)據(jù)出現(xiàn)異常值。透過盒須圖可輕易的分析出異常值,通常發(fā)生的在設備工程師在調(diào)整機臺的時候或是由其他外在因素造成,因此這樣的值通常直接刪除。
2.數(shù)據(jù)出現(xiàn)遺漏值。因偵測設備的限制,有時數(shù)據(jù)會有不完整的情況,處理這樣的狀況可透過補值的方式(內(nèi)插法、平均法等)回填可能的數(shù)據(jù)或直接刪除該筆數(shù)據(jù)。
因每種數(shù)據(jù)的性質(zhì)與內(nèi)容不同,為有效使用這些數(shù)據(jù),將數(shù)據(jù)庫整合為必要的步驟。如何整合這些數(shù)據(jù)庫首先需考量實際問題需求,再來考量數(shù)據(jù)庫數(shù)據(jù)的型態(tài),例如機臺數(shù)據(jù)為連續(xù)型數(shù)據(jù)、缺陷機數(shù)據(jù)為離散型數(shù)據(jù),因應不同的數(shù)據(jù)型態(tài)必須選擇不同的方式去做合并。
在數(shù)據(jù)分析處理上,常見的方式可分成以下幾種方式:
1.利用數(shù)據(jù)分群演算法,例如K-means演算法、階層式分群演算法將原始數(shù)據(jù)分群。
2.將分群好的數(shù)據(jù)透過決策樹找出造成問題發(fā)生的可能因子,或透過機器學習演算法,例如SVM建立模型,預測問題是否會發(fā)生,藉此實作出預警系統(tǒng)。
數(shù)據(jù)分析完之後必須評估結(jié)果是否符合現(xiàn)實以避免過適現(xiàn)象。在此步驟往往會發(fā)生分析結(jié)果和過往經(jīng)驗不一致的情況,除了花許多時間與工程師溝通確認之外,還需找不同的數(shù)據(jù)集交互驗證,已確保數(shù)據(jù)分析方式是可行的。
在處理大量的數(shù)據(jù)時面臨到許多的挑戰(zhàn),例如:傳統(tǒng)的分析工具與方法通常適用在小規(guī)模的數(shù)據(jù)上,當數(shù)據(jù)量大且復雜時往往失去其效用、分析數(shù)據(jù)需耗費大量的計算時間,如何快速的處理大量數(shù)據(jù)是一項大的挑戰(zhàn)。近年來已有一些工具可解決以上的問題,例如:MLlib即可支援一些機器學習的套件在Spark平臺、RHadoop及SparkR套件可支援R的分析工具在Hadoop及Spark平臺上。除了在分析數(shù)據(jù)時面臨的挑戰(zhàn)之外,TATA Consultancy Services(TCS)顧問公司在2013年從其他面向提出在處理大數(shù)據(jù)數(shù)據(jù)時面臨的許多挑戰(zhàn),舉例來說:數(shù)據(jù)工程師需取得部門經(jīng)理的高度信任、對於不同的商業(yè)決策需決定該使用哪些數(shù)據(jù)、利用大數(shù)據(jù)分析幫忙部門經(jīng)理做決策…等,以上的問題待管理相關的人員來解決。
對於半導體產(chǎn)業(yè)來說,透過大數(shù)據(jù)數(shù)據(jù)分析歷史數(shù)據(jù),挖掘其中有用的資訊以提升公司競爭力是非常有效的一種方式??萍疾颗c臺積電在2014年下半年即舉辦相關的比賽,希冀發(fā)掘半導體相關數(shù)據(jù)的各種有用資訊。相信往後會有越來越多人力與資源投入這領域,讓半導體產(chǎn)業(yè)邁入新的世代。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關鍵? 在循環(huán)神經(jīng)網(wǎng)絡(RNN)家族中,長短期記憶網(wǎng)絡(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認 ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預測分析中的應用:從數(shù)據(jù)查詢到趨勢預判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點,而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準 ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領域中,準確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認證作為國內(nèi)權威的數(shù)據(jù)分析能力認證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應對策略? 長短期記憶網(wǎng)絡(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學方法在市場調(diào)研數(shù)據(jù)中的深度應用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準確性的基礎 ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03