
大數(shù)據(jù)與生命科學(xué)
2014年6月13日,《科學(xué)》雜志刊載了一篇由美國科學(xué)促進(jìn)會(AAAS)科技出版顧問Mike May撰寫的一篇題為“Big Biological Impacts from Big Data”的文章。鑒于大數(shù)據(jù)作為目前的一個熱點概念,本文對該文進(jìn)行了編譯。本文首先梳理了大數(shù)據(jù)所包含的三層含義,然后就這三層含義進(jìn)行了分析和解讀。基于基因組數(shù)據(jù)量越來越多的情況下,很多機構(gòu)都意識到利用大數(shù)據(jù)的前景。
本文列舉了一些機構(gòu)已開發(fā)或正在研發(fā)的、用以分析大數(shù)據(jù)的方法或工具。例如,美國BioDatomics公司開發(fā)了比傳統(tǒng)軟件分析速度快100倍的BioDT軟件;加拿大多倫多的ACD/Labs公司開發(fā)的計算系統(tǒng)在處理大數(shù)據(jù)時能夠整合各種數(shù)據(jù)格式;加利福尼亞州的IBM Almaden研究中心開發(fā)的文本挖掘工具;湯森路透NuMedii公司基于大數(shù)據(jù)的藥物再利用。大數(shù)據(jù)除了以上三個含義,本文還提及大數(shù)據(jù)還應(yīng)包含“復(fù)雜性”,并列舉了馬薩諸塞州的GNS Healthcare公司基于數(shù)據(jù)的復(fù)雜性而開發(fā)的REFS分析平臺。最終,本文認(rèn)為所有致力于研發(fā)大數(shù)據(jù)的努力都應(yīng)該落在使大數(shù)據(jù)能夠促進(jìn)未來生物學(xué)和醫(yī)學(xué)發(fā)展的方向上來。
大數(shù)據(jù)與生命科學(xué)
大數(shù)據(jù)是目前最熱的概念之一,也是容易被曲解的概念。顧名思義,大數(shù)據(jù)意味著大量的數(shù)據(jù),然而這只是從字面理解的含義。概括來看,大數(shù)據(jù)包括三層含義(3V):數(shù)據(jù)量大(volume of data),處理數(shù)據(jù)的速度快(velocity of processing the data),數(shù)據(jù)源多變(variability of data sources)。這是那些依賴大數(shù)據(jù)工具進(jìn)行分析的信息的重要特征。
美國喬治華盛頓大學(xué)的計算生物學(xué)研究所主任Keith Crandall表示,盡管生物學(xué)家花費大量精力收集數(shù)據(jù),實際上,現(xiàn)在生物學(xué)面臨的瓶頸在于大數(shù)據(jù)。例如,2002年8月,對第一個人完整基因組測序工作,集中了20個研究所的專家,利用這些研究所所配置的基礎(chǔ)設(shè)施,經(jīng)歷13年,投入30億美元獲得了約30億核苷酸序列。而目前,為某個人測序僅需要1000美元,每周產(chǎn)生320多個基因組。隨著研究人員不斷開發(fā)方法,處理大數(shù)據(jù)的量、速度和可變性方面的問題,研究人員開始研發(fā)分析信息的新方法。
生命科學(xué)的數(shù)據(jù)來源和形式多樣,包括基因測序、分子通道、不同的人群等。如果研究人員能解決這一問題,這些數(shù)據(jù)將轉(zhuǎn)變成潛在的財富,即問題在于如何處理這些復(fù)雜的信息。當(dāng)下,相關(guān)領(lǐng)域期待那些能分析大數(shù)據(jù),并將這些數(shù)據(jù)轉(zhuǎn)換成更好理解基礎(chǔ)生命科學(xué)機制和將分析成果應(yīng)用到人口健康上去的工具和技術(shù)的面市。
(1)“量”的持續(xù)增加
數(shù)十年前,制藥公司就開始存儲數(shù)據(jù)。位于美國波士頓默克公司研究實驗室(Merck Research Labs)的副董事Keith
Crandall表示,默克公司在組織成千上萬病患參加的臨床試驗方面已經(jīng)進(jìn)展了好些年,并具有從數(shù)百萬病患的相關(guān)記錄中查出所需信息的能力。目前,該公司已經(jīng)擁有新一代測序技術(shù),每個樣本就能產(chǎn)生兆兆位的數(shù)據(jù)。面對如此大數(shù)量級的數(shù)據(jù),即使是大型制藥公司也需要幫助。例如,來自瑞士羅氏公司的Bryn
Roberts表示,羅氏公司一個世紀(jì)的研發(fā)數(shù)據(jù)量相比2011~2012年在測定成千上百個癌細(xì)胞株的單個大規(guī)模試驗過程中產(chǎn)生的數(shù)據(jù),前者只是后者兩倍多一些而已。Roberts領(lǐng)銜的研究團隊期望能從這些存儲的數(shù)據(jù)中挖掘到更有價值的信息。因而,該團隊與來自加利福尼亞州的PointCross公司進(jìn)行合作,以構(gòu)建一個可以靈活查找羅氏公司25年間相關(guān)數(shù)據(jù)的平臺。這些數(shù)據(jù),包括那些成千上萬個復(fù)合物的信息,將利用當(dāng)下以獲得的知識來挖掘進(jìn)而開發(fā)新藥物。
為了處理大量的數(shù)據(jù),一個生物學(xué)研究人員并不需要像公司一樣需要一個專門的設(shè)備來處理產(chǎn)生的數(shù)據(jù)。例如,Life
Technologies公司(目前是Thermo Fisher Scientific公司的一部分)的Ion個人化操作基因組測序儀(Ion
Personal Genome Machine)。這一新設(shè)備能夠在8個小時以內(nèi)測序多達(dá)2
gigabases.因而可在研究人員的實驗室操作。Life Technologies公司還有更大型的儀器,4小時以內(nèi)測序可高達(dá)10
gigabases.
然而,對學(xué)術(shù)領(lǐng)域和產(chǎn)業(yè)領(lǐng)域的生命科學(xué)研究人員,新一代測序既提供了好處也帶來了問題。正如Crandall所抱怨的那樣,他們并不能有效研究如此多的基因組,除非開發(fā)的計算機系統(tǒng)能夠滿足分析大量數(shù)據(jù)的需求?;谶@種現(xiàn)狀,其領(lǐng)銜的團隊與波士頓大學(xué)的醫(yī)學(xué)助理教授W.
Evan Johnson進(jìn)行了合作,以開發(fā)分析新一代測序(next generation
sequencing,NGS)平臺產(chǎn)生的數(shù)據(jù),進(jìn)而能夠?qū)NA的gigabases信息轉(zhuǎn)化為計算機的千兆字節(jié)。該軟件將DNA樣本與參考基因組比較,以便確定病原體。Crandall表示,其每個樣本存儲的數(shù)據(jù)達(dá)20千兆字節(jié),而這樣的樣本就有成千上萬個,這樣每個樣本分析所產(chǎn)生的數(shù)據(jù)就相當(dāng)多。
實際上,如此大數(shù)量的數(shù)據(jù)其實對于衛(wèi)生保健來說其實十分有用,因為研究人員必須在設(shè)計其試驗時充分考慮人群的多樣性。來自劍橋大學(xué)的轉(zhuǎn)化醫(yī)學(xué)教授Chas Bountra表示,畢竟從50萬人獲得的結(jié)論比從10個人獲得的結(jié)論要可靠有說服力得多。
也有研究人員期望看到在衛(wèi)生保健方面基因組數(shù)據(jù)能產(chǎn)生越來越多的影響。例如,遺傳信息可揭示生物標(biāo)志物,或某些疾病的指示物(某些分子只出現(xiàn)在某些類型的癌癥中)。英國牛津大學(xué)維康信托基金會人類遺傳學(xué)中心(Wellcome
Trust Centre for Human Genetics)的基因組統(tǒng)計學(xué)教授Gil
McVean教授表示,基因組學(xué)為人來了解疾病提供了強有力的依據(jù)?;蚪M學(xué)可以為人類找到與某類疾病相關(guān)的生物標(biāo)志物,并基于這一標(biāo)志物進(jìn)行靶向治療。例如,正因為某個分子驅(qū)動某種癌癥的進(jìn)展,那么可以靶向這一分子進(jìn)而治療癌癥。為了應(yīng)用這一理念,McVean領(lǐng)銜的研究團隊通過李嘉誠(Li
Ka Shing)捐獻(xiàn)的3 300萬美元正在劍橋大學(xué)創(chuàng)建Li Ka Shing健康信息和探索中心(Li Ka Shing Centre for
Health Information and Discovery)。該中心將成立一個大數(shù)據(jù)研究機構(gòu)。McVean總結(jié)道,該中心將將分析數(shù)據(jù)過程和基因組研究結(jié)合在一起,這樣他們將能夠克服在收集大數(shù)據(jù)和分析大數(shù)據(jù)方面的一些難題。
(2)分析的高速性
第二個V,也就是velocity,意指處理數(shù)據(jù)和分析數(shù)據(jù)的速度要高要快。研究人員需要高速處理以便分析大量增加的數(shù)據(jù)。
過去,分析基因相關(guān)數(shù)據(jù)存在瓶頸。馬里蘭州的BioDatomics董事Alan
Taffel認(rèn)為,傳統(tǒng)的分析平臺實際上約束了研究人員的產(chǎn)出(產(chǎn)能),因為這些平臺使用起來困難且需要依賴生物信息學(xué)人員,因而相關(guān)工作執(zhí)行效率低下,往往需要幾天甚至幾周來分析一個大型DNA.
鑒于此,BioDatomics公司開發(fā)了BioDT軟件,其為分析基因組數(shù)據(jù)提供400多種工具。將這些工具整合成一個軟件包,使得研究人員很容易使用,且適用任何臺式電腦,且該軟件還可以通過云存期。該軟件相比傳統(tǒng)系統(tǒng)處理信息流的速度快100倍以上,以前需要一天或一周的,現(xiàn)在只需要幾分鐘或幾個小時。
有專家認(rèn)為需要測序新工具。新澤西州羅格斯大學(xué)電子計算工程系的副教授Jaroslaw
Zola表示,根據(jù)數(shù)據(jù)存儲方式、數(shù)據(jù)轉(zhuǎn)換方式和數(shù)據(jù)分析方式,新一代測序技術(shù)需要新計算策略來處理來自各種渠道的數(shù)據(jù)。這意味著需要生物研究人員必須學(xué)習(xí)使用前沿計算機技術(shù)。然而,Zola認(rèn)為應(yīng)該對信息技術(shù)人員施加壓力,促使他們開發(fā)出讓領(lǐng)域?qū)<液苋菀渍莆盏姆椒?,在保證效率的前提下,隱藏掉算法、軟件和硬件體系結(jié)構(gòu)的復(fù)雜性。目前,Zola領(lǐng)銜的團隊正致力于此,研發(fā)新型算法。
(3)多變性
其一,生物學(xué)實驗室往往有多種設(shè)備,這些設(shè)備產(chǎn)生的數(shù)據(jù)是以某種文檔形式存在。所以,加拿大多倫多的ACD/Labs公司開發(fā)的計算系統(tǒng)在處理大數(shù)據(jù)時能夠整合各種數(shù)據(jù)格式。ACD/Labs的全球戰(zhàn)略主管(director
of global
strategy)表示,該系統(tǒng)能夠支持各種設(shè)備產(chǎn)生的150多種文檔格式,這就有利于把多種數(shù)據(jù)匯集到同一個環(huán)境中,例如匯聚到其開發(fā)的Spectrus數(shù)據(jù)庫中。該數(shù)據(jù)庫可以通過客戶端或網(wǎng)頁訪問。
生物學(xué)大數(shù)據(jù)還體現(xiàn)新型可變性,
.例如,德國Definiens的研究人員分析的組織表型組學(xué)(tissue
phenomics),也就是一個組織或器官樣本構(gòu)造相關(guān)的信息,包括細(xì)胞大小、形狀,吸收的染色劑,細(xì)胞相互聯(lián)系的物質(zhì)等。這些數(shù)據(jù)可以在多個研究中應(yīng)用,例如追蹤細(xì)胞在發(fā)育過程中的特征變化的研究,測定環(huán)境因素對機體的影響,或測量藥物對某些器官/組織的細(xì)胞的影響等。
結(jié)構(gòu)化數(shù)據(jù),例如數(shù)據(jù)表格,并不能揭示所有信息,比方藥物處理過程或生物學(xué)過程。實際上,生活著的有機體是以一種非結(jié)構(gòu)化的形式存在,有成千上萬種方式去描述生物過程。默克的Johnson認(rèn)為有點像期刊文本文檔,很難從文獻(xiàn)中挖掘數(shù)據(jù)。
加利福尼亞州的IBM Almaden研究中心(IBM's Almaden Research Center)的分析專家和研究人員Ying
Chen領(lǐng)銜的團隊數(shù)年來都致力于開發(fā)文本挖掘工具,目前他們正在使用的是“加速藥物發(fā)現(xiàn)的解決方案”(accelerated drug
discovery solution)。這一平臺集合了專利、科學(xué)文獻(xiàn)、基礎(chǔ)化學(xué)和生物學(xué)知識(如化學(xué)物質(zhì)和分子之間相互作用的機制等),有1
600多萬中化合物結(jié)構(gòu),近乎7 000種疾病的相關(guān)信息。利用這一系統(tǒng),研究人員從中能夠?qū)ふ铱赡軐χ委熌撤N疾病有用的化合物。
其他一些公司致力于挖掘現(xiàn)有資源,以發(fā)現(xiàn)疾病的生物學(xué)機制,基于此來研究治療疾病的方法。湯森路透位于硅谷的NuMedii公司,致力于尋找現(xiàn)有藥物的新用途,又稱之為藥物再利用(drug
repurposing)。NuMedii的首席科學(xué)家Craig
Webb表示,使用基因組數(shù)據(jù)庫,整合各種知識來源和生物信息學(xué)方法,快速發(fā)現(xiàn)藥物的新用途。之后,該公司根據(jù)該藥物的原有用途中的安全性來設(shè)計臨床試驗,這樣研發(fā)藥物的速度快而且成本低。Webb描述了該公司的一個項目:研究人員從2
500多種卵巢癌樣本中搜集基因表達(dá)數(shù)據(jù),再結(jié)合數(shù)種計算機算法來預(yù)測現(xiàn)有藥物是否具有治療卵巢癌或治療某種分子亞型卵巢癌的潛力。
(4)復(fù)雜性
諾華公司的生物醫(yī)學(xué)研究所(Novartis Institutes for BioMedical
Research,NIBR)的信息系統(tǒng)的執(zhí)行主任Stephen
Cleaver在三V的基礎(chǔ)上還加了個復(fù)雜性(complexity)。他認(rèn)為制藥公司的科研人員通過某些病患個體,到某些病患群再到整合所掌握的各種數(shù)據(jù)分析數(shù)據(jù),這一過程很復(fù)雜。在衛(wèi)生保健領(lǐng)域,大數(shù)據(jù)分析的復(fù)雜性進(jìn)一步增加,因為要聯(lián)合各種類型的信息,例如基因組數(shù)據(jù)、蛋白組數(shù)據(jù)、細(xì)胞信號傳導(dǎo)、臨床研究,甚至需要結(jié)合環(huán)境科學(xué)的研究數(shù)據(jù)。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點,而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03