時間：2023-03-06 15:58:24
緒論：在尋找寫作靈感嗎？愛發(fā)表網(wǎng)為您精選了8篇大數(shù)據(jù)整體解決方案，愿這些內(nèi)容能夠啟迪您的思維，激發(fā)您的創(chuàng)作熱情，歡迎您的閱讀與分享！
數(shù)據(jù)的變化，從來不是一個循序漸進的過程。隨著信息的砰然爆發(fā)，誰能合理地分析、管理、挖掘海量數(shù)據(jù)的內(nèi)在價值，誰就有可能成為下一個行業(yè)巨頭。無論從應(yīng)用、需求還是解決方案層面，大數(shù)據(jù)都已經(jīng)到了“應(yīng)時而生”的時代。
“可以說，這是一場數(shù)據(jù)的‘工業(yè)革命’，數(shù)據(jù)迎來了量與質(zhì)的改變，非結(jié)構(gòu)性數(shù)據(jù)激增，計量單位已從T級升至P級，甚至是E級?！庇⑻貭杹喬邪l(fā)有限公司總經(jīng)理何京翔在接受本刊記者采訪時稱，“目前這些數(shù)據(jù)大部分是‘冷數(shù)據(jù)’，即采集完成后并沒有進行實時分析，沒有挖掘其潛在價值。”
包裝的藝術(shù)
大數(shù)據(jù)涉及數(shù)據(jù)采集（存儲）、數(shù)據(jù)傳輸（網(wǎng)絡(luò)）、數(shù)據(jù)處理（計算），而這些恰恰都是英特爾的專長?！癐ntel Distribution for Hadoop是對傳統(tǒng)英特爾平臺的優(yōu)化，然而，對Hadoop（目前最受歡迎的對網(wǎng)絡(luò)搜索關(guān)鍵詞進行內(nèi)容分類的工具）進行逐一模塊式的優(yōu)化仍然是零散的，需要形成整體的、打包式的解決方案，這就進一步涉及管理?！焙尉┫杞忉?，“目前僅Hadoop涵蓋的20個模塊是開源的，僅將開源軟件定為企業(yè)級應(yīng)用，其穩(wěn)定性、可靠性、可維護性都成問題。因此，如何把零散的模塊包裝起來，形成整體效益，才是英特爾的‘絕活’，換句話說，Hadoop管理才是讓‘1+1>2’的核心?！?/p>
何京翔表示，英特爾正在利用不同級別的處理器架構(gòu)、不同的數(shù)據(jù)應(yīng)用架構(gòu)，以及相關(guān)的解決方案，幫助用戶從端到端找到完整的解決辦法。綜合解決方案，意味著從芯片到存儲，再到網(wǎng)絡(luò)，最后到軟件應(yīng)用，形成鏈型優(yōu)化，其直接效果就是原先4小時的處理時間能夠被壓縮至7分鐘。
英特爾的綜合解決方案并非一站式服務(wù)，這符合英特爾一貫主推的橫向商業(yè)模式（Horizontal Model）。何京翔稱：“英特爾大數(shù)據(jù)解決方案的客戶都是我們的合作伙伴，我們認為，為不同客戶提供不同層次的、靈活、強大和開放式的解決方案，方能真正為企業(yè)預(yù)留出創(chuàng)造價值和發(fā)揮優(yōu)勢的空間，幫助企業(yè)解決實際難點?！?/p>
群狼與雄獅
目前，英特爾大數(shù)據(jù)技術(shù)主要應(yīng)用于四大領(lǐng)域：電信、金融、智能交通和醫(yī)療。
以電信行業(yè)為例，中國用戶群龐大，自動產(chǎn)生的數(shù)據(jù)量大，數(shù)據(jù)分析是個很現(xiàn)實的問題?！半娦殴镜目蛻敉ㄓ崝?shù)據(jù)產(chǎn)生的時候是結(jié)構(gòu)化數(shù)據(jù)，但是數(shù)量太龐大，傳統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)分析方式做起來比較吃力，所以現(xiàn)在我們先把它轉(zhuǎn)成非結(jié)構(gòu)化的，輸入Hadoop，通過分布式處理，生成并存任務(wù)，然后再將結(jié)果寫回結(jié)構(gòu)化數(shù)據(jù)，最后我們合作伙伴看到的還是結(jié)構(gòu)化的分析數(shù)據(jù)。”何京翔比喻說，“這是一個典型的‘一頭雄獅子斗不過一群狼’的例子。”
EMC Isilon：橫向擴展 性能突出
大數(shù)據(jù)存儲不是一類單獨的產(chǎn)品，它有很多實現(xiàn)方式。EMC Isilon存儲事業(yè)部總經(jīng)理楊蘭江概括說，大數(shù)據(jù)存儲應(yīng)該具有以下一些特性：海量數(shù)據(jù)存儲能力，可輕松管理PB級乃至數(shù)十PB的存儲容量；具有全局命名空間，所有應(yīng)用可以看到統(tǒng)一的文件系統(tǒng)視圖；支持標準接口，應(yīng)用無需修改可直接運行，并提供API接口進行面向?qū)ο蟮墓芾?；讀寫性能優(yōu)異，聚合帶寬高達數(shù)GB乃至數(shù)十GB；易于管理維護，無需中斷業(yè)務(wù)即可輕松實現(xiàn)動態(tài)擴展；基于開放架構(gòu)，可以運行于任何開放架構(gòu)的硬件之上；具有多級數(shù)據(jù)冗余，支持硬件與軟件冗余保護，數(shù)據(jù)具有高可靠性；采用多級存儲備份，可靈活支持SSD、SAS、SATA和磁帶庫的統(tǒng)一管理。
通過與中國用戶的接觸，楊蘭江認為，當前中國用戶最迫切需要了解的是大數(shù)據(jù)存儲有哪些分類，而在大數(shù)據(jù)應(yīng)用方面面臨的最大障礙就是如何在眾多平臺中找到適合自己的解決方案。
EMC針對不同的應(yīng)用需求可以提供不同的解決方案：對于能源、媒體、生命科學(xué)、醫(yī)療影像、GIS、視頻監(jiān)控、HPC應(yīng)用、某些歸檔應(yīng)用等，EMC會首推以Isilon存儲為核心的大數(shù)據(jù)存儲解決方案；對于虛擬化以及具有很多小文件的應(yīng)用，EMC將首推以VNX、XtremIO為核心的大數(shù)據(jù)存儲解決方案；對于大數(shù)據(jù)分析一類的應(yīng)用需求，EMC會綜合考慮客戶的具體需求，推薦Pivotal、Isilon等一體化的解決方案。在此，具體介紹一下EMC用于大數(shù)據(jù)的橫向擴展NAS解決方案——EMC Isilon，其設(shè)計目標是簡化對大數(shù)據(jù)存儲基礎(chǔ)架構(gòu)的管理，為大數(shù)據(jù)提供靈活的可擴展平臺，進一步提高大數(shù)據(jù)存儲的效率，降低成本。
EMC Isilon存儲解決方案主要包括三部分：EMC Isilon平臺節(jié)點和加速器，可從單個文件系統(tǒng)進行大數(shù)據(jù)存儲，從而服務(wù)于 I/O 密集型應(yīng)用程序、存儲和近線歸檔；EMC Isilon基礎(chǔ)架構(gòu)軟件是一個強大的工具，可幫助用戶在大數(shù)據(jù)環(huán)境中保護數(shù)據(jù)、控制成本并優(yōu)化存儲資源和系統(tǒng)性能；EMC Isilon OneFS操作系統(tǒng)可在集群中跨節(jié)點智能地整合文件系統(tǒng)、卷管理器和數(shù)據(jù)保護功能。
楊蘭江表示，企業(yè)用戶選擇EMC Isilon的理由可以歸納為以下幾點。第一，簡化管理，增強易用性。與傳統(tǒng)NAS相比，無論未來存儲容量、性能增加到何種程度，EMC Isilon的安裝、管理和擴展都會保持其簡單性。第二，強大的可擴展性。EMC Isilon可以滿足非結(jié)構(gòu)化數(shù)據(jù)的存儲和分析需求，單個文件系統(tǒng)和卷中每個集群的容量為18TB～15PB。第三，更高的處理效率，更低的成本。EMC Isilon在單個共享存儲池中的利用率超過80%，而EMC Isilon SmartPools軟件可進一步優(yōu)化資源，提供自動存儲分層，保證存儲的高性能、經(jīng)濟性。第四，靈活的互操作性。EMC Isilon支持眾多行業(yè)標準，簡化工作流。它還提供了API可以向客戶和ISV提供OneFS控制接口，提供Isilon集群的自動化、協(xié)調(diào)和資源調(diào)配能力。
EMC Isilon大數(shù)據(jù)存儲解決方案已經(jīng)在醫(yī)療、制造、高校和科研機構(gòu)中有了許多成功應(yīng)用。
方案點評
EMC Isilon是一個強大但簡單的橫向擴展NAS方案，適用于希望投資數(shù)據(jù)管理而不是單純存儲的企業(yè)。當初，EMC將收購來的分布式數(shù)據(jù)倉庫軟件廠商Greenplum的軟件與Isilon存儲組合成了EMC最早的大數(shù)據(jù)解決方案。用戶既可以分開選擇Greenplum軟件或Isilon存儲，也可以選擇由Greenplum軟件和Isilon存儲組成的一體機解決方案?，F(xiàn)在，Greenplum軟件雖然已歸Pivotal公司，但EMC是Pivotal的經(jīng)銷商與合作伙伴，Greenplum與Isilon存儲的組合方案并不會因此受到影響。
HDS UCP：統(tǒng)一平臺 應(yīng)用優(yōu)化
HDS中國區(qū)解決方案與專業(yè)服務(wù)事業(yè)部總監(jiān)陳戈認為，大數(shù)據(jù)存儲應(yīng)該是一個解決方案：“大數(shù)據(jù)解決方案是由基礎(chǔ)架構(gòu)的各部件組成的，包含數(shù)據(jù)存儲、計算和分析，而存儲是此架構(gòu)中的一部分?！?/p>
大數(shù)據(jù)的存儲類型與傳統(tǒng)的存儲類型有一定區(qū)別：在大數(shù)據(jù)存儲中，更多的應(yīng)用是一次寫、多次讀，讀得更多是大數(shù)據(jù)存儲的一個特點，而在傳統(tǒng)的數(shù)據(jù)存儲中，讀寫是隨機的，由于每個應(yīng)用不同，其讀寫的比例也是隨機的；大數(shù)據(jù)存儲需要具有橫向的可擴展性，并可支持多種接口、多種數(shù)據(jù)訪問協(xié)議，便于不同數(shù)據(jù)進入這個大數(shù)據(jù)平臺。
談到中國用戶在大數(shù)據(jù)存儲應(yīng)用中最迫切的需求是什么，陳戈認為，中國用戶最迫切的需求是如何逐步實現(xiàn)大數(shù)據(jù)應(yīng)用，即用戶從現(xiàn)有的模式如何過渡到大數(shù)據(jù)，如何更好地利用大數(shù)據(jù)進行經(jīng)營分析。
大數(shù)據(jù)的經(jīng)典定義可以歸納為四個“V”，但企業(yè)不可能一步到位實現(xiàn)四個“V”，這需要一個循序漸進的過程。海量的、多種類型的數(shù)據(jù)是一次性全部載入到大數(shù)據(jù)中，還是通過現(xiàn)有的平臺進行數(shù)據(jù)初選，再導(dǎo)入到大數(shù)據(jù)平臺中，是兩種不同的實現(xiàn)途徑。“先通過現(xiàn)有平臺進行數(shù)據(jù)初選，再導(dǎo)入到大數(shù)據(jù)平臺，這種方式更適合于客戶逐漸實現(xiàn)大數(shù)據(jù)，可以縮短用戶實現(xiàn)大數(shù)據(jù)應(yīng)用的時間?！标惛瓯硎?，“大數(shù)據(jù)主要是非結(jié)構(gòu)化數(shù)據(jù)。用戶可以使用基于對象數(shù)據(jù)存儲的HCP，利用其獨特的元數(shù)據(jù)采集和智能工具，對非結(jié)構(gòu)化文件數(shù)據(jù)進行管理，實現(xiàn)智能的自動化，這有助于對數(shù)據(jù)進行深度分析，幫助客戶從單一系統(tǒng)中存儲、共享、同步、保護、保存、分析和檢索文件數(shù)據(jù)，減少垃圾數(shù)據(jù)，進而為大數(shù)據(jù)分析建立一個良好的基礎(chǔ)?！?/p>
談到用戶在大數(shù)據(jù)應(yīng)用中遇到的主要障礙，陳戈表示，一方面，應(yīng)用軟件本身的智能程度是否能滿足行業(yè)應(yīng)用需求，應(yīng)用軟件是否已經(jīng)成型，大數(shù)據(jù)人才是否具備等，是讓大數(shù)據(jù)應(yīng)用落地的關(guān)鍵；另一方面，如何抽取數(shù)據(jù)，放在大數(shù)據(jù)平臺中進行相應(yīng)的計算是另一個關(guān)鍵問題。
HDS可為所有數(shù)據(jù)提供單一、可擴展的虛擬化集成平臺。HDS推出了“三步”云戰(zhàn)略，從基礎(chǔ)架構(gòu)、內(nèi)容和信息三個層面幫助客戶解決目前所遇到的問題。具體來看，通過“基礎(chǔ)架構(gòu)云”，HDS可以幫助客戶進行虛擬化和集成管理，實現(xiàn)數(shù)據(jù)中心的整合；在第二層的“內(nèi)容云”當中，HDS可以按需提供內(nèi)容，更可以不受應(yīng)用限制地進行數(shù)據(jù)搜索和集成；在第三層的“信息云”中，針對所有數(shù)據(jù)類型，HDS在其存儲平臺中融入了分析功能，使客戶可以從數(shù)據(jù)信息中獲取洞察力。
HDS提供的UCP for SAP HANA集成了基于大量數(shù)據(jù)集的創(chuàng)新和內(nèi)存分析技術(shù)，并提供實時的洞察力，從而使當前的信息驅(qū)動型企業(yè)可以加快其商業(yè)決策的速度。陳戈介紹說，UCP for SAP HANA解決方案結(jié)合了HDS刀片服務(wù)器技術(shù)、企業(yè)級存儲系統(tǒng)和業(yè)內(nèi)領(lǐng)先的網(wǎng)絡(luò)組件，在這樣一個集成的、高性能的硬件平臺上可以快速交付SAP下一代內(nèi)存計算技術(shù)。全球已有超過200家客戶在使用HDS和SAP的大數(shù)據(jù)解決方案。
方案點評
其實，HDS的“三步”云戰(zhàn)略也可以看成是其大數(shù)據(jù)戰(zhàn)略。HDS借助以UCP為核心的大數(shù)據(jù)平臺，可以幫助企業(yè)用戶構(gòu)建從基礎(chǔ)架構(gòu)到內(nèi)容歸檔和搜索，直至信息提取和分析的全面、高效的大數(shù)據(jù)解決方案。HDS的“信息云”直接與大數(shù)據(jù)相關(guān)。UCP是一個集成了計算、存儲與網(wǎng)絡(luò)的一體化平臺，它既可以提供像一體機一樣的整合性、簡單性，又可以提供靈活的選擇，連接第三方的設(shè)備組件。HDS還通過與包括SAP在內(nèi)的眾多大數(shù)據(jù)分析類的合作伙伴合作，針對行業(yè)定制優(yōu)質(zhì)的大數(shù)據(jù)解決方案。
HP StoreAll ：快速部署 極速搜索
中國惠普有限公司企業(yè)集團存儲產(chǎn)品部存儲架構(gòu)師張楠向記者表示，大數(shù)據(jù)存儲是一套解決方案，應(yīng)該能夠?qū)Υ髷?shù)據(jù)的Volume、Velocity、Variety和Value四個方面提供全面的支持。
第一，大數(shù)據(jù)存儲要支持海量級的數(shù)據(jù)存儲，比如具有PB級的存儲能力。第二，大數(shù)據(jù)存儲要支持更高的存儲速度，支持10Gb甚至更高的網(wǎng)絡(luò)連接。第三，大數(shù)據(jù)存儲要支持數(shù)據(jù)的多樣性，如圖片、文本、視頻、音頻等。第四，大數(shù)據(jù)最重要的是價值的體現(xiàn)，而為了實現(xiàn)這一點，存儲本身應(yīng)該具備快速、智能的數(shù)據(jù)檢索能力。“在存儲的最底層提供最直接、快捷的數(shù)據(jù)檢索。這一過程簡單說就是，將上層的數(shù)據(jù)挖掘工作下移，充分利用存儲強大的處理能力和數(shù)據(jù)識別能力?！睆堥e例說，“比如，在秒級的單位內(nèi)對數(shù)據(jù)進行極速的搜索， 從幾千萬甚至上億個文件中找到目標數(shù)據(jù)?！?/p>
另外，模糊查詢能力也是大數(shù)據(jù)存儲不可缺少的功能。智能的模糊查詢將為大數(shù)據(jù)平臺提供更加便捷的存儲服務(wù)能力，使得存儲更像一臺智能的高速計算設(shè)備。
目前，很多中國用戶在存儲廠商的引導(dǎo)下，片面追求存儲的大容量和高性能，而忽略了大數(shù)據(jù)存儲本身應(yīng)該提供的其他額外屬性。中國用戶在實施大數(shù)據(jù)的過程中經(jīng)常遇到的障礙有以下兩方面：第一，無法將存儲與大數(shù)據(jù)平臺進行對接；第二，無法充分利用大數(shù)據(jù)存儲的價值，也很難將其運用到實際的業(yè)務(wù)中。張楠表示，究其原因，主要在于有些大數(shù)據(jù)存儲產(chǎn)品沒有開放的接口協(xié)議，或沒有針對用戶的大數(shù)據(jù)場景進行特別優(yōu)化，也沒有用戶容易接受的易用的管理方式等。
惠普在大數(shù)據(jù)方面可以提供軟硬結(jié)合的解決方案。惠普在收購Autonomy公司之后，將其軟件與惠普的硬件平臺進行了整合， 形成了一套完整的大數(shù)據(jù)解決方案。張楠介紹說，在存儲方面，惠普擁有像StoreAll這樣的大數(shù)據(jù)存儲平臺。借助HP StoreAll硬件平臺，用戶除了可以實現(xiàn)海量數(shù)據(jù)的存儲和高速數(shù)據(jù)訪問以外，還能實現(xiàn)高級的數(shù)據(jù)檢索功能，對特殊文件進行快速定位。同時，結(jié)合HP Autonomy軟件的特性，惠普還引入了模糊查詢、智能語義庫等概念，可以幫助企業(yè)用戶通過存儲底層為上層業(yè)務(wù)帶來所需的大數(shù)據(jù)業(yè)務(wù)價值。
如今，閃存不僅在大數(shù)據(jù)領(lǐng)域，而且在Tier 1存儲市場同樣占據(jù)著十分重要的地位。對于大數(shù)據(jù)平臺來說，閃存可用來提升存儲的存取速度，降低I/O的響應(yīng)時間等。針對那些I/O壓力十分明確的大數(shù)據(jù)平臺， SSD可以發(fā)揮其效果， 提升存儲的整體性能。但是，SSD并不是萬能的。因為大部分的數(shù)據(jù)都是非結(jié)構(gòu)化的，而非結(jié)構(gòu)化數(shù)據(jù)對I/O的響應(yīng)要求遠遠沒有對帶寬的需求大，所以，讓用戶花數(shù)倍的價格購買SSD存儲在目前來看還是比較困難的。從目前情況看，引入閃存的大數(shù)據(jù)解決方案還不是很普遍。
方案點評
惠普在大數(shù)據(jù)方面收購了兩個軟件公司Vertica與Autonomy，然后將它們的軟件與原有的硬件平臺進行整合，針對結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)都可以提供針對性的解決方案?；萜赵趯⒋髷?shù)據(jù)軟件與存儲硬件結(jié)合上也進行了嘗試，其中一個成功的例子就是HP StoreAll大數(shù)據(jù)存儲平臺。HP StoreAll具有以下特點：橫向擴展，最大可以擴展到16TB；集成HP Autonomy搜索引擎，可以快速搜索，實現(xiàn)實時大數(shù)據(jù)的價值；內(nèi)置對OpenStack的支持，可快速部署；支持文件和對象類型的數(shù)據(jù)存儲。
NetApp：統(tǒng)一架構(gòu) 無限擴展
如今，企業(yè)若想獲得成功，就必須想方設(shè)法應(yīng)對具有前所未有的復(fù)雜性、高性能的海量數(shù)據(jù)，并盡可能地管理這些數(shù)據(jù)，從中發(fā)掘更大的商業(yè)價值。
對于國內(nèi)用戶來說，無論企業(yè)的規(guī)模和數(shù)據(jù)量大小如何，運用大數(shù)據(jù)的關(guān)鍵在于，企業(yè)是否把大數(shù)據(jù)作為一個真正的工具，去體現(xiàn)企業(yè)的差異化，從而提升競爭力。隨著越來越智慧的企業(yè)信息化的發(fā)展，IT不再是束縛企業(yè)發(fā)展的瓶頸，而是真正地融入了企業(yè)自身的業(yè)務(wù)中。越來越多的公司將大數(shù)據(jù)成功地運用于企業(yè)的商業(yè)模式。例如，在歐美，很多企業(yè)已經(jīng)著手將大量資源投放在大數(shù)據(jù)領(lǐng)域。反觀國內(nèi)，在金融領(lǐng)域，有為數(shù)不少的企業(yè)通過大數(shù)據(jù)的分析工具來分析金融的走勢，實現(xiàn)風險管理，進行信用卡的追蹤等。此外，像零售、制造、電信等行業(yè)也已在嘗試利用大數(shù)據(jù)分析工具為企業(yè)營銷和決策提供支撐。
無論企業(yè)現(xiàn)在是否正在使用大數(shù)據(jù)工具，企業(yè)都應(yīng)全面地考慮自身未來發(fā)展的需求，選擇一個廠家的平臺與之共同發(fā)展，這可以有效避免因數(shù)據(jù)和應(yīng)用遷移帶來的麻煩。
在大數(shù)據(jù)方面，NetApp能夠幫助企業(yè)實現(xiàn)數(shù)據(jù)管理，應(yīng)對業(yè)務(wù)挑戰(zhàn)的極限，將以數(shù)據(jù)為導(dǎo)向的洞察轉(zhuǎn)化為有效行動。若想將數(shù)據(jù)轉(zhuǎn)化為商機，僅僅提升管理能力是不夠的，需要徹底轉(zhuǎn)變數(shù)據(jù)和業(yè)務(wù)之間的聯(lián)系模式。NetApp可以幫助企業(yè)用戶持續(xù)管理數(shù)據(jù)，迅速把握意料之外的新商機，永久保存所有數(shù)據(jù)，并在靈活、開放的存儲平臺之上打造屬于企業(yè)自己的大數(shù)據(jù)解決方案。
NetApp提供了可高效處理、分析、管理和訪問大規(guī)模數(shù)據(jù)的大數(shù)據(jù)解決方案。NetApp的解決方案組合可劃分為分析、帶寬和內(nèi)容三個主要用例，這被稱之為大數(shù)據(jù)的“ABC”基本要素。
具體來看，分析（Analysis）是指針對極大數(shù)據(jù)集的高效分析。NetApp分析解決方案就是幫助用戶深入了解和利用數(shù)字世界，將數(shù)據(jù)轉(zhuǎn)化為高質(zhì)量的信息，以及提供關(guān)于業(yè)務(wù)的更深入見解，從而幫助企業(yè)做出更好的決策。
帶寬（Bandwidth）是指適用于數(shù)據(jù)密集型工作負載的性能。此類解決方案著重于為速度非?？斓墓ぷ髫撦d提供更高的性能。高帶寬應(yīng)用包括高性能計算（能以極快的速度執(zhí)行復(fù)雜的分析）、用于監(jiān)控和任務(wù)規(guī)劃的高性能視頻流、媒體和娛樂領(lǐng)域中的視頻剪輯和播放。
內(nèi)容（Content）是指無限的安全數(shù)據(jù)存儲。此類解決方案著重于滿足可擴展的安全數(shù)據(jù)存儲需求。內(nèi)容解決方案必須支持存儲的無限擴展能力，以便企業(yè)可以根據(jù)需要存儲任意多的數(shù)據(jù)，并能在需要時找到所需的數(shù)據(jù)。
NetApp致力于通過一系列解決方案來提供高性能的運算和大數(shù)據(jù)的應(yīng)用。2013年11月，NetApp再次更新了E系列家族產(chǎn)品，推出E2700和E5500。該系列產(chǎn)品采用可輕松擴展的設(shè)計，適用于要求99.999%的可靠性且穩(wěn)定、高性能的工作負載。
用戶在采購大數(shù)據(jù)存儲產(chǎn)品時，需要注意以下五個方面的問題：大數(shù)據(jù)存儲必須具有向上擴展與向外擴展的能力；架構(gòu)必須是針對工作負載進行優(yōu)化的，具有實時處理能力；具有整合的數(shù)據(jù)保護功能；保證7×24小時運行不中斷，可在線進行容量擴展，實施數(shù)據(jù)遷移等；可以實現(xiàn)服務(wù)的自動化。
方案點評
NetApp的技術(shù)優(yōu)勢集中體現(xiàn)在其統(tǒng)一存儲平臺上，從入門級產(chǎn)品到企業(yè)級產(chǎn)品，全部基于同一個體系架構(gòu)和操作系統(tǒng)，不僅部署和使用方便，而且升級和擴展非常簡單。當初，NetApp收購LSI Engenio，其中一個重要的原因就是為了大數(shù)據(jù)。2013年，NetApp不斷更新E系列產(chǎn)品線，推出E2700和E5500等。E5500可以支持高IOPS混合工作負載和數(shù)據(jù)庫、高性能文件系統(tǒng)和帶寬密集型流等應(yīng)用，可確保數(shù)據(jù)的高可用性、完整性和安全性。
曙光XData：高度集成 貼近行業(yè)
關(guān)于大數(shù)據(jù)存儲，目前業(yè)界沒有一個通用的定義。曙光信息產(chǎn)業(yè)股份有限公司總裁助理兼存儲產(chǎn)品線產(chǎn)品總監(jiān)惠潤海從曙光大數(shù)據(jù)平臺和解決方案角度，概括出大數(shù)據(jù)存儲的主要特征。
首先，大數(shù)據(jù)存儲必須支持全類型數(shù)據(jù)， 包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)數(shù)據(jù)，實現(xiàn)統(tǒng)一數(shù)據(jù)支持。
其次，存儲性能上，一方面，大數(shù)據(jù)存儲要支持海量數(shù)據(jù)，并且要在保證數(shù)據(jù)可靠性的基礎(chǔ)之上，實現(xiàn)容量與性能的線性擴展；另一方面，為了實現(xiàn)大數(shù)據(jù)的價值，批處理和實時處理兩種措施都需要高性能的數(shù)據(jù)訪問獲取能力。
最后，在系統(tǒng)達到一定規(guī)模之后，系統(tǒng)的易用性和可管理性也是不可或缺的。
從應(yīng)用角度來說，目前中國用戶在大數(shù)據(jù)存儲應(yīng)用中最迫切的需求，是如何真正實現(xiàn)用戶數(shù)據(jù)的價值，如何驅(qū)動業(yè)務(wù)發(fā)展，實現(xiàn)決策和運營。“從系統(tǒng)構(gòu)建層面說，要實現(xiàn)數(shù)據(jù)高性價比的存儲和管理，同時滿足數(shù)據(jù)服務(wù)的相關(guān)需求?！被轁櫤１硎尽?/p>
針對用戶對大數(shù)據(jù)存儲的需求， 曙光推出了像大數(shù)據(jù)一體機這樣的全類型數(shù)據(jù)分析型產(chǎn)品，同時還基于該產(chǎn)品構(gòu)建了基于行業(yè)的解決方案，以幫助用戶實現(xiàn)大數(shù)據(jù)落地。
“除此之外， 我們還提供了大數(shù)據(jù)統(tǒng)一數(shù)據(jù)中心解決方案， 涵蓋了像主攻事物處理的DS900、DS800，以及針對文件存儲的Parastor等存儲產(chǎn)品。我們基于這些存儲產(chǎn)品構(gòu)建了大數(shù)據(jù)運營管理平臺?！被轁櫤＝榻B說，“曙光的優(yōu)勢不僅在于可以提供全面的產(chǎn)品支撐，更重要的是能夠提供數(shù)據(jù)生命周期過程服務(wù)支持。目前，我們提供的免費維保期限為5年?！?/p>
曙光開發(fā)了針對不同行業(yè)和應(yīng)用場景的大數(shù)據(jù)存儲解決方案。以金融行業(yè)為例，目前國內(nèi)四大行的應(yīng)用系統(tǒng)每年產(chǎn)生的非結(jié)構(gòu)化數(shù)據(jù)量已達到PB級，結(jié)構(gòu)化數(shù)據(jù)也以百TB計。面對如此大量的數(shù)據(jù)，如何存儲、管理、利用和盤活它們呢？惠潤海認為，只有通過商業(yè)智能和高級分析應(yīng)用解決方案才能將數(shù)據(jù)的價值最大程度地發(fā)揮出來。
針對金融行業(yè)用戶的需求，曙光開發(fā)的XData大數(shù)據(jù)解決方案利用優(yōu)化的大數(shù)據(jù)處理技術(shù)，對文件管理、歷史數(shù)據(jù)查詢和數(shù)據(jù)分析類應(yīng)用等進行深入研究，為數(shù)據(jù)爆炸式增長帶來的海量數(shù)據(jù)存儲及分析應(yīng)用提供高可靠的解決方案。
曙光金融行業(yè)XData大數(shù)據(jù)解決方案采用曙光自主研發(fā)的SN-MPP并行數(shù)據(jù)庫，同時結(jié)合大數(shù)據(jù)處理事實標準Hadoop，并充分考慮了多方面的數(shù)據(jù)收集，加入ETL工具和連接驅(qū)動器，提供了類SQL的接口，還和現(xiàn)有金融業(yè)務(wù)系統(tǒng)進行對接。
針對金融行業(yè)歷史數(shù)據(jù)，XData大數(shù)據(jù)解決方案在方案設(shè)計上主要考慮了數(shù)據(jù)的安全性、歷史數(shù)據(jù)高效導(dǎo)入、快速訪問與分析報表。曙光金融行業(yè)大數(shù)據(jù)解決方案立足于基礎(chǔ)平臺建設(shè)，同時切實貼合金融行業(yè)用戶需求，提供了優(yōu)質(zhì)的軟硬一體化解決方案，為用戶一攬子解決了部署、業(yè)務(wù)移植開發(fā)等技術(shù)難題，幫助用戶跨過應(yīng)用門檻。
面對大數(shù)據(jù)時代愈加復(fù)雜的應(yīng)用環(huán)境和特點，同有科技針對不同的用戶需求和市場，率先提出“應(yīng)用定義存儲”和“定制”兩大革命性戰(zhàn)略。通過專業(yè)、高效的產(chǎn)品及解決方案，幫助各行業(yè)用戶積極應(yīng)對大數(shù)據(jù)時代新興應(yīng)用的挑戰(zhàn)，在業(yè)界掀起了一場新型數(shù)據(jù)中心變革的熱潮。
EDC引領(lǐng)中高端市場新變革
大數(shù)據(jù)時代，各種具備大數(shù)據(jù)特征的新興應(yīng)用需求逐漸增多，中高端用戶對數(shù)據(jù)中心的性能、效率、安全等各方面的需求都有了革命性的變化。針對新型需求，同有科技提出劃時代的“數(shù)據(jù)改變未來，應(yīng)用定義存儲”戰(zhàn)略，對數(shù)據(jù)中心存儲架構(gòu)進行了重新定義。通過一系列“E”型產(chǎn)品和“E”型解決方案，幫助用戶構(gòu)建EDC（Efficient Data Center）高效能數(shù)據(jù)中心，滿足大數(shù)據(jù)時代各種新應(yīng)用對數(shù)據(jù)中心存儲的不同需求。
與傳統(tǒng)的數(shù)據(jù)中心不同，同有科技EDC高效能數(shù)據(jù)中心，對數(shù)據(jù)中心存儲架構(gòu)進行重新規(guī)劃、設(shè)計與定位。它涵蓋產(chǎn)品、解決方案、咨詢與服務(wù)三個層面，為用戶規(guī)劃了先進的產(chǎn)品和貼近應(yīng)用的解決方案，幫助用戶構(gòu)建高效能大數(shù)據(jù)存儲架構(gòu)。
通過全系列 “E”型產(chǎn)品和方案，同有科技EDC為用戶部署的高效能數(shù)據(jù)中心，能讓數(shù)據(jù)中心擁有極高的IT資源、存儲資源利用率；NCS虛擬交換技術(shù)和固態(tài)存儲系統(tǒng)，保證數(shù)據(jù)中心整體性能無瓶頸；物理機與虛擬機之間的自動漂移技術(shù)，實現(xiàn)數(shù)據(jù)中心業(yè)務(wù)無縫閃電接管；深度條帶技術(shù)，讓數(shù)據(jù)中心具備超強自愈功能。
EDC理念為用戶構(gòu)建新型數(shù)據(jù)中心提供了全新的思路，在市場應(yīng)用以來，受到了眾多用戶的青睞，引發(fā)了新一輪中高端存儲用戶在大數(shù)據(jù)時代數(shù)據(jù)中心建設(shè)的革新熱潮。
定制化引爆中小存儲新理念
大數(shù)據(jù)時代，作為中國存儲行業(yè)最具成長性的領(lǐng)域，中小存儲市場迎來了爆發(fā)增長期，傳統(tǒng)的單一產(chǎn)品和方案已遠遠不能滿足用戶需求。作為同有科技專為中小存儲市場和安防市場打造的獨立子品牌，存儲小金剛了劃時代的“存儲，從定制開始”戰(zhàn)略。通過“定制”的產(chǎn)品及解決方案、渠道政策、供應(yīng)鏈管理和服務(wù)政策，滿足各行業(yè)用戶的個性化需求，全面開啟定制時代。
全面區(qū)別于業(yè)界單一產(chǎn)品行天下的模式，存儲小金剛針對中小存儲市場和安防監(jiān)控市場的不同行業(yè)與應(yīng)用，為用戶打造量身定制的產(chǎn)品及解決方案；根據(jù)業(yè)務(wù)模式、市場拓展、培訓(xùn)支持、價格體系等方面的不同需求，為合作伙伴提供定制的渠道政策；同時，更為不同類型的用戶及合作伙伴，定制不同的供應(yīng)鏈管理和服務(wù)政策，滿足不同行業(yè)、不同應(yīng)用的個性化需求。
目前，存儲小金剛已經(jīng)成功為政府、教育、醫(yī)療、企業(yè)以及安防行業(yè)等用戶提供定制的存儲服務(wù)，成為了中小存儲市場和安防市場當仁不讓的領(lǐng)導(dǎo)品牌。
堅持自主創(chuàng)新 推動國產(chǎn)化
大數(shù)據(jù)時代的到來將會給各行業(yè)帶來前所未有的變革性影響，通過對海量數(shù)據(jù)的挖掘和分析會獲得全新的、更具競爭力的服務(wù)和更大價值的產(chǎn)品。數(shù)據(jù)的安全和信息系統(tǒng)的不間斷運行將成為關(guān)注的重心，IT系統(tǒng)基礎(chǔ)構(gòu)建也將以此展開從而防范可能發(fā)生的管理危機。北京藍科泰達科技股份有限公司（以下簡稱北京藍科泰達）成立于2002年，作為容災(zāi)備份領(lǐng)域的廠商和行業(yè)專家，致力于保障大數(shù)據(jù)時代數(shù)據(jù)安全和信息系統(tǒng)持續(xù)不間斷運行。北京藍科泰達以客戶需求為導(dǎo)向，以大數(shù)據(jù)時代數(shù)據(jù)安全和信息系統(tǒng)不間斷運行為著力點，推出“PlusWell全業(yè)務(wù)保障整體解決方案”。
“PlusWell全業(yè)務(wù)保障整體解決方案”是構(gòu)建基礎(chǔ)IT系統(tǒng)的關(guān)鍵技術(shù)也是大數(shù)據(jù)時代數(shù)據(jù)安全和信息系統(tǒng)不間斷運行的重要保障，是積極應(yīng)對危機事件必要的技術(shù)手段和管理方向。全面涵蓋了服務(wù)器高可用，滿足信息系統(tǒng)7×24小時不間斷運行；數(shù)據(jù)多點存儲冗余避免存儲故障帶來的數(shù)據(jù)丟失、業(yè)務(wù)停頓；數(shù)據(jù)自動備份、在線還原規(guī)避邏輯錯誤和人為誤操作保證數(shù)據(jù)“零”丟失。
PlusWell SyMirror同步鏡像系統(tǒng)采用虛擬磁盤技術(shù)，提供透明化的數(shù)據(jù)存取功能和智能增量數(shù)據(jù)實別功能，確保兩臺物理存儲設(shè)備的數(shù)據(jù)在任何時候的一致性，確保加入虛擬系統(tǒng)中的存儲設(shè)備進行快速增量同步，存儲設(shè)備容災(zāi)切換時間小于1秒。同PlusWell HA軟件系統(tǒng)緊密配合，協(xié)同切換，實現(xiàn)真正意義的高可用冗余存儲方案。PlusWell HA 集群軟件系統(tǒng)提供服務(wù)高可用（熱備）功能，保障信息系統(tǒng)7×24小時連續(xù)運行。PlusWell VBS虛擬備份系統(tǒng)提供業(yè)務(wù)數(shù)據(jù)的自動備份和在線還原功能，保證數(shù)據(jù)的“零”丟失和海量數(shù)據(jù)5秒內(nèi)還原到任意備份點；同時提供對服務(wù)器操作系統(tǒng)的災(zāi)難備份和一鍵還原功能（可以選擇還原到各種歷史備份點）?！癙lusWell全業(yè)務(wù)保障整體解決方案”一經(jīng)推出便有不俗的表現(xiàn)。2008年，經(jīng)過嚴格的方案評審和苛刻的入場測試從眾多解決方案中脫穎而出，圓滿完成了“北京奧運會、殘奧會開閉幕式指揮監(jiān)控系統(tǒng)工程項目”。北京奧運會開閉幕式運營中心給出了以下的評價：“PlusWell品牌熱備份軟件自2008年6月12日進國家體育場（鳥巢）安裝，經(jīng)過3個月的運行，其間經(jīng)過奧運會開閉幕式、殘奧會開閉幕式的檢驗，產(chǎn)品運行穩(wěn)定可靠、各項技術(shù)指標滿足工程要求，圓滿完成奧運會演出與儀式的指揮監(jiān)控任務(wù)！”
奮進中的北京藍科泰達不滿足于獲得的已有成績，持續(xù)創(chuàng)新，推出了“智能數(shù)據(jù)交換機”產(chǎn)品系列。“智能數(shù)據(jù)交換機”是北京藍科泰達十余年的技術(shù)積累和行業(yè)經(jīng)驗的結(jié)晶，將引領(lǐng)大數(shù)據(jù)時代災(zāi)備市場變革潮流、邁進災(zāi)備平臺嶄新時代。
“我特別擔心有客戶對我說，請富士通來幫我做一個大數(shù)據(jù)解決方案，幫我解決包括研發(fā)、生產(chǎn)和銷售在內(nèi)的所有問題。說實在的，富士通真的做不到。大數(shù)據(jù)解決方案的形成是一個過程，是IT廠商與用戶一道在分析企業(yè)自身運營狀態(tài)與所在行業(yè)發(fā)展趨勢過程中不斷改進的過程?！备皇客ǎㄖ袊┬畔⑾到y(tǒng)有限公司副總裁兼市場戰(zhàn)略總部解決方案服務(wù)戰(zhàn)略事業(yè)部總經(jīng)理黃邦瑜7月11日在貴陽大數(shù)據(jù)國際年會上接受采訪時表示。
數(shù)據(jù)決策的5個階段
黃邦瑜在接受采訪時強調(diào)，大數(shù)據(jù)應(yīng)該是一個幫助企業(yè)決策的工具，企業(yè)管理者千萬不要認為IT能代替他們做出決策。他介紹說，富士通把企業(yè)的決策分為五個階段：
第一個階段，以傳統(tǒng)的根據(jù)企業(yè)管理層的經(jīng)驗來做決策為特征。這其中涉及一些數(shù)據(jù)，這些數(shù)據(jù)可能是管理者的紙面記錄和報告，或者新聞媒體的一些信息。管理者認為該怎么做，于是拍腦袋就做出決策了。
第二階段，以辦公軟件中的Excel等表格中的數(shù)據(jù)為依據(jù)進行決策。這種表格可能很大，橫向縱向都有好幾頁。
第三階段，為了把企業(yè)管理層從各種各樣的電子表格和電子表格中龐雜的數(shù)據(jù)中解放出來，IT部門會用IT手段把重要的信息及時提煉出來，并且每天早上發(fā)給管理層供其決策使用。這一階段的數(shù)據(jù)來源是多樣化的，如ERP、財務(wù)、人力資源、生產(chǎn)等系統(tǒng)產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù)。經(jīng)過提煉后，這些數(shù)據(jù)會以圖形化的方式呈現(xiàn)。還有一些來自網(wǎng)絡(luò)、媒體等的外部數(shù)據(jù)。所以，管理者會看到結(jié)構(gòu)化與非結(jié)構(gòu)化兩種數(shù)據(jù)。
第四階段，借助IT手段從大量的數(shù)據(jù)中找出規(guī)律并提醒管理層，而不是要管理者針對各種數(shù)據(jù)做出快速反應(yīng)。
第五階段，根據(jù)內(nèi)外部各種數(shù)據(jù)對未來的一些業(yè)務(wù)場景進行模擬，以評估決策的效果。
“因為管理層的時間和精力有限，這就要求IT能夠采集企業(yè)運營過程中產(chǎn)生并積累的大量準確的數(shù)據(jù)，并且從外部海量數(shù)據(jù)中攝取相應(yīng)的輔助數(shù)據(jù)，然后通過數(shù)據(jù)挖掘和分析等方式，將其規(guī)律找出來，并且比較精煉地展現(xiàn)在決策者面前，使其能夠在短時間內(nèi)做出精準的判斷和決策?！秉S邦瑜說，“當然，前提是企業(yè)的信息化基礎(chǔ)要足夠好。如果企業(yè)沒有存儲運營過程中產(chǎn)生的大量的有價值數(shù)據(jù)，一切也都無從談起?！?/p>
大數(shù)據(jù)對決策的輔助支持不僅適用于管理層。企業(yè)會遇到戰(zhàn)略、市場或技術(shù)等各種不同層面、不同范圍的決策問題。黃邦瑜舉例說，富士通眾多業(yè)務(wù)中包括醫(yī)藥領(lǐng)域的基因與新藥研究。以往的新藥開發(fā)主要憑借科研人員的智力和經(jīng)驗。如今，研究人員如果有了一個靈感或者設(shè)想，可以在高性能計算機上進行模擬和驗證。大數(shù)據(jù)已經(jīng)顛覆了傳統(tǒng)的新藥開發(fā)模式。
企業(yè)必須參與其中
科學(xué)與技術(shù)之間一個基本的區(qū)別在于，科學(xué)是去發(fā)現(xiàn)自然界中原本就存在的規(guī)律，而技術(shù)則是為了發(fā)明自然界中原本不存在的東西。就目的而言，大數(shù)據(jù)更像科學(xué)，它要做的是去發(fā)現(xiàn)原本存在于海量數(shù)據(jù)中的關(guān)聯(lián)性規(guī)律，只不過先前IT的存儲與計算能力難以勝任。
“企業(yè)在上馬大數(shù)據(jù)之前首先要練好內(nèi)功。以制造業(yè)為例，企業(yè)要從研發(fā)、生產(chǎn)、營銷等流程上進行審視，看這些流程中的數(shù)據(jù)是封閉在各自的流程中，還是可以被其他流程共享，因為在從產(chǎn)品研發(fā)到銷售的整個業(yè)務(wù)流程中，某個流程上產(chǎn)生的數(shù)據(jù)可能會對其他流程產(chǎn)生影響。上大數(shù)據(jù)應(yīng)用的前提是打破企業(yè)的信息孤島?！秉S邦瑜說。
在之前的企業(yè)信息化建設(shè)中，IT供應(yīng)商與用戶的職責很清晰。系統(tǒng)集成商要根據(jù)用戶的應(yīng)用需求，結(jié)合企業(yè)所在行業(yè)的屬性，制定并實施相應(yīng)的解決方案；系統(tǒng)建成后，交由用戶使用。而大數(shù)據(jù)應(yīng)用則要求打破甲方、乙方?jīng)芪挤置鞯慕缦?，要求用戶與系統(tǒng)集成商一道完成大數(shù)據(jù)解決方案。
“現(xiàn)在大數(shù)據(jù)非常火，以至有的企業(yè)認為大數(shù)據(jù)就是一副靈藥，馬上能夠解決企業(yè)存在的所有問題。實際上這是一種認識誤區(qū)。”
黃邦瑜說，制造企業(yè)擁有大量的各種類型的數(shù)據(jù)，不可能找到一種解決方案把企業(yè)經(jīng)營者想找的規(guī)律一下子都找出來。富士通會根據(jù)用戶的需要找一個主題，用戶從業(yè)務(wù)分析著眼，讓數(shù)據(jù)與業(yè)務(wù)關(guān)聯(lián)；而富士通則從IT入手，分析如何從海量數(shù)據(jù)中找出與該主題相關(guān)的規(guī)律，然后制定并實施相應(yīng)的解決方案。
“當前，大數(shù)據(jù)尚處于起步階段，中外企業(yè)最大的差別在于，國外企業(yè)信息化應(yīng)用更成熟一些，他們會針對大數(shù)據(jù)提出自己的問題和需求?！秉S邦瑜說。
云計算，特別是SaaS應(yīng)用的普及，使得企業(yè)的數(shù)據(jù)越來越多地向云遷移，企業(yè)的數(shù)據(jù)安全問題因此凸顯出來。黃邦瑜因此特別強調(diào)云計算下大數(shù)據(jù)應(yīng)用的安全問題：“現(xiàn)在，企業(yè)的云應(yīng)用還處于初步階段，如辦公系統(tǒng)、人力資源等，一旦企業(yè)的ERP等核心應(yīng)用遷移到云上，而相關(guān)的法律、法規(guī)和行業(yè)監(jiān)管沒有及時跟上的話，企業(yè)的核心數(shù)據(jù)就有可能被他人惡意盜用，或者被服務(wù)供應(yīng)商為了商業(yè)目的而濫用?！?/p>
“歐美日在這方面的監(jiān)管非常嚴格，市場準入門檻非常高，需要企業(yè)具備多種資質(zhì)。如果不能在機制上有效地保護用戶數(shù)據(jù)不被濫用，那么企業(yè)會因為出于對數(shù)據(jù)安全的擔心而對云計算乃至大數(shù)據(jù)應(yīng)用裹足不前。”
貴在理解用戶的業(yè)務(wù)
傳統(tǒng)上，日本IT廠商比較低調(diào)，不像美國IT企業(yè)那樣通過強勢的市場營銷開辟新的市場，并借助合作伙伴的力量迅速進行市場擴張。日本的IT廠商通常會與客戶保持長期而密切的合作關(guān)系。比如說，富士通現(xiàn)在提倡的精益IT理念就源自幾十年來與豐田汽車在生產(chǎn)管理方面的合作。
“傳統(tǒng)日資IT企業(yè)與德國企業(yè)比較接近，都比較務(wù)實，注重產(chǎn)品品質(zhì)和細節(jié)。而且日資企業(yè)的員工流動率沒有美國企業(yè)那么高，技術(shù)隊伍的穩(wěn)定使得日資IT企業(yè)對其客戶所在行業(yè)的知識和經(jīng)驗積累得更多。這些因素使得日資IT企業(yè)與他們的客戶保持密切的長期合作關(guān)系?！秉S邦瑜說，“今天看來，在與客戶長期合作中形成的對用戶業(yè)務(wù)深刻的理解，以及由此形成的良好的用戶體驗非常重要，因為大數(shù)據(jù)的實施既要盡可能理解用戶的業(yè)務(wù)，又要與用戶一道持續(xù)不斷地對解決方案進行改進。”
黃邦瑜說：“富士通既是IT企業(yè)，也是制造行業(yè)企業(yè)，因此我們會基于自己的最佳實踐，為不同的客戶提供更細致的產(chǎn)品和服務(wù)。從產(chǎn)品上看，富士通的特點是比較全，包括后臺的服務(wù)器、存儲、網(wǎng)絡(luò)、中間件，以及客戶端的智能手機、平板電腦、筆記本電腦等。因此，富士通的整體解決方案會更加優(yōu)化。
“從系統(tǒng)整體上規(guī)劃、設(shè)計和實施大數(shù)據(jù)解決方案是富士通的優(yōu)勢所在。比如說，在醫(yī)療影像領(lǐng)域，有的美國影像設(shè)備供應(yīng)商會在賣設(shè)備時附送該設(shè)備的處理軟件，但它并不能滿足醫(yī)院除了醫(yī)療影像設(shè)備之外的其他需求?！秉S邦瑜說，“而作為IT廠商，富士通更關(guān)心如何用IT系統(tǒng)來支撐醫(yī)院的整個影像業(yè)務(wù)，即在包括掛號、門診和影像科檢查等在內(nèi)的整個流程中，不同科室如何分享影像數(shù)據(jù)，如何分門別類地存儲這些數(shù)據(jù)，如何與醫(yī)院的信息系統(tǒng)對接等?！?/p>
2013年，惠普了大數(shù)據(jù)解決方案平臺HAVEn，這是一個能夠處理所有數(shù)據(jù)類型，能夠?qū)崟r分析且安全的開放架構(gòu)。目前，該平臺在國內(nèi)外的金融、電信、能源、互聯(lián)網(wǎng)等行業(yè)中已經(jīng)擁有了許多成功應(yīng)用。惠普中國區(qū)副總裁、軟件集團大中華區(qū)總經(jīng)理于志偉表示，HAVEn的推出標志著惠普已經(jīng)脫離了初始的數(shù)據(jù)匯集的階段，步入了大數(shù)據(jù)應(yīng)用的新階段。
行業(yè)、能力、人才
于志偉認為，目前中國的大數(shù)據(jù)應(yīng)用還處于起步階段，而且由于行業(yè)需求、區(qū)域和人才儲備等情況的差異，造成了大數(shù)據(jù)應(yīng)用水平參差不齊的現(xiàn)象。在某些行業(yè)，用戶對大數(shù)據(jù)的需求是十分迫切的，但是相當多的用戶仍糾結(jié)于數(shù)據(jù)量“大”這個問題，還沒有考慮結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化等不同類型的數(shù)據(jù)應(yīng)該如何處理。
國外的大數(shù)據(jù)應(yīng)用水平已經(jīng)達到很高的程度。舉例來說，在美國，一個區(qū)域內(nèi)的所有醫(yī)院的信息都會被搜集起來用于分析，據(jù)此可預(yù)測某種疾病的死亡率。“國外的大數(shù)據(jù)應(yīng)用已經(jīng)走入行業(yè)，可以挖掘出行業(yè)中真正有價值的東西。雖然國內(nèi)的大數(shù)據(jù)應(yīng)用還停留在初始階段，但在某些行業(yè)，比如互聯(lián)網(wǎng)，其大數(shù)據(jù)應(yīng)用的復(fù)雜程度比國外更甚，發(fā)展水平也較高?！庇谥緜ハ蛴浾弑硎?。
大數(shù)據(jù)的應(yīng)用要經(jīng)歷一個過程，不同的行業(yè)對大數(shù)據(jù)應(yīng)用的需求是不同的。于志偉表示，企業(yè)在實施大數(shù)據(jù)應(yīng)用時應(yīng)注意以下幾個問題：第一，注重大數(shù)據(jù)的行業(yè)應(yīng)用價值；第二，企業(yè)要不斷提升自身的能力去獲得想要的信息；第三，大數(shù)據(jù)人才非常重要?！澳壳?，我國大數(shù)據(jù)行業(yè)面臨著人才嚴重匱乏的局面，從數(shù)據(jù)模型專家到通曉行業(yè)應(yīng)用的復(fù)合型大數(shù)據(jù)人才都十分短缺，這會影響大數(shù)據(jù)應(yīng)用的發(fā)展速度?！庇谥緜ケ硎尽?/p>
HAVEn是一種方向
今天，產(chǎn)品集成并不是難事，那么HAVEn是不是簡單地將相關(guān)產(chǎn)品攢到了一起呢？于志偉澄清說，從HAVEn本身的標準架構(gòu)來看，H代表Hadoop，表明HAVEn是一種分布式的架構(gòu)，能夠支持各種類型的數(shù)據(jù)，而且存儲成本非常低廉；A代表Autonomy，表明HAVEn可以高效地處理非結(jié)構(gòu)化信息，特別是機器語言；V代表Vertica，表明HAVEn可以實時處理和分析大量信息；E代表Enterprise Security，主要針對半結(jié)構(gòu)化數(shù)據(jù)的處理；n代表的是各種在大數(shù)據(jù)平臺上開發(fā)的應(yīng)用。
HAVEn是一個平臺，它可以處理所有類型的信息，而且能做到實時分析，同時具有安全性。那么，HAVEn能不能代表未來大數(shù)據(jù)方案的發(fā)展方向？于志偉并沒有正面回答記者的問題，而是舉了一個例子，全球最大的社交媒體公司，之前采用Hadoop架構(gòu)對信息進行處理。但是在半年前，它們采購了Vertica。很多人認為，Hadoop代表了大數(shù)據(jù)主流的發(fā)展方向，那么這家企業(yè)為什么會轉(zhuǎn)而選擇Vertica呢？最主要的原因是，Vertica可以實現(xiàn)實時分析。對于以廣告收入為主要來源的這家企業(yè)來說，實時推送精準的廣告是至關(guān)重要的，而Vertica可以實現(xiàn)。這家企業(yè)用Hadoop處理非實時的數(shù)據(jù)業(yè)務(wù)，而用Vertica進行實時的業(yè)務(wù)分析。雖然相比Hadoop，Vertica的采購價格略貴，但這家企業(yè)還是一次性采購了20PB。還有一家美國的知名電信公司，一次性采購了25PB的 Vertica解決方案，用于4G業(yè)務(wù)。
“我們不去爭論HAVEn是不是業(yè)界最先進的產(chǎn)品，但是綜合上述這些已經(jīng)使用了HAVEn的代表性企業(yè)的實踐，HAVEn代表了一種發(fā)展方向?！庇谥緜シ治稣f，“Hadoop將來會不會更全面，也能實時處理信息？有這種可能性，但需要時間。三年或五年以后，什么都可能發(fā)生，一種新技術(shù)甚至?xí)?。事實證明，我們的大數(shù)據(jù)平臺能夠解決用戶的問題，而且很多用戶都在使用?！?/p>
在中國，也有用戶在使用HAVEn，比如一個運營商使用HAVEn中的Vertica，分析用戶的上網(wǎng)行為，每天分析的記錄達到幾十億條。以前，這樣的分析工作很難在一天之內(nèi)完成，而使用Vertica，分析速度提高了60倍。另外，國內(nèi)某知名能源公司采用HAVEn中的Autonomy，支持其信息共享平臺。
于志偉認為，HAVEn還只是一個大數(shù)據(jù)平臺，而用戶購買的是應(yīng)用。因此從這個角度說，惠普提供的解決方案還不夠全面。HAVEn中為什么會有一個“n”，就是表明惠普要在大數(shù)據(jù)領(lǐng)域開發(fā)更多的應(yīng)用?；萜张c全球最大的幾家咨詢公司合作，并在亞太和中國市場上尋找類似的合作伙伴?！靶袠I(yè)解決方案是有區(qū)域性特征的，不可能直接照搬國外的。在一些垂直細分領(lǐng)域，我們一方面自己開發(fā)，另一方面也和合作伙伴共同開發(fā)解決方案?！庇谥緜パa充說，“我們與政府合辦的IT培訓(xùn)基地也把大數(shù)據(jù)當作一個重點。中國極缺大數(shù)據(jù)人才，我們從現(xiàn)在開始就要培養(yǎng)。這些人才今后可以為我們的合作伙伴所用，有利于我們共同構(gòu)建一個良好的大數(shù)據(jù)生態(tài)體系?！?/p>
樹立行業(yè)樣板
記者在采訪很多用戶時，他們都表示已經(jīng)認識到了大數(shù)據(jù)、云計算的重要性和可能給企業(yè)帶來的收益。但是認識與接受是兩回事，目前真正將大數(shù)據(jù)、云計算用于業(yè)務(wù)并取得顯著經(jīng)濟利益的用戶畢竟是少數(shù)。大數(shù)據(jù)是當前用戶最迫切需要的、關(guān)系企業(yè)成敗的技術(shù)，還是只是起到了錦上添花的作用？
于志偉對于大數(shù)據(jù)的前景十分樂觀：“目前在客戶中，真正使用大數(shù)據(jù)的比例可能低于5%，但即使是這5%已經(jīng)是巨大的客戶量，而且這5%的企業(yè)都是超大型的企業(yè)和最需要大數(shù)據(jù)的企業(yè)?；萜找欢ㄊ窍扰c這些企業(yè)合作，樹立大數(shù)據(jù)的應(yīng)用標桿，然后再引導(dǎo)更多的企業(yè)加入?；萜漳壳霸谧龅娜瞬沤逃团囵B(yǎng)工作，也是為了更好地普及大數(shù)據(jù)應(yīng)用。我們不確定大數(shù)據(jù)市場何時會井噴，但我們會一直持續(xù)地給用戶和市場更多方案、經(jīng)驗和信心。”
大數(shù)據(jù)的一個典型特征就是實時處理和分析，能夠?qū)崿F(xiàn)實時處理的解決方案價格相對昂貴，而客戶往往追求的是高性比的解決方案。那么，價格會不會是阻礙大數(shù)據(jù)普及的一個因素呢？Vertica是實時分析工具的一個代表，它的價格是普通企業(yè)用戶能接受的嗎？“相對于Hadoop大數(shù)據(jù)方案來說，Vertica的成本高相對高一些?！庇谥緜ゲ⒉恢M言，“Vertica運行于開放的硬件平臺架構(gòu)之上，不管是惠普自己的硬件還是第三方的硬件，即使在低端的x86平臺上也可以良好運行。我們可以為用戶提供靈活的選擇，既能提供Vertica軟件，也可以提供軟件與硬件組成的整體解決方案，包括一體機。無論從整體擁有成本，還是靈活性的角度來分析，相比市場上的其他一體機或大數(shù)據(jù)解決方案，Vertica大數(shù)據(jù)解決方案還是非常有競爭力的。”
鏈接
惠普中國軟件集團的四件大事
2014年，惠普軟件的整體戰(zhàn)略相較去年不會有太大變化。于志偉表示，惠普軟件在今年將主要做好以下四件事。
第一，在大數(shù)據(jù)、云計算方面繼續(xù)加強與政府的合作，同時抓好人才培養(yǎng)工作。
第二，在大數(shù)據(jù)、云計算、移動應(yīng)用等領(lǐng)域，尋找并樹立更多的成功用戶樣板，吸引更多新客戶。
在銳捷網(wǎng)絡(luò)RG-BDS產(chǎn)品上，銳捷網(wǎng)絡(luò)安全與應(yīng)用交付產(chǎn)品事業(yè)部總經(jīng)理項小升表示：“銳捷網(wǎng)絡(luò)擁有完整的安全產(chǎn)品線，但我們多年來在安全產(chǎn)品的用戶部署過程中發(fā)現(xiàn)很多用戶并沒有真正地發(fā)揮出安全設(shè)備應(yīng)有的作用，其原因在于缺乏好的工具對安全日志進行充分挖掘與利用。同時，安全的發(fā)展到了一個變化的時代，移動、云計算、大數(shù)據(jù)成為各領(lǐng)域有效的變革技術(shù)，我們可以通過這些新的技術(shù)去改變傳統(tǒng)的安全，讓用戶體驗到新技術(shù)帶來的新價值。”
網(wǎng)絡(luò)安全“態(tài)勢感知”是新興技術(shù)，是未來十年中國互聯(lián)網(wǎng)安全的創(chuàng)新方向之一，它包含漏洞挖掘、網(wǎng)絡(luò)攻擊、用戶行為分析等一系列技術(shù)和相關(guān)創(chuàng)新產(chǎn)品，而其中最關(guān)鍵的一項便是“大數(shù)據(jù)”。銳捷本次的RG-BDS大數(shù)據(jù)安全平臺，則采用了業(yè)內(nèi)領(lǐng)先的整體結(jié)構(gòu)和精準的大數(shù)據(jù)分析模型，將用戶的高危風險準確、實時、直觀的呈現(xiàn)地出來。
據(jù)銳捷網(wǎng)絡(luò)安全與應(yīng)用交付產(chǎn)品事業(yè)部解決方案部經(jīng)理蔡錚鳴介紹，銳捷大數(shù)據(jù)安全平臺RG-BDS整體架構(gòu)包括了安全管理對象、事件采集、專項管理、大數(shù)據(jù)分析、業(yè)務(wù)功能和綜合展現(xiàn)，共計“六層模型”。另外，RG-BDS大數(shù)據(jù)安全平臺通過智能的“四步法則”，即：第一，收集并標準化海量數(shù)據(jù)，構(gòu)建安全大數(shù)據(jù)倉庫；第二，日志、資產(chǎn)、漏洞關(guān)聯(lián)分析，直擊要害問題；第三，工單系統(tǒng)+知識庫，實現(xiàn)閉環(huán)安全管理；第四，量化呈現(xiàn)安全業(yè)績，實時跟蹤安全態(tài)勢；最終達成掌握安全態(tài)勢和量化展示安全工作業(yè)績的管理目標。
在虛擬化、云計算、BYOD、大數(shù)據(jù)帶來變革與創(chuàng)新機遇的同時，黑客的進攻手段和安全防護技術(shù)也都經(jīng)歷著快速進化。隨著大數(shù)據(jù)時代的到來，海量的數(shù)據(jù)不斷在企業(yè)中流動，進入企業(yè)內(nèi)部網(wǎng)絡(luò)的途徑也越來越多，黑客會利用APT等更高級的定向式攻擊，不斷尋找出網(wǎng)絡(luò)“弱點”，并隱藏其中，隨時發(fā)動致命的攻擊。但是，另一方面，大量數(shù)據(jù)的流動變化，也為我們尋找黑客的非法行為提供了蛛絲馬跡，利用不斷創(chuàng)新的大數(shù)據(jù)安全技術(shù)就可以做到“聽其聲、辨其形”，而網(wǎng)絡(luò)安全“態(tài)勢感知”也必將成為抵御未知威脅最鋒利的武器。
“態(tài)勢感知”的數(shù)據(jù)從何而來，就此，蔡錚鳴表示：“大數(shù)據(jù)不僅僅來自于銳捷網(wǎng)絡(luò)自身的設(shè)備和分析報告，還來自于與很多合作伙伴或第三方緊密的合作，比如其他廠商的設(shè)備或者一些分析、管理平臺允許銳捷網(wǎng)絡(luò)RG-BDS大數(shù)據(jù)安全平臺接入，收集數(shù)據(jù)，然后對數(shù)據(jù)實施標準化，最后才能對數(shù)據(jù)進行分析，得出分析結(jié)果。銳捷網(wǎng)絡(luò)目前已經(jīng)與一些主流安全廠商的安全設(shè)備實現(xiàn)對接，比如思科、華為等。此外，銳捷網(wǎng)絡(luò)的網(wǎng)絡(luò)設(shè)備也支持Linux、Windows操作系統(tǒng)進行管理?！?/p>
銳捷網(wǎng)絡(luò)新推出的這款大數(shù)據(jù)安全平臺日后會向哪個方向發(fā)展呢？會和RIIL平臺做聯(lián)動嗎？
歸檔到磁盤
傳統(tǒng)上，人們習(xí)慣用磁盤做備份，用磁帶做歸檔。隨著數(shù)據(jù)量的不斷增加，人們需要更快速地處理、歸檔數(shù)據(jù)，而且要保證歸檔數(shù)據(jù)隨時可查。雖然從成本的角度考慮，磁帶仍然是最經(jīng)濟的歸檔介質(zhì)，而且磁帶可以實現(xiàn)離線的數(shù)據(jù)保護，這有利于數(shù)據(jù)的異地保存和安全性，但是性能始終是磁帶最大的掣肘。Janae Lee舉例說：“在美國，我們的一個客戶為了提高系統(tǒng)的整體處理性能，在一級存儲中使用了固態(tài)硬盤（SSD），之后不經(jīng)過任何中間環(huán)節(jié)，就將數(shù)據(jù)直接歸檔到磁盤系統(tǒng)中?！币恍┗ヂ?lián)網(wǎng)企業(yè)和游戲客戶可能會對這種高性能磁盤歸檔方案感興趣。
從技術(shù)的角度看，將磁盤用于歸檔是否可行呢？當磁盤上的數(shù)據(jù)越聚越多時，即使有RAID等技術(shù)作為保護，磁盤還是會容易出現(xiàn)故障。退一步說，就算RAID技術(shù)能夠起到保護作用，RAID進行數(shù)據(jù)重構(gòu)時，也要花費一定時間，當數(shù)據(jù)達到PB量級時，這種重構(gòu)所花費的時間可能是用戶難以忍受的。由此可見，將磁盤用于備份，一個前提是必須提升磁盤的效率、安全性，同時降低其整體擁有成本。為此，昆騰將一種原先用于通信領(lǐng)域的技術(shù)引入到磁盤歸檔方案中，推出了基于Wide Area Storage（WAS）技術(shù)的磁盤備份方案。與RAID磁盤相比，WAS的安全性大大提高，效率提高50%～70%，整體擁有成本降低50%～70%。Janae Lee介紹說：“我們的磁盤歸檔方案基于NAS界面，可與StorNext軟件配合使用，非常適合云歸檔應(yīng)用。磁盤歸檔方案將于2013年初面世?！?/p>
磁帶是數(shù)據(jù)保護的最后一道防線。Janae Lee表示：“磁盤歸檔方案與磁帶歸檔方案之間不是替代的關(guān)系，而是互補的關(guān)系。磁帶歸檔市場仍在不斷擴大。對于那些辦公場所位置分散，又希望快速存取數(shù)據(jù)的用戶來說，WAS是比較理想的選擇?！?/p>
磁帶不受影響
在大數(shù)據(jù)時代，磁帶的重要性會進一步被削弱嗎？昆騰公司大中華區(qū)總經(jīng)理張金華介紹說：“從2011年昆騰在中國的銷售業(yè)績看，以DXi系列產(chǎn)品為代表的磁盤業(yè)務(wù)始終保持高速增長的態(tài)勢，每個季度的增長率都能達到兩位數(shù)，而磁帶業(yè)務(wù)則與2010年持平?！彪m然昆騰的業(yè)務(wù)重點已經(jīng)轉(zhuǎn)向數(shù)據(jù)保護整體解決方案和大數(shù)據(jù)，磁帶不再是業(yè)務(wù)核心，但是昆騰并沒有放棄磁帶業(yè)務(wù)，對于磁帶的研發(fā)投入也沒有減少。
“我們?yōu)榇艓飚a(chǎn)品增加了一些新的功能，比如EDLM自動磁帶內(nèi)容檢查功能、雙機械臂、Active Vault等。這些新功能的加入，可以讓磁帶庫與StorNext軟件更好地配合使用。”Janae Lee舉例說，“在廣電領(lǐng)域，10%的數(shù)據(jù)存儲在磁盤上，90%的數(shù)據(jù)存儲在磁帶上。用戶還要經(jīng)常調(diào)取磁帶上的數(shù)據(jù)。StorNext 4.3版本增加了一項新功能，在將數(shù)據(jù)寫入磁盤的同時，也會寫入磁帶。這種技術(shù)非常適合電視臺節(jié)目上傳的應(yīng)用?！?/p>
軟硬件都重要
在昆騰的大數(shù)據(jù)解決方案中，StorNext扮演了極其重要的角色。以前，StorNext都是以軟件的方式提供給客戶的。但是有客戶反映，StorNext的部署和調(diào)優(yōu)比較復(fù)雜。為此，從2011年開始，昆騰開始提供基于StorNext的軟硬件一體化解決方案。
