受訪者:希捷科技中國(guó)區(qū)云和企業(yè)級(jí)OEM客戶總監(jiān) 錢亞歐
深圳市保千里電子有限公司副總裁 陳楊輝
蘇州科達(dá)科技有限公司平安城市交付中心副總監(jiān) 聞?chuàng)P
1.請(qǐng)問貴司如何定義 “大數(shù)據(jù)”?
科達(dá):“大數(shù)據(jù)”的四個(gè)特征:海量(數(shù)據(jù)量達(dá)到PB/EB級(jí)別),多類型(結(jié)構(gòu)化的、半結(jié)構(gòu)化的、非結(jié)構(gòu)化的摻雜在一起),高時(shí)效(數(shù)據(jù)變化速度快,時(shí)效性強(qiáng)),低密度(有價(jià)值的信息埋藏在大量數(shù)據(jù)中,有待挖掘)
保千里:大數(shù)據(jù)呈現(xiàn)出的典型特征是4個(gè)V:規(guī)模(volume)、速度(velocity)、類型多(variety)、價(jià)值密度低(veracity)。大數(shù)據(jù)時(shí)代的戰(zhàn)略意義已超越如何掌握龐大的數(shù)據(jù)信息,而是實(shí)現(xiàn)對(duì)這些數(shù)據(jù)的深層挖掘,進(jìn)而讓其“增值”。
如果說大數(shù)據(jù)的特點(diǎn)是海量和非結(jié)構(gòu)化,那也是不全面的。大數(shù)據(jù)帶來(lái)的挑戰(zhàn)還在于它的實(shí)時(shí)處理。在當(dāng)今快速變化的社會(huì)經(jīng)濟(jì)形勢(shì)面前,把握數(shù)據(jù)的時(shí)效性,是立于不敗之地的關(guān)鍵。
希捷:大數(shù)據(jù)是信息時(shí)代的產(chǎn)物,其定義可以從幾個(gè)方面理解。首先,“大數(shù)據(jù)”不僅僅指數(shù)據(jù)量特別大;其次,“大數(shù)據(jù)”還意味著數(shù)據(jù)的類別豐富;再者,傳統(tǒng)的數(shù)據(jù)庫(kù)工具很難抓取、管理和處理這樣的數(shù)據(jù)集內(nèi)容。更重要的是,大數(shù)據(jù)讓我們以一種前所未有的方式,通過對(duì)海量數(shù)據(jù)進(jìn)行分析,獲得擁有巨大價(jià)值的產(chǎn)品和服務(wù)以及深刻的洞見,最終做出更睿智的決策,這正是企業(yè)關(guān)注大數(shù)據(jù)的一個(gè)最大原因,對(duì)于企業(yè)來(lái)說,在合理的時(shí)間內(nèi)擷取、處理、并整理大數(shù)據(jù),使其成為幫助企業(yè)經(jīng)營(yíng)決策的資訊,提升企業(yè)的服務(wù)水平,優(yōu)化用戶體驗(yàn),最終實(shí)現(xiàn)收益的最大化。
2.大數(shù)據(jù)時(shí)代的到來(lái)是必然還是無(wú)奈,為什么要發(fā)展大數(shù)據(jù)技術(shù)?
科達(dá):大數(shù)據(jù)的時(shí)代的到來(lái)是必然。發(fā)展大數(shù)據(jù)技術(shù)是為了更好地利用數(shù)據(jù),挖掘出其中的信息,為數(shù)據(jù)的擁有者和使用者創(chuàng)造出更大的價(jià)值。
保千里:驅(qū)動(dòng)大數(shù)據(jù)發(fā)展的重要因素主要來(lái)自兩個(gè)方面:一是消費(fèi)領(lǐng)域,如網(wǎng)購(gòu)及社交媒體應(yīng)用產(chǎn)生的大量數(shù)據(jù);另一方面來(lái)自城市基礎(chǔ)設(shè)施建設(shè),安防便是其中之一。建設(shè)平安城市的過程伴隨大量數(shù)據(jù)的產(chǎn)生,尤其是以視頻監(jiān)控為主要特征的數(shù)字安全監(jiān)控(Digital Security Surveillance,DSS)。我們所居住的城市中有無(wú)數(shù)的高清攝像頭,涉及治安監(jiān)控、指揮通信、偵查破案、規(guī)范執(zhí)法、社會(huì)服務(wù)等,視頻接入規(guī)模從幾千到幾十萬(wàn),隨著安防監(jiān)控對(duì)高清、智能、聯(lián)網(wǎng)的要求越來(lái)越高,每天產(chǎn)生的數(shù)據(jù)規(guī)模正以驚人的速度不斷增長(zhǎng)。
隨著數(shù)據(jù)量的快速增加,對(duì)于大數(shù)據(jù)的存儲(chǔ)和大數(shù)據(jù)的開發(fā)需求必然快速增加。從2014年中國(guó)大數(shù)據(jù)行業(yè)的表現(xiàn)來(lái)說,中國(guó)大數(shù)據(jù)行業(yè)已經(jīng)開始了高速發(fā)展發(fā)展的步伐。
希捷:在網(wǎng)絡(luò)化時(shí)代,商界、經(jīng)濟(jì)、學(xué)術(shù)界、政府及其他諸多領(lǐng)域的數(shù)據(jù)都呈現(xiàn)指數(shù)性以及爆炸式增長(zhǎng),數(shù)據(jù)的迅速膨脹是時(shí)代發(fā)展的必然。
數(shù)據(jù)決定著企業(yè)的未來(lái)。隨著時(shí)間的推移,企業(yè)將越來(lái)越多的意識(shí)到大數(shù)據(jù)分析的重要性。大量企業(yè)的決策、管理和優(yōu)化運(yùn)營(yíng)將越來(lái)越倚重于數(shù)據(jù)分析,而數(shù)據(jù)分析以其精準(zhǔn)性為企業(yè)提供決策的可靠依據(jù),比如麥當(dāng)勞、肯德基以及蘋果公司等旗艦專賣店的位置都是建立在數(shù)據(jù)分析基礎(chǔ)之上的精準(zhǔn)選址,卓越亞馬遜、淘寶等電商則通過對(duì)海量數(shù)據(jù)分析,為用戶提供更加專業(yè)化和個(gè)性化的服務(wù)。大數(shù)據(jù)技術(shù)的重要性讓其成為當(dāng)前重要的研究課題,而大數(shù)據(jù)技術(shù)應(yīng)市場(chǎng)需求而生,其發(fā)展勢(shì)在必行。
3.您怎樣看待目前的大數(shù)據(jù)市場(chǎng)? 大數(shù)據(jù)分析的相關(guān)技術(shù)發(fā)展現(xiàn)狀如何?
科達(dá):目前大數(shù)據(jù)市場(chǎng)仍處于起步階段,相關(guān)技術(shù)已經(jīng)在部分領(lǐng)域(如搜索、互聯(lián)網(wǎng)廣告、O2O等)得到應(yīng)用,該技術(shù)發(fā)展已經(jīng)進(jìn)入爆發(fā)期,業(yè)界主流IT公司都推出了自己基于大數(shù)據(jù)技術(shù)的產(chǎn)品和解決方案,面向不同領(lǐng)域的大數(shù)據(jù)技術(shù)也層出不窮。
保千里:2012年,“大數(shù)據(jù)”一詞開始大熱。兩三年來(lái),已經(jīng)在商業(yè)、工業(yè)、交通、醫(yī)療、社會(huì)管理等多方面有了應(yīng)用,其重要性已毋庸置疑,現(xiàn)在關(guān)注的焦點(diǎn)更多是應(yīng)用、技術(shù)以及最底層的算法。
當(dāng)數(shù)據(jù)全面實(shí)現(xiàn)聯(lián)網(wǎng)、共享,得到有效存儲(chǔ),并予以充分分析和挖掘,大數(shù)據(jù)時(shí)代將真正深化。當(dāng)前,大數(shù)據(jù)及云計(jì)算技術(shù)從熱詞到落地,從企業(yè)到個(gè)人都在享受其帶來(lái)的福利,數(shù)據(jù)存儲(chǔ)、計(jì)算、整合及利用為許多企業(yè)帶來(lái)商機(jī),也為個(gè)人提供了更為便捷的互聯(lián)網(wǎng)服務(wù)。但與此同時(shí),用戶存儲(chǔ)在云端的個(gè)人信息數(shù)據(jù)安全也面臨著極大的挑戰(zhàn),大數(shù)據(jù)分析技術(shù)也未能實(shí)現(xiàn)真正意義上的智能化。
希捷:當(dāng)前大數(shù)據(jù)的應(yīng)用頗為廣泛并且受到不同行業(yè)以及領(lǐng)域前所未有的重視,其中包括安防、科研、金融及醫(yī)療等重要領(lǐng)域,因而,大數(shù)據(jù)在整個(gè)市場(chǎng)中的發(fā)展前景非常廣闊,行業(yè)用戶對(duì)于大數(shù)據(jù)技術(shù)的需求更為明顯以及急迫。
那么當(dāng)今大數(shù)據(jù)分析的相關(guān)技術(shù)現(xiàn)狀是怎樣呢?這就要從大數(shù)據(jù)技術(shù)研究發(fā)展的幾個(gè)方面著手,首先,在理論方面,有一些基本的理論問題尚待解決,比如大數(shù)據(jù)的結(jié)構(gòu)模型以及數(shù)據(jù)理論體系等缺乏確切的認(rèn)識(shí)以及判定標(biāo)準(zhǔn)。其次,關(guān)鍵技術(shù)研究方面也存在一些尚未解決的核心技術(shù)問題,比如大數(shù)據(jù)格式的轉(zhuǎn)化、數(shù)據(jù)的轉(zhuǎn)移等。再者,在應(yīng)用實(shí)踐方面,大數(shù)據(jù)技術(shù)主要應(yīng)用于數(shù)據(jù)管理、數(shù)據(jù)搜索分析以及集成等。最后,大數(shù)據(jù)安全方面,大數(shù)據(jù)技術(shù)的用戶隱私和數(shù)據(jù)質(zhì)量問題是當(dāng)前研究的重點(diǎn)。
4.大數(shù)據(jù)得以實(shí)現(xiàn)的核心技術(shù)有哪些?如何利用?
科達(dá):核心技術(shù)包括:1)海量數(shù)據(jù)的存儲(chǔ)和檢索。通常使用分布式文件系統(tǒng)、基于列的Non-SQL數(shù)據(jù)庫(kù)等方式來(lái)存儲(chǔ)和檢索海量數(shù)據(jù)。2)分布式計(jì)算平臺(tái)/框架,目前最流行的就是基于MapReduce或其變種的各類分布式計(jì)算平臺(tái)/框架,通過將任務(wù)分布到大量服務(wù)器上并發(fā)處理提高系統(tǒng)的實(shí)時(shí)響應(yīng)速度。3)多維度數(shù)據(jù)采集。結(jié)合物聯(lián)網(wǎng)技術(shù)和傳感器技術(shù),使得數(shù)據(jù)的來(lái)源多種多樣,為后續(xù)的數(shù)據(jù)分析挖掘奠定基礎(chǔ)。4)智能分析與識(shí)別。對(duì)于大量非結(jié)構(gòu)化的數(shù)據(jù)(如音視頻數(shù)據(jù)),需要接近甚至超越人類能力的智能分析與識(shí)別技術(shù),將采集到的非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)換為計(jì)算機(jī)能處理的半結(jié)構(gòu)化和結(jié)構(gòu)化數(shù)據(jù)。
保千里:云技術(shù)、智能分析技術(shù)是大數(shù)據(jù)實(shí)現(xiàn)落地的核心技術(shù)。
目前智能分析技術(shù)已經(jīng)廣泛應(yīng)用于各種安防領(lǐng)域,在大數(shù)據(jù)時(shí)代,面對(duì)海量的視頻數(shù)據(jù),智能視頻分析技術(shù)在數(shù)據(jù)挖掘方面被賦予厚望,安防進(jìn)入云計(jì)算大數(shù)據(jù)時(shí)代使得云存儲(chǔ)、視頻智能分析成為現(xiàn)實(shí)。
希捷:大數(shù)據(jù)具有海量、多樣以及快速的特征,這些特定的特征對(duì)實(shí)現(xiàn)大數(shù)據(jù)的核心技術(shù)提出了更高的要求。這些核心技術(shù)包括:大規(guī)模并行處理數(shù)據(jù)庫(kù)、分布式文件系統(tǒng)、分布式數(shù)據(jù)庫(kù)、云計(jì)算平臺(tái)、互聯(lián)網(wǎng)和可擴(kuò)展的存儲(chǔ)系統(tǒng)。那么我們?nèi)绾卫眠@樣的核心技術(shù)實(shí)現(xiàn)大數(shù)據(jù)呢?
并行處理技術(shù)是實(shí)現(xiàn)大數(shù)據(jù)的一種核心技術(shù),該技術(shù)主要是以算法為核心,并行語(yǔ)言為描述,軟硬件作為實(shí)現(xiàn)工具的一種相互聯(lián)系且相互制約的結(jié)構(gòu)技術(shù)。要使用并行處理技術(shù),首先需要對(duì)程序進(jìn)行并行化處理,也就是說將工作各部分分配到不同處理機(jī)中。
分布式文件系統(tǒng)是指文件系統(tǒng)管理的物理存儲(chǔ)資源不一定直接連接在本地節(jié)點(diǎn)上,而是通過計(jì)算機(jī)網(wǎng)絡(luò)與節(jié)點(diǎn)相連。分布式文件系統(tǒng)的設(shè)計(jì)基于客戶機(jī)/服務(wù)器模式。一個(gè)典型的網(wǎng)絡(luò)可能包括多個(gè)供多用戶訪問的服務(wù)器。
分布式數(shù)據(jù)庫(kù)使用的計(jì)算機(jī)系統(tǒng)較小,每臺(tái)計(jì)算機(jī)可單獨(dú)放在一個(gè)地方,每臺(tái)計(jì)算機(jī)中都有完整的拷貝副本,并具有自己局部的數(shù)據(jù)庫(kù),位于不同地點(diǎn)的許多計(jì)算機(jī)通過網(wǎng)絡(luò)互相連接,共同組成一個(gè)完整的、全局的大型數(shù)據(jù)庫(kù)。
云計(jì)算平臺(tái)的利用其實(shí)較為簡(jiǎn)單,對(duì)于企業(yè)來(lái)講,用戶只需要一臺(tái)具備基本計(jì)算能力的計(jì)算設(shè)備以及一個(gè)有效的互聯(lián)網(wǎng)連接,就可以隨時(shí)隨地使用該服務(wù)。
在數(shù)據(jù)呈現(xiàn)指數(shù)性增長(zhǎng)的今天,可擴(kuò)展的存儲(chǔ)系統(tǒng)對(duì)于企業(yè)來(lái)說尤為關(guān)鍵,這樣的存儲(chǔ)系統(tǒng)可以降低企業(yè)成本。希捷 Kinetic 開放式存儲(chǔ)平臺(tái)是首款基于設(shè)備的存儲(chǔ)平臺(tái),交付更高性能和容量以及改進(jìn)的機(jī)架密度,簡(jiǎn)化擴(kuò)展的架構(gòu),實(shí)現(xiàn)更低的總擁有成本。
5.作為安防企業(yè),您覺得將大數(shù)據(jù)技術(shù)引入安防的困難點(diǎn)有哪些?如何解決?
科達(dá):大數(shù)據(jù)技術(shù)應(yīng)用在安防行業(yè)的主要困難點(diǎn)有:1)如何準(zhǔn)確地從非結(jié)構(gòu)化數(shù)據(jù)(如音視頻)中提取計(jì)算機(jī)易于處理的結(jié)構(gòu)化、半結(jié)構(gòu)化的信息。其解決方法有賴于數(shù)字音頻/圖像處理技術(shù)、模式識(shí)別技術(shù)、傳感器技術(shù)的持續(xù)進(jìn)步。2)如何將大數(shù)據(jù)與安防業(yè)務(wù)需求結(jié)合,創(chuàng)造出更多的數(shù)據(jù)利用模式,從而為數(shù)據(jù)的擁有者和使用者創(chuàng)造出更多的價(jià)值。其解決方法需要依靠對(duì)大數(shù)據(jù)技術(shù)和安防業(yè)務(wù)都有非常深入理解的業(yè)務(wù)專家,設(shè)計(jì)出貼合用戶需求的業(yè)務(wù)模型。
保千里:要做到大數(shù)據(jù)應(yīng)用,就必須為每個(gè)視頻貼上更多的屬性標(biāo)簽,也就是業(yè)內(nèi)所說的結(jié)構(gòu)化過程。安防行業(yè)數(shù)據(jù)多以視頻為主,視頻數(shù)據(jù)除了時(shí)間和空間的屬性外,并沒有其他的標(biāo)簽。除了按照時(shí)間和地點(diǎn)查找相應(yīng)的視頻外,大多的視頻只能靠人慢慢甄別,這離大數(shù)據(jù)應(yīng)用還相去甚遠(yuǎn)。數(shù)據(jù)結(jié)構(gòu)化是未來(lái)視頻應(yīng)用技術(shù)的制高點(diǎn),其核心是模式識(shí)別算法,要做到自動(dòng)把視頻中的特征識(shí)別出來(lái)貼上標(biāo)簽后入庫(kù)。這樣在日后需要的時(shí)候,才能實(shí)現(xiàn)海量視頻的快速查詢和碰撞研判,甚至能像商業(yè)大數(shù)據(jù)那樣做到歸類統(tǒng)計(jì)。
智能分析是安防大數(shù)據(jù)區(qū)別于IT大數(shù)據(jù)的根本點(diǎn),只有利用智能分析技術(shù)將安防大數(shù)據(jù)的非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)換為結(jié)構(gòu)化數(shù)據(jù),才能將IT大數(shù)據(jù)成熟的技術(shù)體系應(yīng)用到安防大數(shù)據(jù)中,充分發(fā)揮安防大數(shù)據(jù)的作用。對(duì)于視頻圖像等非結(jié)構(gòu)化數(shù)據(jù)的分析和處理,目前可能更多地是把它歸屬到智能分析的范疇,這些技術(shù)很多已在初期應(yīng)用中不斷改進(jìn)和完善,很多更新的智能分析技術(shù)仍處在研發(fā)過程中,對(duì)這類數(shù)據(jù)的分析和處理也將成為安防大數(shù)據(jù)的核心價(jià)值點(diǎn)。日益豐富的智能算法將大大提高視頻監(jiān)控?cái)z像機(jī)的使用范圍和價(jià)值,處于應(yīng)用初級(jí)階段的智能視頻監(jiān)控,也將隨著智能算法的日益豐富而快速發(fā)展。而數(shù)字處理芯片、編解碼能力以及壓縮算法,是影響圖像處理技術(shù)的重要因素。安防智能化的核心還體現(xiàn)在VA(視頻分析或圖像分析),而VA需要底層算法的支持并運(yùn)用單元執(zhí)行,這可提高視頻分析的效率。
希捷:大數(shù)據(jù)技術(shù)引入安防企業(yè)時(shí)也難免會(huì)遇到不同的困難,比如大量的高清視頻錄像給存儲(chǔ)后端帶來(lái)了巨大壓力,尤以道路監(jiān)控最為突顯。道路監(jiān)控覆蓋面相對(duì)較廣,其視頻錄像存儲(chǔ)的壓力與日俱增。如何利用最低的成本,有效的存儲(chǔ)并且管理這些海量數(shù)據(jù)也成為當(dāng)下管理者需要考慮的重要問題。
第七代 6TB 希捷監(jiān)控專用硬盤滿足對(duì)高分辨率攝像機(jī)數(shù)量的不斷需求,并確保始終運(yùn)行的監(jiān)控系統(tǒng)的性能和耐用性???24×7 全天候運(yùn)行,支持長(zhǎng)達(dá) 400 多小時(shí)的高清內(nèi)容,成為大數(shù)據(jù)時(shí)代安防企業(yè)的不二選擇。
6.目前安防行業(yè)是如何利用大數(shù)據(jù)技術(shù)處理數(shù)據(jù)信息的? 大數(shù)據(jù)技術(shù)又是怎樣進(jìn)行高效、快速的篩選有效信息的?
科達(dá):目前安防行業(yè)主要利用大數(shù)據(jù)技術(shù)進(jìn)行海量圖片、視頻信息的特征提取、存儲(chǔ)、檢索和分析比對(duì)。利用大數(shù)據(jù)技術(shù)首先可以實(shí)現(xiàn)海量特征信息的可靠存儲(chǔ)(分布式文件系統(tǒng)的冗余備份機(jī)制),其次可以實(shí)現(xiàn)特征信息的快速比對(duì)篩選(基于MapReduce框架并發(fā)分析)
保千里:安防大數(shù)據(jù)的處理和分析工具主要有兩類:一類是對(duì)視頻圖像等非結(jié)構(gòu)化信息的處理和分析工具,包括視頻智能分析工具、視頻摘要工具、圖像清晰化工具、視頻清晰化工具、視頻轉(zhuǎn)碼工具、視頻編輯工具等等;另一類則是對(duì)結(jié)構(gòu)化、半結(jié)構(gòu)化信息的大數(shù)據(jù)分析處理工具,此類處理和分析工具安防界吸取了IT界在處理大數(shù)據(jù)方面的架構(gòu)和經(jīng)驗(yàn),比較流行的如Hadoop,Spark大數(shù)據(jù)處理的框架,以及Mahout、R數(shù)據(jù)挖掘工具,以對(duì)結(jié)構(gòu)化和半結(jié)構(gòu)化的數(shù)據(jù)可以實(shí)現(xiàn)快速和準(zhǔn)確的數(shù)據(jù)分析和挖掘。
大數(shù)據(jù)在安防行業(yè)的應(yīng)用使得安防更加智能化,大數(shù)據(jù)的技術(shù)一般分為數(shù)據(jù)采集、存儲(chǔ)、挖掘和分析技術(shù)。其中,智能分析居于核心地位。
希捷:安防行業(yè)有著海量的視頻、圖片數(shù)據(jù),繁多的數(shù)據(jù)種類、PB級(jí)的數(shù)據(jù)量、低價(jià)值密度的視頻數(shù)據(jù)、快速的數(shù)據(jù)更新等特性都預(yù)示著安防行業(yè)需要利用大數(shù)據(jù)技術(shù)處理數(shù)據(jù)信息。
面對(duì)海量數(shù)據(jù),安防企業(yè)難免遇到這樣的問題:大部分錄像均屬于冗余信息,如何在海量數(shù)據(jù)中快速的挑選有效信息呢?隨著技術(shù)的發(fā)展,智能分析漸漸進(jìn)入人們的視野,成為解決該問題的有效途徑。智能分析依賴于視頻算法,對(duì)視頻內(nèi)容進(jìn)行分析,通過提取視頻中關(guān)鍵信息,然后進(jìn)行標(biāo)記或處理,形成相應(yīng)事件和告警的監(jiān)控方式,人們可以通過各種屬性描述進(jìn)行快速地檢索。智能技術(shù)借助處理器的強(qiáng)大計(jì)算功能,對(duì)視頻畫面中的海量數(shù)據(jù)進(jìn)行高速分析,高效、快速地篩選有效信息。
7.大數(shù)據(jù)落地的形式有哪些,目前可以落地的大數(shù)據(jù)應(yīng)用的系統(tǒng)架構(gòu)是什么樣的,有沒有實(shí)際應(yīng)用范例?
科達(dá):目前在安防領(lǐng)域可以落地的大數(shù)據(jù)應(yīng)用主要是卡口大數(shù)據(jù)應(yīng)用,已經(jīng)有實(shí)際應(yīng)用范例。
希捷:當(dāng)前,大數(shù)據(jù)已滲透到各行各業(yè),很多企業(yè)都希望可以充分利用大數(shù)據(jù)分析的結(jié)果,最終實(shí)現(xiàn)營(yíng)收。而具體到實(shí)際應(yīng)用中,大數(shù)據(jù)是如何進(jìn)行落地的呢?首先,任何大數(shù)據(jù)的解決方案都是以商業(yè)為先的,一切商業(yè)活動(dòng)的基礎(chǔ)都來(lái)源于數(shù)據(jù)分析,數(shù)據(jù)分析結(jié)果可以為企業(yè)帶來(lái)商機(jī);其次,在實(shí)踐中可以應(yīng)用的大數(shù)據(jù)才是有價(jià)值的,所以,大數(shù)據(jù)落地時(shí)應(yīng)該去除一些無(wú)用的數(shù)據(jù),繼而利用有用的數(shù)據(jù)為商家提煉具有參考價(jià)值的信息,創(chuàng)造更高的商業(yè)價(jià)值;最重要的是,利用數(shù)據(jù)分析結(jié)果進(jìn)行決策才是運(yùn)用大數(shù)據(jù)的成功關(guān)鍵。
在大數(shù)據(jù)的落地過程中,首先需要做的是捕獲海量的數(shù)據(jù),而海量的數(shù)據(jù)需要高效的存儲(chǔ)架構(gòu)進(jìn)行持續(xù)的存儲(chǔ),同時(shí)還應(yīng)該避免數(shù)據(jù)丟失,之后才可基于存儲(chǔ)的數(shù)據(jù)進(jìn)行分析,最終提煉出有價(jià)值的信息進(jìn)行應(yīng)用。當(dāng)前,商家利用數(shù)據(jù)實(shí)現(xiàn)商業(yè)目標(biāo)的例子比比皆是,例如,一些電商從每一個(gè)客戶身上捕獲大量的數(shù)據(jù)包括歷史購(gòu)買產(chǎn)品、只瀏覽卻沒購(gòu)買的商品、瀏覽停留的時(shí)間及合并購(gòu)買的商品等,通過大量的數(shù)據(jù)找到產(chǎn)品之間的關(guān)聯(lián)性,然后進(jìn)行商品推薦,更有針對(duì)性的為客戶提供服務(wù),從而實(shí)現(xiàn)更高的商業(yè)目標(biāo)。
8. 貴公司在大數(shù)據(jù)方面的投入和目前的實(shí)力怎樣? 貴公司在發(fā)展大數(shù)據(jù)技術(shù)時(shí),遇到哪些問題與困難?
科達(dá):公司已經(jīng)在大數(shù)據(jù)基礎(chǔ)技術(shù)與應(yīng)用技術(shù)方面投入了大量的人力物力,并且推出了適合大數(shù)據(jù)應(yīng)用的相關(guān)硬件產(chǎn)品(如感知型攝像機(jī)、云存儲(chǔ)設(shè)備、服務(wù)器等)和解決方案(車輛卡口大數(shù)據(jù)應(yīng)用解決方案)。
希捷:大數(shù)據(jù)時(shí)代,數(shù)據(jù)增長(zhǎng)的速度令人震驚。而作為全球領(lǐng)先的存儲(chǔ)解決方案提供商,希捷科技公司早已意識(shí)到大數(shù)據(jù)時(shí)代可能帶來(lái)的變革以及機(jī)遇,為了更好的應(yīng)對(duì)變革并且提供更為卓越的服務(wù),希捷科技公司推出多款重要的產(chǎn)品,比如希捷企業(yè)級(jí)海量盤以及15K超能盤,以應(yīng)對(duì)數(shù)據(jù)創(chuàng)建和消費(fèi)的迅猛增長(zhǎng)。這些產(chǎn)品將進(jìn)一步助力公司在存儲(chǔ)、共享和保護(hù)全球數(shù)據(jù)方面引領(lǐng)世界。希捷科技公司還成立了新的云系統(tǒng)與解決方案部門,負(fù)責(zé)提供全球最具可擴(kuò)展性、安全性、有效性和經(jīng)濟(jì)適用性的云服務(wù)架構(gòu)及解決方案。再者,希捷已經(jīng)與百度和騰訊簽署了《戰(zhàn)略合作備忘錄》,與華為簽署了《戰(zhàn)略供應(yīng)商合作協(xié)議》,以幫助合作伙伴降低在IT上的總體擁有成本,共同應(yīng)對(duì)大數(shù)據(jù)和云計(jì)算環(huán)境下存儲(chǔ)面臨的各種挑戰(zhàn)。希捷科技公司正在通過創(chuàng)新數(shù)據(jù)的存儲(chǔ)、共享和使用的方式,為人類體驗(yàn)創(chuàng)造空間。
9.大數(shù)據(jù)時(shí)代,該如何應(yīng)對(duì)數(shù)據(jù)安全問題?
科達(dá):首先,傳統(tǒng)的數(shù)據(jù)安全技術(shù)在大數(shù)據(jù)時(shí)代仍然適用,對(duì)數(shù)據(jù)的保護(hù)是第一步;其次,最有價(jià)值的不是數(shù)據(jù)本身而是應(yīng)用數(shù)據(jù)的方法/模型,重點(diǎn)要保護(hù)的是這些方法和模型。
保千里:大數(shù)據(jù)所具備的體量大、類型繁多、價(jià)值密度低和處理速度快等特點(diǎn),決定了其將面臨嚴(yán)峻的個(gè)人信息安全保護(hù)形勢(shì)。
在大數(shù)據(jù)時(shí)代,要解決數(shù)據(jù)安全問題,必須加快國(guó)家對(duì)個(gè)人信息安全的統(tǒng)一立法工作,規(guī)范政府、企業(yè)、個(gè)人等大數(shù)據(jù)產(chǎn)業(yè)鏈參與者的行為準(zhǔn)則;在國(guó)家層面建立統(tǒng)一的監(jiān)管體系,加強(qiáng)個(gè)人信息保護(hù)“事前、事中、事后”監(jiān)管;充分發(fā)揮行業(yè)自律,引導(dǎo)各個(gè)行業(yè)制定適合本行業(yè)的個(gè)人信息保護(hù)標(biāo)準(zhǔn)和規(guī)范;推動(dòng)大數(shù)據(jù)信息安全產(chǎn)業(yè)的發(fā)展;提升公民信息安全防范技術(shù)水平和安全保護(hù)意識(shí)。
政府主導(dǎo)、法律保障、行業(yè)自律、公民參與,多方聯(lián)動(dòng),才能構(gòu)建好大數(shù)據(jù)時(shí)代個(gè)人信息安全保護(hù)體系。
希捷:大數(shù)據(jù)時(shí)代,數(shù)據(jù)的安全成為人們關(guān)注的重點(diǎn)問題。保護(hù)數(shù)據(jù)的安全是數(shù)據(jù)搜集者和分析者的責(zé)任。在對(duì)大數(shù)據(jù)進(jìn)行價(jià)值發(fā)掘的過程中,有時(shí)候不可避免地會(huì)利用到隱私數(shù)據(jù),以便實(shí)現(xiàn)價(jià)值的精準(zhǔn)匹配。在這種情況下,通過立法保護(hù)個(gè)人隱私數(shù)據(jù)是重要的保障方式。同時(shí),道德方面的約束也不容忽視。再者,技術(shù)是保障數(shù)據(jù)安全的關(guān)鍵因素,企業(yè)可以利用大數(shù)據(jù)技術(shù)提升其安全實(shí)力。對(duì)于個(gè)人而言,在享受大數(shù)據(jù)時(shí)代所帶來(lái)的便利化的同時(shí),應(yīng)當(dāng)加強(qiáng)風(fēng)險(xiǎn)防范意識(shí),在有可能留下隱私數(shù)據(jù)的情形下,要充分考慮隱私暴露可能帶來(lái)的不良后果,并采取相應(yīng)的防范措施。
10.大數(shù)據(jù)將會(huì)對(duì)安防產(chǎn)業(yè)格局產(chǎn)生什么樣的影響?
科達(dá):大數(shù)據(jù)技術(shù)源自互聯(lián)網(wǎng),大數(shù)據(jù)時(shí)代會(huì)促使安防這類傳統(tǒng)業(yè)務(wù)加速向互聯(lián)網(wǎng)方向遷移,安防企業(yè)會(huì)更加地傾向于提供服務(wù)而不是提供產(chǎn)品;大數(shù)據(jù)時(shí)代也會(huì)促使更多的互聯(lián)網(wǎng)企業(yè)向傳統(tǒng)行業(yè)如安防進(jìn)行滲透,這種滲透已經(jīng)開始了并將進(jìn)一步加速。
保千里:在信息化浪潮的沖擊下,人們當(dāng)前已經(jīng)步入互聯(lián)網(wǎng)與云計(jì)算的時(shí)代,整個(gè)安防行業(yè)也從產(chǎn)品銷售、平臺(tái)建設(shè)逐漸轉(zhuǎn)向系統(tǒng)運(yùn)營(yíng)和數(shù)據(jù)分析,安防行業(yè)IT化已經(jīng)是不可避免的趨勢(shì)。
安防行業(yè)從單一產(chǎn)品到系統(tǒng)集成,從模擬監(jiān)控到網(wǎng)絡(luò)監(jiān)控,從封閉系統(tǒng)到大數(shù)據(jù)、云平臺(tái),已經(jīng)不是簡(jiǎn)單的視頻傳輸,而是涉及數(shù)據(jù)采集、通信、處理、反饋的IT化系統(tǒng)解決方案。在產(chǎn)品層面,監(jiān)控系統(tǒng)平臺(tái)的儲(chǔ)存、傳輸與服務(wù)器技術(shù)更依賴于IT技術(shù)。未來(lái)基于大數(shù)據(jù)處理提供智能分析也需要IT技術(shù)的支撐。
而安防企業(yè)需要做的,便是積極加強(qiáng)內(nèi)功,提高研發(fā)能力,加強(qiáng)技術(shù)儲(chǔ)備,應(yīng)對(duì)更大數(shù)據(jù)量帶來(lái)的沖擊。后期安防廠家會(huì)進(jìn)行分化,部分傳統(tǒng)安防廠家更加專注于某固定安防領(lǐng)域繼續(xù)深耕,專注于產(chǎn)品和技術(shù),一部分安防廠家會(huì)向大安防集成平臺(tái)轉(zhuǎn)變,專注于業(yè)務(wù)整合和數(shù)據(jù)分析處理。
希捷:大數(shù)據(jù)時(shí)代給不同的行業(yè)帶來(lái)不同程度的格局變化,安防產(chǎn)業(yè)也不例外。眾所周知,在大數(shù)據(jù)時(shí)代,握有數(shù)據(jù)就相當(dāng)于掌握著數(shù)據(jù)價(jià)值。預(yù)期在不久的將來(lái),數(shù)據(jù)可能會(huì)成為最大的交易商品。安防企業(yè)在數(shù)據(jù)量方面占據(jù)著極大的優(yōu)勢(shì),可以通過提供數(shù)據(jù)服務(wù)以及進(jìn)行數(shù)據(jù)交易來(lái)獲取效益。實(shí)際操作中,安防企業(yè)可以通過建設(shè)自己的數(shù)據(jù)分析平臺(tái),進(jìn)行分類、做分析統(tǒng)計(jì),得出統(tǒng)計(jì)結(jié)果,向需要這些數(shù)據(jù)結(jié)果的企業(yè)提供數(shù)據(jù)供給服務(wù),實(shí)現(xiàn)系統(tǒng)的增值服務(wù)。掌握海量的數(shù)據(jù)是安防企業(yè)的優(yōu)勢(shì)所在,因而安防企業(yè)會(huì)向著既是安防集成商,又是運(yùn)維服務(wù)商,同時(shí)還是數(shù)據(jù)提供商的方向發(fā)展。這就是大數(shù)據(jù)給安防產(chǎn)業(yè)格局帶來(lái)的潛在影響。
11.您怎樣看待大數(shù)據(jù)與云計(jì)算的結(jié)合?
科達(dá):云計(jì)算技術(shù)與大數(shù)據(jù)技術(shù)是非常合適結(jié)合在一起的。云計(jì)算中心的建設(shè)可以為海量數(shù)據(jù)的存儲(chǔ)、分析與搜索提供計(jì)算能力與存儲(chǔ)能力的保障,云計(jì)算技術(shù)對(duì)資源的動(dòng)態(tài)分配與調(diào)度也特別適合如潮汐般漲落的大數(shù)據(jù)分布式計(jì)算需求。而大數(shù)據(jù)計(jì)算對(duì)于存儲(chǔ)容量、I/O訪問速度的要求也會(huì)進(jìn)一步促進(jìn)云計(jì)算技術(shù)在這些方面的發(fā)展。
保千里:隨著數(shù)字安防技術(shù)的普及,監(jiān)控技術(shù)逐漸往高清化、網(wǎng)絡(luò)化發(fā)展,隨之而來(lái)的是海量的數(shù)據(jù)存儲(chǔ)問題,海量數(shù)據(jù)必須擁有能夠進(jìn)行可靠、可保證效率且擁有快速的讀寫以及響應(yīng)能力的存儲(chǔ)。存儲(chǔ)設(shè)備從監(jiān)控系統(tǒng)的邊緣化位置逐漸走向了中心,在監(jiān)控系統(tǒng)的比重也隨著集中化的提升而得以大幅提高,傳統(tǒng)的存儲(chǔ)方式已經(jīng)不能適應(yīng)網(wǎng)絡(luò)存儲(chǔ)的需求,云存儲(chǔ)作為一種新型的存儲(chǔ)服務(wù)應(yīng)運(yùn)而生。
云存儲(chǔ)不僅僅是存儲(chǔ),更多的是應(yīng)用。應(yīng)用存儲(chǔ)是一種在存儲(chǔ)設(shè)備中集成了應(yīng)用軟件功能的存儲(chǔ)設(shè)備,它不僅具有數(shù)據(jù)存儲(chǔ)功能,還具有應(yīng)用軟件功能,可以看作是服務(wù)器和存儲(chǔ)設(shè)備的集合體。應(yīng)用存儲(chǔ)技術(shù)的發(fā)展可以大量減少云存儲(chǔ)中服務(wù)器的數(shù)量,從而降低系統(tǒng)建設(shè)成本,減少系統(tǒng)中由服務(wù)器造成單點(diǎn)故障和性能瓶頸,減少數(shù)據(jù)傳輸環(huán)節(jié),提供系統(tǒng)性能和效率,保證整個(gè)系統(tǒng)的高效穩(wěn)定運(yùn)行。
面向云時(shí)代,業(yè)界同仁一擁而上、熱血沸騰,無(wú)論是IT供應(yīng)商、存儲(chǔ)廠商、還是解決方案提供商都不甘落后,雨后春筍般的紛紛提出基于計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)等多層次虛擬化的數(shù)據(jù)中心解決方案,投入大量資源,推出云存儲(chǔ)、云計(jì)算等系統(tǒng)產(chǎn)品。
希捷:如今,云計(jì)算以及大數(shù)據(jù)的結(jié)合成為了企業(yè)獲取財(cái)富的重要途徑。越來(lái)越多的企業(yè)認(rèn)識(shí)到,大數(shù)據(jù)與云計(jì)算的結(jié)合將簡(jiǎn)化大數(shù)據(jù)分析,最終將大數(shù)據(jù)有效地轉(zhuǎn)化成企業(yè)收益。企業(yè)如何能夠用最低成本得到最高的數(shù)據(jù)價(jià)值呢?把數(shù)據(jù)以低廉成本變成財(cái)富的途徑就是云計(jì)算。那么,云計(jì)算是如何幫助大數(shù)據(jù)將一堆堆雜亂信息轉(zhuǎn)化成經(jīng)濟(jì)效益呢?首先,云計(jì)算是提取大數(shù)據(jù)的前提。眾所周知,信息社會(huì)中,數(shù)據(jù)量不斷增長(zhǎng),提取、處理和利用數(shù)據(jù)的成本有可能會(huì)超過數(shù)據(jù)本身的價(jià)值,而來(lái)自公有云、私有云以及混合云之上的強(qiáng)大的云計(jì)算能力是解決該問題的關(guān)鍵所在。云計(jì)算對(duì)于降低企業(yè)數(shù)據(jù)提取的成本是不可或缺的。其次,云計(jì)算可以篩選掉無(wú)用的或者沒有很大利用價(jià)值的信息。再次,云計(jì)算可以對(duì)數(shù)據(jù)進(jìn)行高效的分析,分析的結(jié)果更有參考價(jià)值,幫助企業(yè)做出更為明智的決策,最終實(shí)現(xiàn)盈利。
12.傳統(tǒng)安防企業(yè)與互聯(lián)網(wǎng)企業(yè)在大數(shù)據(jù)方面有哪些結(jié)合與沖突?
科達(dá):傳統(tǒng)安防企業(yè)與互聯(lián)網(wǎng)企業(yè)在大數(shù)據(jù)方面可以開展非常緊密的合作,例如互聯(lián)網(wǎng)企業(yè)比較熟悉和擅長(zhǎng)海量數(shù)據(jù)的處理技術(shù),能夠提供各種平臺(tái)和工具;而傳統(tǒng)安防企業(yè)更貼近用戶需求,更熟悉行業(yè)客戶的業(yè)務(wù)需求,能夠基于所提供的大數(shù)據(jù)平臺(tái)和工具,開發(fā)出滿足甚至高于用戶需求的業(yè)務(wù)系統(tǒng)。當(dāng)然雙方也會(huì)存在沖突,比如對(duì)于開放或封閉的理念方面,互聯(lián)網(wǎng)企業(yè)更強(qiáng)調(diào)平臺(tái)與數(shù)據(jù)的開放性和泛在性,為所有人提供服務(wù);而傳統(tǒng)安防企業(yè)則偏向用戶側(cè),特別是行業(yè)客戶,傾向于私有和封閉,為特定人群服務(wù)。
保千里:智能化安防技術(shù)的主要內(nèi)涵是其相關(guān)內(nèi)容和服務(wù)的信息化,圖像、視頻的傳輸和存儲(chǔ),數(shù)據(jù)的存儲(chǔ)和處理等等。在智能安防領(lǐng)域,數(shù)據(jù)的產(chǎn)生、存儲(chǔ)和處理是智能安防解決方案的基礎(chǔ),只有采集足夠有價(jià)值的安防信息,通過大數(shù)據(jù)分析以及綜合研判模型,才能制定智能安防決策。同時(shí),大數(shù)據(jù)處理能夠更好地指出智能安防解決方案中存在的問題,從而有針對(duì)性地提升智能安防產(chǎn)品服務(wù)質(zhì)量。
智能安防行業(yè)是典型的大數(shù)據(jù)與物聯(lián)網(wǎng)相結(jié)合的應(yīng)用場(chǎng)景,物聯(lián)網(wǎng)技術(shù)的普及應(yīng)用使安防從過去簡(jiǎn)單的安全防護(hù)系統(tǒng)向城市綜合化體系演變,涵蓋眾多的領(lǐng)域,特別是針對(duì)重要場(chǎng)所,如機(jī)場(chǎng)、銀行、地鐵、車站、水電氣廠、道路橋梁等場(chǎng)所,引入物聯(lián)網(wǎng)技術(shù)后可以通過無(wú)線移動(dòng)、跟蹤定位等手段建立全方位的立體防護(hù)。智能安防行業(yè)需求已從大面積監(jiān)控布點(diǎn)轉(zhuǎn)變?yōu)樽⒅匾曨l智能預(yù)警、分析和實(shí)戰(zhàn),迫切需要利用大數(shù)據(jù)技術(shù)從海量的視頻數(shù)據(jù)中進(jìn)行規(guī)律預(yù)測(cè)、情境分析、串并偵查、時(shí)空分析等。
相比傳統(tǒng)的互聯(lián)網(wǎng),在物聯(lián)網(wǎng)中,對(duì)大數(shù)據(jù)技術(shù)具有更高的要求,主要體現(xiàn)在以下幾方面:
(1)物聯(lián)網(wǎng)中的數(shù)據(jù)量更大:物聯(lián)網(wǎng)的最主要特征之一是節(jié)點(diǎn)的海量性,除了人和服務(wù)器之外,物品、設(shè)備、傳感網(wǎng)等都是物聯(lián)網(wǎng)的組成節(jié)點(diǎn),其數(shù)量規(guī)模遠(yuǎn)大于互聯(lián)網(wǎng);同時(shí),物聯(lián)網(wǎng)節(jié)點(diǎn)的數(shù)據(jù)生成頻率遠(yuǎn)高于互聯(lián)網(wǎng),如傳感節(jié)點(diǎn)多數(shù)處于全時(shí)工作狀態(tài),數(shù)據(jù)流源源不斷。
(2)物聯(lián)網(wǎng)中的數(shù)據(jù)速率更高:一方面,物聯(lián)網(wǎng)中數(shù)據(jù)海量性必然要求骨干網(wǎng)匯聚更多的數(shù)據(jù),數(shù)據(jù)的傳輸速率要求更高;另一方面,由于物聯(lián)網(wǎng)與真實(shí)物理世界直接關(guān)聯(lián),很多情況下需要實(shí)時(shí)訪問、控制相應(yīng)的節(jié)點(diǎn)和設(shè)備,因此需要高數(shù)據(jù)傳輸速率來(lái)支持相應(yīng)的實(shí)時(shí)性。
(3)物聯(lián)網(wǎng)中的數(shù)據(jù)更加多樣化:物聯(lián)網(wǎng)涉及的應(yīng)用范圍廣泛,在不同領(lǐng)域、不同行業(yè),需要面對(duì)不同類型、不同格式的應(yīng)用數(shù)據(jù),因此物聯(lián)網(wǎng)中數(shù)據(jù)多樣性更為突出。
(4)物聯(lián)網(wǎng)對(duì)數(shù)據(jù)真實(shí)性的要求更高:物聯(lián)網(wǎng)是真實(shí)物理世界與虛擬信息世界的結(jié)合,其對(duì)數(shù)據(jù)的處理以及基于此進(jìn)行的決策將直接影響物理世界,物聯(lián)網(wǎng)中數(shù)據(jù)的真實(shí)性顯得尤為重要。
希捷:大數(shù)據(jù)時(shí)代的到來(lái)以及互聯(lián)網(wǎng)的急速發(fā)展使得未來(lái)將沒有可以與互聯(lián)網(wǎng)撇清關(guān)系的行業(yè),傳統(tǒng)的安防企業(yè)也不例外。對(duì)于安防企業(yè),采用傳統(tǒng)運(yùn)營(yíng)模式已經(jīng)舉步維艱,安防產(chǎn)品價(jià)格有所走低。而利用互聯(lián)網(wǎng),則可以對(duì)傳統(tǒng)產(chǎn)業(yè)核心要素進(jìn)行重新分配,從而提升傳統(tǒng)企業(yè)的運(yùn)營(yíng)效率;此外,在互聯(lián)網(wǎng)背景下,轉(zhuǎn)變思路可以讓安防企業(yè)獲得更多機(jī)遇。安防企業(yè)可以為客戶提供增值云服務(wù)以及個(gè)性化訂制服務(wù)來(lái)滿足他們的需求,這也是時(shí)代發(fā)展的必然結(jié)果。再者,傳統(tǒng)的安防企業(yè)擁有海量的數(shù)據(jù),他們?nèi)绾卫眠@些數(shù)據(jù)的最大價(jià)值呢?這就要求傳統(tǒng)的安防企業(yè)進(jìn)行互聯(lián)網(wǎng)化,他們必須重視安防互聯(lián)網(wǎng)人才的培養(yǎng),這樣的人才不僅能深刻理解傳統(tǒng)安防產(chǎn)業(yè)的運(yùn)作規(guī)律,同時(shí)又具備互聯(lián)網(wǎng)思維的兩棲人才,以便更好地助力企業(yè)在運(yùn)營(yíng)和管理上完成升級(jí)。