技術(shù)
導(dǎo)讀:當(dāng)今時(shí)代,數(shù)據(jù)的價(jià)值得到了多元化挖掘和展現(xiàn)。
顯然,數(shù)據(jù)現(xiàn)在是我們所有生活的核心,在過(guò)去十年中,智能手機(jī)的蓬勃發(fā)展推動(dòng)了數(shù)據(jù)的發(fā)展。未來(lái)幾年,數(shù)百萬(wàn)種不同類型的傳感器將產(chǎn)生大規(guī)模的數(shù)據(jù)。這些數(shù)據(jù)可能非常豐富且功能強(qiáng)大,是迄今為止無(wú)法預(yù)料的用例,但是為了起作用,需要對(duì)其進(jìn)行有效的處理。這就是大數(shù)據(jù)和機(jī)器學(xué)習(xí)的用武之地。
SmartCitiesWorld最近與德國(guó)Cloudera德國(guó)區(qū)域銷售總監(jiān)Alexander Zschaler進(jìn)行了交談,以了解更多信息。
以下是討論中一些經(jīng)過(guò)編輯的重點(diǎn)內(nèi)容。
SmartCitiesWorld編輯Graeme Neill:您能否首先介紹Cloudera及其在行業(yè)中的地位?
Cloudera德國(guó)銷售總監(jiān)Alexander Zschaler:Cloudera相信數(shù)據(jù)可以使今天不可能的事情成為可能。數(shù)據(jù)驅(qū)動(dòng)著我們的生活,我們的工作方式以及彼此之間的聯(lián)系方式。這些數(shù)據(jù)具有一個(gè)特殊的特征,并且這個(gè)特殊的特征是它在任何地方都在迅速增長(zhǎng)。
但是,人們迫切需要一個(gè)平臺(tái)來(lái)利用這些數(shù)據(jù)并使之更加高效。這是Cloudera致力于提供這種數(shù)據(jù)平臺(tái)的一個(gè)方面。另一方面,我們的使命是我們希望使人們能夠?qū)?fù)雜的數(shù)據(jù)轉(zhuǎn)換為清晰、可操作的見(jiàn)解,他們可以將其用于開(kāi)發(fā)新服務(wù),甚至可以基于機(jī)器學(xué)習(xí)和AI的支持來(lái)判斷決策。
對(duì)我們來(lái)說(shuō),非常特別的是,我們完全不了解部署方法。這意味著,如果您要在內(nèi)部運(yùn)行此程序,那根本不是問(wèn)題,如果要在云、私有云或公共云甚至混合云上運(yùn)行,則完全由您決定。
IBM Power Systems上的Cloudera提供了快速的見(jiàn)解,并減少了靜態(tài)數(shù)據(jù)和動(dòng)態(tài)數(shù)據(jù)項(xiàng)目的基礎(chǔ)設(shè)施成本。我們?nèi)匀皇情_(kāi)源領(lǐng)域的探索者,對(duì)開(kāi)放標(biāo)準(zhǔn)有著共同的承諾,提供開(kāi)放軟件和硬件的強(qiáng)大組合,提供創(chuàng)新的速度,而無(wú)需供應(yīng)商鎖定。
Graeme Neill:為什么現(xiàn)在大數(shù)據(jù)和機(jī)器學(xué)習(xí)對(duì)城市如此重要?
Zschaler:每個(gè)數(shù)據(jù)遲早都是大數(shù)據(jù),特別是對(duì)于國(guó)家、各地方政府而言。問(wèn)題是,他們?nèi)绾尾拍軐⑦@些數(shù)據(jù)用于洞察并付諸實(shí)踐?這就需要現(xiàn)代化的基礎(chǔ)設(shè)施,以適應(yīng)不斷增長(zhǎng)的流量。到2025年,我們將看到157 ZB的數(shù)據(jù),其中80%將是非結(jié)構(gòu)化的。機(jī)器學(xué)習(xí)和諸如AI之類的功能可以幫助在問(wèn)題出現(xiàn)之前發(fā)現(xiàn)這些問(wèn)題,從而使城市運(yùn)行順暢。
單靠數(shù)據(jù)并不能使事情變得更聰明。從邊緣到AI的端到端收集、管理、分析這些數(shù)據(jù),這是現(xiàn)代化城市方法的核心。
Graeme Neill:如今在城市中可以利用的數(shù)據(jù)類型是什么?
Zschaler:智慧城市不斷努力,在正確的時(shí)間向正確的人提供正確的數(shù)據(jù),以幫助建立解決方案來(lái)解決這些復(fù)雜的城市挑戰(zhàn)。最根本的答案是您可以想象的任何類型的數(shù)據(jù),對(duì)嗎?
讓我們以智能垃圾箱為例,以及我們?nèi)绾螐膫鞲衅鬓D(zhuǎn)變?yōu)楣竦膶?shí)際利益。該方法將是,并且我們(Cloudera)如何解決此問(wèn)題,這些傳感器可以彼此互通交流,并檢查附近是否有其他垃圾箱幾乎已滿。然后,我們可以基于機(jī)器學(xué)習(xí)功能自動(dòng)優(yōu)化這些路線。
但是,這還沒(méi)有結(jié)束。從我們的角度來(lái)看,這只是一段美好旅程的開(kāi)始?,F(xiàn)在,可以在此示例中擁有的數(shù)據(jù)之上放置其他分析。它們可以導(dǎo)致更好的決策計(jì)劃,我們?cè)谀睦镄枰噙@些垃圾箱?這是一個(gè)簡(jiǎn)單的問(wèn)題,但是如果您沒(méi)有適合這個(gè)員工或更好的員工的數(shù)據(jù)庫(kù),該如何回答。所有這些方面,我們實(shí)際上在何時(shí)何地需要什么,都可以通過(guò)這種集成方法來(lái)回答。
Graeme Neill:為什么今天的城市無(wú)法有效處理數(shù)據(jù)?
Zschaler:根據(jù)我們的經(jīng)驗(yàn),并與40多個(gè)國(guó)家/地區(qū)的不同政府或機(jī)構(gòu)進(jìn)行了交流,這是公共部門數(shù)據(jù)面臨的共同挑戰(zhàn),而大多數(shù)挑戰(zhàn)可以歸結(jié)為五個(gè)方面。第一,您擁有舊系統(tǒng),而它們根本無(wú)法滿足當(dāng)今的數(shù)據(jù)量、多樣性和速度要求。第二點(diǎn)是到處都是筒倉(cāng)(數(shù)據(jù)孤島)。每個(gè)機(jī)構(gòu)都出于多種原因保留自己的數(shù)據(jù)。第三是安全和治理。我們需要從各個(gè)角度保證安全。
第四是您還需要考慮一些文化方面的問(wèn)題。 我們的意思是,一個(gè)項(xiàng)目中不同利益相關(guān)者之間進(jìn)行協(xié)作的愿望很有限。 最后,我想說(shuō)的是,云已經(jīng)到了最重要的位置,但到目前為止還沒(méi)有到位。他們真的不知道該如何執(zhí)行。
Graeme Neill:開(kāi)放平臺(tái)為何如此重要? 如果城市使用大數(shù)據(jù)和機(jī)器學(xué)習(xí)來(lái)處理其數(shù)據(jù),還有哪些其他好處?
Zschaler:開(kāi)放平臺(tái),尤其是在智慧城市中,是一個(gè)非常重要的話題。 智能服務(wù)創(chuàng)建了具有多個(gè)利益相關(guān)者的多維和多層環(huán)境。 由于規(guī)模經(jīng)濟(jì),開(kāi)放平臺(tái)是關(guān)鍵。 數(shù)據(jù)集的透明度和可訪問(wèn)性對(duì)于使服務(wù)成功并在為不同服務(wù)利用相同數(shù)據(jù)集方面利用規(guī)模經(jīng)濟(jì)至關(guān)重要。這將推動(dòng)公民創(chuàng)新和其他方面。