2.大數(shù)據(jù)預(yù)處理技術(shù)
大數(shù)據(jù)預(yù)處理技術(shù)主要完成對(duì)已接收數(shù)據(jù)的辨析、抽取、清洗等操作。
(1)抽取:因獲取的數(shù)據(jù)可能具有多種結(jié)構(gòu)和類型,數(shù)據(jù)抽取過(guò)程可以幫助我們將這些復(fù)雜的數(shù)據(jù)轉(zhuǎn)化為單一的或者便于處理的構(gòu)型,以達(dá)到快速分析處理的目的。
(2)清洗:大數(shù)據(jù)并不全是有價(jià)值的,有些數(shù)據(jù)并不是我們所關(guān)心的內(nèi)容,而另一些數(shù)據(jù)則是完全錯(cuò)誤的干擾項(xiàng),因此,要對(duì)數(shù)據(jù)進(jìn)行過(guò)濾“去噪”,從而提取出有效數(shù)據(jù)。
-
大數(shù)據(jù)
+關(guān)注
關(guān)注
64文章
8884瀏覽量
137412
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論