數據質量和安全決定大數據項目成敗

信息來源:南方電網報  發布時間2020-09-11

  特約撰稿人 陳堅
  經過幾年的技術發展以及市場推動,大數據項目的部署數量越來越多,大數據概念已被大眾所熟知。但鮮有大數據項目建成后取得實質性效果的報道,可見大數據項目的成功落地不是那么容易。大數據項目成功的關鍵在于數據,這里涉及到數據質量、數據安全及隱私保護問題。
  一方面,幾乎所有大數據項目,都會通過各種技術手段和非技術手段保證所獲取數據的質量,以保證數據源的廣泛性、數據類型的多樣性,并滿足大數據項目對數據進行積累沉淀的基本要求。由于各種客觀原因,來自各種渠道的數據并不總是高質量數據,如果使用質量不高的數據進行挖掘分析,其結果基本是不可信的,甚至會起到誤導作用,進而導致大數據項目失敗。數據質量不高的現實,必然會驅動大數據項目采取數據治理等技術手段解決此問題。
  另一方面,大數據項目所獲取的數據往往攜帶大量的隱私信息。這些信息既有個人信息,也有政府機構、組織、公司的信息。當前業界各方隱私保護的意識都在增強,甚至很多國家把隱私保護提高到法律的高度加以規范,在這樣的大背景下,大數據項目必須對數據安全和隱私保護給予足夠重視,并通過技術手段和管理措施兩方面加以保障。如果沒有這些保障措施,將會導致掌握數據的機構失去共享數據的意愿,即使采取硬性行政手段強制獲取數據,也無法避免可能的隱私泄露風險。
  針對大數據技術在發展和應用過程中存在的問題,業界正在著力解決,以促進實際部署的大數據項目達到預期效果。譬如中興通訊研發的DAP大數據平臺,在電信、金融、智慧城市、公安等行業,從數據源、數據集成、數據治理、數據挖掘、數據安全等方面,打造數據質量可靠、安全有保障、處理高效的數據管道。
 ?。ㄗ髡邽橹信d通訊中心研究院副院長)
时时彩软件免费版