原創|大數據新聞|編輯:徐能勝|2019-07-18 16:36:16.067|閱讀 135 次
概述:在這個概念泛濫的大數據熱炒時代,各種公司一夜轉型大數據,如何辨別小數據和大數據,不僅是技術基礎,更重要的是思維方式。
# 界面/圖表報表/文檔/IDE等千款熱門軟控件火熱銷售中 >>
大數據和BI有很多對立。我們在項目實施中一直遵循這一原則。例如:
1.全量思維。不用抽樣建模,再回到DW實施。大數據利用全量數據直接跑,先在大寬表中找到以前靠業務經營選擇的字段,即依靠機器學習建規則,再在全局數據中實施。大數據在這個層面首先是基礎設施,能夠完成以前不能完成的任務。例如某保險公司,SAS只能跑幾十萬用戶的一種分類模型,現在可以把個險3600萬用戶跑個全量,得到上千個分類,發現業務經營給不了事實。這是大數據的IT屬性,Hadoop分布式計算帶來的顛覆創新。
2. 個性化。 BI面向決策,面向人的干預。輸出形式更多的dashboard.report。因此對事實描述更多是基于群體共性,而不是個體刻畫。例如回到保險公司的例子,當我們用大數據計算出每一個個體客戶的流失風險概率,做個性化客戶視圖。而BI系統需要匯總成宏觀統計數據。前者幫助我們深刻的了解每一個用戶,適合于精準推薦類營銷類問題,回答How much how strong的程度類模糊問題;后者幫助決策者掌握宏觀統計趨勢,適合經營運營指標支撐類問題,準確回答yes or no的統計意義概率問題。
大數據對個體刻畫還是BI的群體描述,引發了下面第三種差異。
3. Insight or Automation群體共性的描述獲得的Yes or no的問題對于復雜經濟現象越來越難回答,維度指標越來越多。例如上面客戶流失風險的例子,被BI系統做成統計指標后匯報高層做決策,高層形成客戶挽留計劃一類的執行策略往往風險很大,包括質疑數據準確性,執行效率反饋周期等等,其結果就是面對這樣的宏觀不決策不作為。因此,某種意義上,BI形成的Insight,因為沒有形成閉環干預,而沒有發揮作用。
大數據強調Automation. 淘寶更強調為每一筆網購做自動推薦的生產系統。上面的保險客戶流失例子,大數據刻畫客戶后提供給一線銷售,數據服務下沉而不是匯總上報,每一個保險員做微決策微行動,風險小反饋及時。大數據更強調提供自動化工具,而不是統計報告。
4. 反饋和實驗方法 因為引入了Automation,和記錄行為數據,效果更直接及時。例如互聯網最多用的AB testing. Hulu每日上線的測試有200多個,可見測試方法在數據分析中的重要程度。
在這個概念泛濫的大數據熱炒時代,各種公司一夜轉型大數據,如何辨別小數據和大數據,不僅是技術基礎,更重要的是思維方式。更多關于大數據和BI的話題以及討論,歡迎登陸慧都科技官網//fc6vip.cn/tecserv/bigdata與我們溝通交流。
本站文章除注明轉載外,均為本站原創或翻譯。歡迎任何形式的轉載,但請務必注明出處、不得修改原文相關鏈接,如果存在內容上的異議請郵件反饋至chenjj@fc6vip.cn