大數(shù)據(jù)開發(fā)跟大數(shù)據(jù)平臺開發(fā)有區(qū)別嗎?
作者:小時,官方賬號:SG-TIMEWORK:深耕商業(yè)地產(chǎn)14年,現(xiàn)已形成大商圈、智慧園區(qū)、IT服務(wù)三大核心業(yè)務(wù)的軟件企業(yè)。服務(wù)過華潤、萬達、華僑城、碧桂園旅游、大悅城等商業(yè)地產(chǎn)50強客戶。
大數(shù)據(jù)平臺是集數(shù)據(jù)訪問、數(shù)據(jù)處理、數(shù)據(jù)存儲、查詢檢索、分析挖掘、應(yīng)用接口等功能于一體的平臺。通俗的理解包括Hadoop生態(tài)相關(guān)產(chǎn)品,如Spark、Flink、Flume、Kafka、Hive、Hbase等經(jīng)典開源產(chǎn)品。
因為大數(shù)據(jù)技術(shù)很多,單獨使用的學習成本很高。為了提高數(shù)據(jù)開發(fā)的效率,大數(shù)據(jù)開發(fā)平臺應(yīng)運而生。簡單來說,數(shù)據(jù)開發(fā)平臺就是集成了大數(shù)據(jù)平臺的開發(fā)套件。比如阿里云的DataWorks就是一個代表。DataWorks是阿里云重要的PaaS(Platform-as-a-Service)平臺產(chǎn)品,提供數(shù)據(jù)集成、數(shù)據(jù)開發(fā)、數(shù)據(jù)地圖、數(shù)據(jù)質(zhì)量、數(shù)據(jù)服務(wù)等全面的產(chǎn)品服務(wù)和一站式開發(fā)管理接口,幫助企業(yè)聚焦數(shù)據(jù)價值。
大數(shù)據(jù)的數(shù)據(jù)開發(fā)平臺對于大數(shù)據(jù)技術(shù)的重要性,就相當于對于最終的數(shù)據(jù)開發(fā)者和用戶的重新整合、重新抽象和可視化體驗。事實上,在大數(shù)據(jù)技術(shù)之前的數(shù)據(jù)庫和數(shù)據(jù)倉庫時代,已經(jīng)出現(xiàn)了各種各樣的數(shù)據(jù)開發(fā)工具,而大數(shù)據(jù)的數(shù)據(jù)開發(fā)平臺不僅僅是取代以前的數(shù)據(jù)庫和數(shù)據(jù)倉庫的各種數(shù)據(jù)開發(fā)和管理工具,還是數(shù)據(jù)資產(chǎn)的治理平臺和面向業(yè)務(wù)的支撐平臺。
隨著大數(shù)據(jù)技術(shù)的不斷更新和迭代,數(shù)據(jù)管理工具發(fā)展迅速,從數(shù)據(jù)庫、數(shù)據(jù)倉庫、數(shù)據(jù)集市和數(shù)據(jù)湖,到大數(shù)據(jù)平臺和今天的數(shù)據(jù)中間盒。其實不難理解,在數(shù)字化運營的不同階段,每種運營手段并不一定取代誰。準確的說都是各有各的功能和特點,技術(shù)之間的互補性,各有各的手段。讓下面簡單總結(jié)一下各種操作在數(shù)字化操作不同階段的作用和亮點。
歡迎關(guān)注SG-TIMEWORK,獲取更多商業(yè)數(shù)字情報服務(wù)。