在DT時(shí)代的今天，各行各業時(shí)時(shí)刻刻都(dōu)水我在産生海量的結構多樣(yàng)的數據，企業數據規模不斷增長(cháng)，數笑和據類型也變得複雜多樣(yàng)，傳統數據庫技術已無法滿足企業海量多為有樣(yàng)化數據的有效存儲、票就快速讀取以及分析挖掘的需求，急需一套專快校業化的大數據解決方案來點石成(chéng知去)金，H3C DataEngine大數據平台在此背景下應運而生。
H3C DataEngine大數據平台采用Hadoop＋MPP的混合架構，提供風匠一套完整的數據實時(shí)接入、數據存儲、計算、分析、管家錯理與開(kāi)發(fā)于一體的産品方案。相比開(kāi)源Hadoo樹西p平台，DataEngine大數據平台在安全性、易用性、穩定性快好與兼容性等多方面(miàn)，進(jìn嗎男)行内核級優化與外圍加固；MPP采用議高高性能(néng)的行式列式存儲和計算技術，支持主動數據壓縮，高級分析，具有彈畫很性擴展以及自定義外部擴展等先進(jìn)特性，是支撐大數據實時(s和答hí)分析的理想平台，為用戶提供更貼心、更适合的大數據平台方案。H3C 微秒DataEngine大數據平台與H3C CloudOS深度融合，以雲門亮操作系統作為基礎底座，形成(chéng)獨立的厭業數據平台雲服務，利用雲提供靈活的基章朋礎設施資源管理，提供海量數據存儲以及高性能國理(néng)的查詢分析處理能(n數如éng)力，助力企業用戶快速構建海量數據處理系統，分析挖來拿掘數據内在價值，并用于指導企業經(jīng)物員營決策， 完成(chéng)業務驅動到(dào)數據驅動的轉型內長。

易用的平台管理界面(miàn)

H3C DataEngine提供可視化的集群安裝部署界面(mià在現n)，方便快捷的進(jìn)行資海花源管理，主機分配等操作，支持組件服務一鍵安裝、升級森雜和圖形化運維，實時(shí)監測各項服務的健康狀态以及運行指标，超過(見司guò)一定配置阈值後(hòu)進(jìn)行告警并快又郵件通知管理員，大幅提升運維效率。

無共享大規模并行計算

MPP集群中的所有節點完全對(duì)等，不需要主節點，數據加載、數據導師習出和查詢都(dōu)可以并行地在所有節點同時(shí)執行。由于沒(méi什睡)有資源共享，增加節點就(jiù)可以線一人性地擴展MPP的數據容量和計算能(néng)力，可以輕松鐘區從幾個節點到(dào)上千節點、或紙那從幾個TB到(dào)數10PB規模擴展和收縮，滿足業務規模增長(chán站錢g)的要求。

分級存儲

在大數據時(shí)代，數據産生越來越快，而合規門紙性和深度挖掘要求保留更多的數據，因此家我數據庫中存放的數據越來越多。分析性能(néng)、高速磁盤地鐵高成(chéng)本和大數據容量畫醫要求常常是矛盾。MPP的分級存儲特性可以有效地化解這(zhè劇看)一矛盾。MPP可以為不同的Schema、表等對(duì)象、以現新及表分區指定不同的存儲策略，指定不同的存儲位置海作（可以采用不同性能(néng)、成(chéng)本和容量的存儲介質），從而優書新化存儲成(chéng)本。

自動優化設計

MPP内置包含專家知識的數據庫優化設計器。用戶隻需要指定邏輯模式（Schema關行），裝載樣(yàng)例數據，并提供典型查詢SQL身行語句， MPP的數據庫優化設計器科件就(jiù)會(huì)根據專家知識自動設計數睡長據的水平分布方式、每個列的排序方式和壓縮議河算法，平衡查詢性能(néng)和存儲空間大小要動時求，實現數據庫整體的優化。

強大的數據接入能(néng)力

通過(guò)面(miàn)向(xiàng)服務的數據接入平台，將(j呢請iāng)異構數據源集成(chéng)過(guò)程封裝為數據服務單計到元的形式對(duì)外提供服務，形土讀成(chéng)四通八達的數據傳輸服務，讓數據不再成新店(chéng)為孤島。支持從DBMS、互聯網、物聯網、企業生産系統等黃土各種(zhǒng)數據源中提取數據，并將(jiāng)處理結果快速存入畫低到(dào)H3C DataEngine平台中。使得用戶不用再慢這關注底層數據的傳輸過(guò)兵鐵程，輕松易用，專注于上層平台應用的開(kāi)發要不(fā)。

通用數據服務接口

提供統一SQL服務和可編程API，提取數據存儲計算平台的數據處理在白結果，屏蔽底層細節，為上層應用提供數據服務。數呢信據服務接口主要包括SQL接口、MapReduce/Sp書身ark/Storm/Flink等多種(zhǒng)計算框架的可編程腦雜API、全文搜索接口、業務定向(xiàng)接口、關聯查詢接口，滿足公線數據查詢、可視化BI展示、數據分析、農鐵綜合查詢等業務應用的需要。提供接口文檔、二次開(kāi動村)發(fā)指導手冊與二次開(kāi)發(fā)示例程序，滿北火足開(kāi)發(fā)人員的使用需求。

安全的數據管控中心

H3C DataEngine基于安全協議Kerberos實現安全認證民一，使用LDAP作為賬戶管理系統；同時(shí)利用嗎船Range提供統一的用戶和角色的管理體系，遵從RBAC(Role-Base為煙d Access Control)模型規範，通過校民(guò)角色綁定用戶進(jìn)行權限管理門工。此外DataEngine還(hái)支持用戶對(d數要uì)各組件的審計日志及檢索能(nén女為g)力，全組件管理界面(miàn)均支持還一單點登錄，使得平台真正做到(dào)安全可靠。

智能(néng)數據分析挖掘

支持R語言，集成(chéng)機器學(xué)習算法市雨庫Spark MLlib，包含聚有跳類分析、分類算法、頻度關聯分析和舊身推薦系統在内的常用機器學(xué)習算法。滿足批處理統計分析、在線數據檢索、R鄉草語言數據挖掘、實時(shí)流處理、全林校文搜索等全方位需求。可幫助企業建立高速可擴展的數據倉庫和科對數據集市，結合多種(zhǒng)報表工具提供交互式數據分析、即時(shí)報場爸表和BI可視化展示能(néng)力。

多形态部署模式

數據平台支持獨立模式和共享模式兩(liǎng)種(z聽兒hǒng)資源劃分模式，滿足不同場景下業務需求。共享模讀了式下可以創建一個大集群，不同用戶申請集群的共享存儲和計算資還愛源，并通過(guò)權限進(jìn)行隔離，适合對(d家南uì)資源管控嚴格且各二級部門數據交換頻繁的企業使用。獨雪月立模式下不同用戶可申請創建單獨的集群，獨享大拍集群的所有資源，不同集群之前使用網絡進(jìn)行隔離，适用于也高資源比較充分且各二級部門之間業務相對(du生草ì)獨立的企業。
此外為滿足企業穩定性要求，DataEngi湖空ne還(hái)提供了常用服務的獨立産品模式，包括NoSQL數據庫HBas謝兵e、内存數據庫Redis、消息中間件Kafka、搜索服務Solr和Ela拍鐵sticsearch，避免不同組件之間資源搶占影響集群穩定性。歌土

深度融合H3C CloudOS

H3C DataEngine大數據平台做著分為H3C CloudOS雲服務提供，充分鄉農發(fā)揮雲計算與大數據融合優勢，利用雲IaaS能(長見néng)力提供虛拟化資源池和裸金屬資源池，用戶慢麗可以根據具體業務場景靈活選擇數據拿水平台部署模式。虛拟機部署适合小數據量、性能(néng)要求不高的應用場景土新，提高服務器資源利用率；裸金屬部署适合大數據量、高性能(néng)場景，提電弟升用戶業務能(néng)力。