? ? 隨著社區(qū)及業(yè)內(nèi)大數(shù)據(jù)技術(shù)框架的成熟與發(fā)展,基于Hadoop技術(shù)生態(tài)的數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)倉(cāng)庫(kù)、實(shí)時(shí)計(jì)算、綜合檢索等大數(shù)據(jù)產(chǎn)品和技術(shù)在政府、企業(yè)數(shù)字化變革中得到了深入的實(shí)踐與應(yīng)用。未來(lái),四方偉業(yè)大數(shù)據(jù)存儲(chǔ)計(jì)算平臺(tái)的研發(fā),將會(huì)更多地聚焦如何助力數(shù)據(jù)消費(fèi)和數(shù)據(jù)賦能,以驅(qū)動(dòng)政府、企業(yè)及各行業(yè)用戶(hù)構(gòu)建自己的大數(shù)據(jù)智能生態(tài)。在具體的工程實(shí)踐中,屏蔽底層多源異構(gòu)數(shù)據(jù)差異、解耦并分離存儲(chǔ)與計(jì)算,基于廣泛異構(gòu)數(shù)據(jù)信息快速構(gòu)建數(shù)據(jù)視圖,構(gòu)建輕量、靈活、獨(dú)立、高效的數(shù)據(jù)分析平臺(tái)將成為大數(shù)據(jù)技術(shù)新的發(fā)展趨勢(shì)。四方偉業(yè)智能分析引擎SDC Analysis Engine(簡(jiǎn)稱(chēng):SDC AE)應(yīng)運(yùn)而生。
? ? 四方偉業(yè)SDC AE智能分析引擎面向數(shù)據(jù)在線(xiàn)分析和數(shù)據(jù)模型設(shè)計(jì),以多源異構(gòu)數(shù)據(jù)在線(xiàn)分析計(jì)算、物化視圖智能感知數(shù)據(jù)存儲(chǔ)、HOLAP多維立方體模型構(gòu)建、圖形化模型設(shè)計(jì)與開(kāi)發(fā)、百億規(guī)模數(shù)據(jù)快速地交互式查詢(xún)響應(yīng)等核心產(chǎn)品能力,助力政府、企業(yè)及各行業(yè)大數(shù)據(jù)智能生態(tài)構(gòu)建,真正實(shí)現(xiàn)數(shù)據(jù)的快速組織,面向分析與應(yīng)用,釋放數(shù)據(jù)價(jià)值。
SDC?AE智能分析引擎能做什么?
1.快速地交互式查詢(xún)響應(yīng)能力,助力敏捷報(bào)表及可視化系統(tǒng)
支持物化視圖預(yù)計(jì)算能力,減少Hadoop、Spark、MPP、RDBMS上百億規(guī)模數(shù)據(jù)的查詢(xún)延遲。對(duì)于大規(guī)模數(shù)據(jù)集的關(guān)聯(lián)、聚合、排序、過(guò)濾等復(fù)雜交互式查詢(xún)場(chǎng)景,實(shí)測(cè)最佳優(yōu)化性能可提升上百倍。
2.物化視圖智能感知數(shù)據(jù)存儲(chǔ),提供了更加輕量、靈活、高效、獨(dú)立的計(jì)算模式
通過(guò)預(yù)計(jì)算方式,SDC AE智能分析引擎可以將聚合數(shù)據(jù)物化成數(shù)據(jù)視圖,并調(diào)度分發(fā)到基于Hadoop,MPP的數(shù)據(jù)倉(cāng)庫(kù)或者關(guān)系型數(shù)據(jù)庫(kù)、分布式數(shù)據(jù)庫(kù)中。通過(guò)SQL重寫(xiě)智能感知聚合數(shù)據(jù)和明細(xì)數(shù)據(jù),相對(duì)于傳統(tǒng)的模型設(shè)計(jì)工具,提供了更加輕量、靈活、高效、獨(dú)立的模型設(shè)計(jì)體驗(yàn)。
3.多源異構(gòu)數(shù)據(jù)在線(xiàn)分析計(jì)算,將數(shù)據(jù)“跨欄”變成數(shù)據(jù)“短跑”
相對(duì)于傳統(tǒng)的大數(shù)據(jù)分析處理流程來(lái)說(shuō),對(duì)于多源異構(gòu)數(shù)據(jù)的分析計(jì)算就像110米跨欄一樣,針對(duì)每種不同的數(shù)據(jù)源都需要進(jìn)行“卡位”,只有所有異構(gòu)數(shù)據(jù)源“卡位”完成,才能進(jìn)行異構(gòu)數(shù)據(jù)的分析計(jì)算。而SDC AE智能分析引擎將數(shù)據(jù)“跨欄”變成了數(shù)據(jù)“短跑”,提供了“一次到位”的分析計(jì)算。
4.圖形化的模型設(shè)計(jì)界面,為用戶(hù)提供更加友好、簡(jiǎn)單、易操作的數(shù)據(jù)分析和模型設(shè)計(jì)體驗(yàn)
SDC AE智能分析引擎能夠應(yīng)用于跨系統(tǒng)分析+報(bào)表與可視化呈現(xiàn)、統(tǒng)計(jì)呈現(xiàn)+詳情下鉆、交互式查詢(xún)分析等場(chǎng)景,為客戶(hù)提供更加靈活的存儲(chǔ)引擎選型,更加靈活、輕量、獨(dú)立的Cube模型設(shè)計(jì)?;诖鎯?chǔ)與計(jì)算分離的架構(gòu)設(shè)計(jì)思路,SDC AE智能分析引擎有效地降低了用戶(hù)的運(yùn)維成本、學(xué)習(xí)成本和使用成本;同時(shí),大規(guī)模提升了數(shù)據(jù)分析計(jì)算的處理效率。
四方偉業(yè)作為領(lǐng)先的大數(shù)據(jù)、人工智能產(chǎn)品及服務(wù)提供商,以振興民族軟件產(chǎn)業(yè)為己任,目前已擁有100+項(xiàng)大數(shù)據(jù)核心發(fā)明專(zhuān)利與著作權(quán),具有自主知識(shí)產(chǎn)權(quán)的大數(shù)據(jù)產(chǎn)品在國(guó)內(nèi)政府、能源、交通、金融、軍工、企業(yè)、運(yùn)營(yíng)商等社會(huì)各行業(yè)中廣泛應(yīng)用。未來(lái),四方偉業(yè)將繼續(xù)聚焦大數(shù)據(jù)和人工智能技術(shù)創(chuàng)新,助力我國(guó)社會(huì)各行業(yè)數(shù)字化轉(zhuǎn)型。