2012對于IT行業(yè)來說，無疑是大數(shù)據(jù)之年。據(jù)IDC統(tǒng)計，2011年數(shù)據(jù)總量將達到1.8萬億GB ，對這些海量數(shù)據(jù)的分析已經(jīng)成為企業(yè)和機構(gòu)非常重要且緊迫的需求。面臨著占據(jù)不到15% 的傳統(tǒng)標準化、結(jié)構(gòu)化的信息，企業(yè)已經(jīng)無法捕捉正確的、全部的市場信息，剩下的85% 非結(jié)構(gòu)化數(shù)據(jù)則廣泛存在于社交網(wǎng)絡(luò)、互聯(lián)網(wǎng)和電子商務(wù)之中。面對席卷而來的大數(shù)據(jù)浪潮，企業(yè)更需要一種全新的技術(shù)，幫助他們實時處理海量的復雜性信息，挖掘大數(shù)據(jù)分析的價值。

在大數(shù)據(jù)分析中，傳統(tǒng)的數(shù)據(jù)庫部署已經(jīng)不能承載TB數(shù)據(jù)，也不能很好的支持高級別的數(shù)據(jù)分析。“大數(shù)據(jù)的應用關(guān)鍵在于可高度擴展的分析，包括處理海量、高速、種類繁多以及無法預測的數(shù)據(jù)類型等極端情況”，F(xiàn)orrester 研究機構(gòu)于10月發(fā)布的報告《企業(yè)Hadoop：新興的大數(shù)據(jù)核心》指出。

在大數(shù)據(jù)分析領(lǐng)域，Hadoop和MapReduce越來越受到關(guān)注。Hadoop是一個開放源碼的分布式數(shù)據(jù)處理系統(tǒng)架構(gòu)，主要面向存儲和處理結(jié)構(gòu)化、半結(jié)構(gòu)化或非結(jié)構(gòu)化等真正意義上的大數(shù)據(jù)（通常成百上千的TB甚至PB級別數(shù)據(jù)）應用。MapReduce能將大數(shù)據(jù)問題分解成多個子問題，將它們分配到成百上千個處理節(jié)點之上，然后將結(jié)果匯集到一個小數(shù)據(jù)集當中，從而更容易分析得出最后的結(jié)果。

Sybase IQ 15.4采用業(yè)內(nèi)領(lǐng)先的MPP列式數(shù)據(jù)庫和最先進的數(shù)據(jù)庫內(nèi)分析技術(shù)，并革命性地加入MapReduce與Hadoop集成，以應對大數(shù)據(jù)時代的分析挑戰(zhàn)，開啟洞察關(guān)鍵業(yè)務(wù)的能力。Sybase IQ 15.4正在打破數(shù)據(jù)分析的壁壘，徹底改變“大數(shù)據(jù)分析”領(lǐng)域。

Sybase IQ 15——創(chuàng)新性的列式數(shù)據(jù)庫

面對大數(shù)據(jù)分析的全新需求，Sybase IQ 的列式數(shù)據(jù)庫無疑更能夠駕馭大數(shù)據(jù)浪潮。

相比于傳統(tǒng)的“行式存儲”的關(guān)系型數(shù)據(jù)庫，Sybase IQ使用了獨特的列式存儲方式，在進行分析查詢時，僅需讀取查詢所需的列，其垂直分區(qū)策略不僅能夠支持大量的用戶、大規(guī)模數(shù)據(jù)，還可以提交對商業(yè)信息的高速訪問，其速度可達到傳統(tǒng)的關(guān)系型數(shù)據(jù)庫的百倍甚至千倍。“隨著Sybase IQ不斷地在分析應用POC測試中拔得頭籌，有時甚至超過其他對手100倍之多”，Gartner 評價道，“Sybase IQ逐漸成為從數(shù)據(jù)集市到企業(yè)數(shù)據(jù)倉庫架構(gòu)最令人渴望的DBMS（數(shù)據(jù)庫管理系統(tǒng)）。”

在此基礎(chǔ)上，Sybase IQ 15 提升了核心的引擎基礎(chǔ)架構(gòu)能力，包括數(shù)據(jù)加載和查詢性能、改進的安全架構(gòu)、強大的集群管理和因數(shù)據(jù)分區(qū)而增強的管理等等。自2009年推出以來，Sybase陸續(xù)發(fā)布了Sybase IQ 15.1、15.2、15.3以至最新的Sybase IQ 15.4版本，每個版本都著力于增加新的核心能力以促進更深入的高級分析。Sybase IQ 15.3在內(nèi)置分析、全文檢索等功能基礎(chǔ)上，采用 PlexQ 技術(shù)的全共享 MPP 架構(gòu)，擴展后可支持實時訪問數(shù)千個用戶、多個混合工作負載和大規(guī)模數(shù)據(jù)集，將性能、分析、靈活性提高前所未有的高度，從而重新定義企業(yè)級業(yè)務(wù)分析。Sybase IQ 15.4已將Sybase IQ 的性能、分析、靈活性提升到了更高的級別，進一步推動了其在商業(yè)智能方面業(yè)已非常強勢的增長。

長期以來，Sybase IQ這些技術(shù)革新使得Sybase IQ一直以來位于列式分析服務(wù)器市場的領(lǐng)導者地位。目前，全球已有2,000多名用戶采用了Sybase IQ創(chuàng)新的列式處理方法，為其關(guān)鍵的分析和報表系統(tǒng)提供支持。在過去三年，每年都有大約200個新客戶加入Sybase IQ用戶陣營。

Sybase IQ 15 ——采用更靈活、效益更高的 PlexQ 技術(shù)

Sybase在2010年推出的Sybase IQ 15.3就采用了全共享架構(gòu)的 PlexQ 技術(shù)，該技術(shù)重新定義了企業(yè)范圍的業(yè)務(wù)信息，全共享架構(gòu)可輕松支持涉及海量數(shù)據(jù)集、海量并發(fā)用戶數(shù)和獨特工作流程的多種復雜分析樣式，大大增加了其效益。與其他 MPP 解決方案不同，Sybase IQ 的 PlexQ 網(wǎng)格技術(shù)能夠動態(tài)管理可輕松擴展并且專用于不同組和流程的一系列計算與存儲資源中的分析工作量，從而使其能夠以更低的成本更輕松地支持日益增長的數(shù)據(jù)量以及快速增長的用戶社區(qū)。

基于成熟的PlexQ 技術(shù)構(gòu)建的Sybase IQ 采用下圖所示的三層構(gòu)架： 

基本層：數(shù)據(jù)庫管理系統(tǒng) (DBMS)，這是一個全共享 MPP 分析 DBMS 引擎，是Sybase IQ 最大的獨特優(yōu)勢。

• 第二層：分析應用程序服務(wù)層，其提供 C++ 和 Java 數(shù)據(jù)庫內(nèi) API，并可實現(xiàn)與外部數(shù)據(jù)源的集成和聯(lián)邦；包括四種 與Hadoop 的集成方法。

• 頂層：Sybase IQ 生態(tài)系統(tǒng)，由四個強大且不同的合作伙伴和認證 ISV 應用程序組成。

基于這種 PlexQ 技術(shù)，Sybase IQ 15.4 將大數(shù)據(jù)轉(zhuǎn)變成可指揮每個人都行動的情報信息，從而在整個企業(yè)的用戶和業(yè)務(wù)流程范圍內(nèi)輕松具備大數(shù)據(jù)的分析能力。

Sybase IQ 15.4——面向大數(shù)據(jù)的高級分析平臺

Sybase IQ提供了一個統(tǒng)一的DBMS平臺，可使用各種算法分析不同類型的數(shù)據(jù)，這包括結(jié)構(gòu)化數(shù)據(jù)和半結(jié)構(gòu)化數(shù)據(jù)。此外，該版本還做了以下的擴充：擴大了對數(shù)據(jù)庫內(nèi)分析功能的支持，包括MapReduce API、預測模型標記語言（PMML）支持、與Hadoop的集成以及基于Sybase IQ PlexQ大規(guī)模并行處理（MPP）技術(shù)的統(tǒng)計和數(shù)據(jù)挖掘算法的擴展庫。新的API幫助開發(fā)人員快速、安全地實施數(shù)據(jù)庫內(nèi)算法，實現(xiàn)優(yōu)于現(xiàn)有方法10倍以上的性能加速。

Sybase IQ 15. 4具有以下主要功能:

 1. 更強的數(shù)據(jù)管理

大量增強的功能改善了Sybase IQ 的數(shù)據(jù)管理、部署和可維護性。

• 更快速的批量加載: 批量加載數(shù)據(jù)通過ODBC 和 JDBC 接口插入到Sybase中，從而實現(xiàn)具有更高可擴展性的應用程序，同時可極大提高加載性能。

• 更出色的文本壓縮: 更出色地對 VARCHAR、VARBINARY、CHAR 和 BINARY 壓縮可實現(xiàn)以更高效率、更低成本部署高性能文本分析應用程序，同時極大提高壓縮速率。

2. 豐富的應用程序

Sybase IQ 15.4 增加了一系列 API 和工具，用于創(chuàng)建在數(shù)據(jù)庫內(nèi)運行的高級分析算法，并且能通過 PlexQ 網(wǎng)格能充分利用大規(guī)模并行處理的能力。

支持自帶Map Reduce的表參數(shù)化用戶自定義函數(shù)(UDF)——這是 Sybase IQ 的本地應用程序編程接口，可使應用程序編程人員在 Sybase IQ 數(shù)據(jù)庫服務(wù)器內(nèi)構(gòu)建和部署 C++ 庫。使用這些 API 可實現(xiàn)專有算法或算法包，安全地位于 Sybase IQ 內(nèi)，通過在保存于 Sybase IQ 數(shù)據(jù)庫服務(wù)器中的數(shù)據(jù)附近執(zhí)行，以快 10 倍的速度返回結(jié)果。此框架可實現(xiàn)在 Sybase IQ 中開發(fā)和部署 MapReduce 程序，以分析涉及結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)格式的超大數(shù)據(jù)集。C++、Map 和 Reduce 算法通過標準 SQL 加以調(diào)用，并且由 Sybase IQ 強大的查詢引擎自動在 PlexQ 網(wǎng)格中進行分發(fā)和并行化。

Hadoop集成與聯(lián)邦——將基于Hadoop的分析的結(jié)果與運行于 Sybase IQ 中的查詢相集成。Sybase 是唯一一家提供4種不同方法將標準SQL查詢(客戶端聯(lián)邦、ETL處理、數(shù)據(jù)聯(lián)邦和查詢聯(lián)邦)中的 Hadoop 數(shù)據(jù)和分析與分析數(shù)據(jù)庫相集成的廠商。Sybase IQ 15.4 充分利用Hadoop來識別海量結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)集中的相關(guān)數(shù)據(jù)點，然后將 Hadoop 中的相關(guān)數(shù)據(jù)點集成到 Sybase IQ 中，以便利用傳統(tǒng)數(shù)據(jù)和來自其他數(shù)據(jù)源的結(jié)果集進行分析。

預測模型標記語言 (PMML) 支持——通過 Zementis 提供的認證插件，自動執(zhí)行使用業(yè)界標準語言定義在SAS、SPSS、“R”等工具以及其他流行預測工作平臺產(chǎn)品中所創(chuàng)建的分析模型。充分利用流行的分析工具構(gòu)建預測模型，自動執(zhí)行在Sybase IQ中部署的預測模型，并使用業(yè)界標準語言，以避免形成廠商捆綁。

“R”集成: ——用戶可使用 RJDBC 接口，以及流行的開源統(tǒng)計工具“R”查詢Sybase IQ 數(shù)據(jù)庫。此外，用戶還可以將來自 Sybase IQ 的“R”庫作為SQL查詢中的函數(shù)調(diào)用加以執(zhí)行，并返回結(jié)果集。

3. 數(shù)據(jù)庫內(nèi)分析庫

更新的數(shù)據(jù)庫內(nèi)統(tǒng)計和數(shù)據(jù)挖掘庫(來自Fuzzy • Logix 的 DBLytix): 在 Sybase IQ 內(nèi)運行的高級分析、統(tǒng)計和數(shù)據(jù)挖掘算法庫。Sybase IQ 15.4中的更新可使該庫充分利用一些數(shù)據(jù)挖掘算法中的MapReduce API進行大規(guī)模并行處理，并且包含多種新函數(shù)，例如支持向量機、神經(jīng)網(wǎng)絡(luò)和Adaptive Boosting。

4. 擴展的生態(tài)系統(tǒng)

Sybase IQ 還非常適合面向大數(shù)據(jù)分析的端到端全面解決方案。重要的工具和互補的合作伙伴產(chǎn)品可在以下方面提供幫助:

Sybase PowerDesigner® 16.1 參考架構(gòu)生成器: 可通過在實施 Sybase IQ 數(shù)據(jù)倉庫和數(shù)據(jù)集市時生成最佳硬件配置，快速實現(xiàn)價值。

Sybase Control Center(SCC) : 改進方面包括大量管理功能，例如過程、函數(shù)、UDF(表、TPF 和JavaEE )及文本索引。用戶能夠更輕松地管理 SCC 中頻繁使用的功能，以及更輕松地部署內(nèi)置、外部和文本數(shù)據(jù)庫內(nèi)分析。此外該版本還包含了新的SQL 執(zhí)行窗口，該窗口可實現(xiàn)易于測試的特定 SQL 例程。

已通過 SAP®BusinessObjects™ 認證: Sybase IQ 15.4已通過認證，可與SAP Business Objects Business Intelligence Platform 4.0 和SAP Business Objects Data Services 4.0配合使用，以提供豐富的端到端業(yè)務(wù)分析框架。

基于合作伙伴的解決方案: Sybase IQ 擁有基于與Solix、KXEN、Quest、BMMSoft、Zementis 及 Fuzzy Logix 之間的合作伙伴關(guān)系的多種新解決方案，從而可使Sybase IQ 提供可滿足各種需求的優(yōu)質(zhì)解決方案。

總結(jié)

 以上新功能充分利用 PlexQ 智能分析網(wǎng)格技術(shù)，能夠在一個企業(yè)級數(shù)據(jù)分析平臺上執(zhí)行大規(guī)模分析。憑借 Sybase IQ 15.4，企業(yè)能夠有效地將海量數(shù)據(jù)轉(zhuǎn)變成可操作的信息，管理海量增長的半結(jié)構(gòu)與非結(jié)構(gòu)化數(shù)據(jù)、實現(xiàn)復雜數(shù)據(jù)環(huán)境下高效的大數(shù)據(jù)分析。

在大數(shù)據(jù)浪潮下，Sybase 從行業(yè)的變化以及用戶的真實需求出發(fā)，不斷革新技術(shù)并調(diào)整服務(wù)，為全球用戶提供適應大數(shù)據(jù)環(huán)境的產(chǎn)品與解決方案。

關(guān)于Sybase

Sybase，SAP旗下的公司，是業(yè)界領(lǐng)先的企業(yè)級和移動軟件公司，致力于信息的管理、分析和移動。無論在何種系統(tǒng)、網(wǎng)絡(luò)和設(shè)備上，我們都是全球公認的在數(shù)據(jù)密集應用領(lǐng)域有杰出的性能表現(xiàn)的領(lǐng)導者。我們的信息管理、分析、移動消息和企業(yè)移動解決方案已經(jīng)為全球的金融服務(wù)、通信、制造和政府等的業(yè)務(wù)關(guān)鍵系統(tǒng)提供強勁動力。

生成海報

免責聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性，但不保證有關(guān)資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。