Gartner? 連續(xù)五年將 Denodo 評為2024年數(shù)據(jù)集成工具領(lǐng)域魔力象限的領(lǐng)導(dǎo)者。Gartner 表示：“隨著組織越來越尋求增強其操作、分析和AI基礎(chǔ)設(shè)施使用場景的能力，數(shù)據(jù)集成工具市場保持活躍。在此次研究中，我們評估了20家廠商，它們在滿足組織數(shù)據(jù)集成需求方面展開競爭。”
“到2027年，集成到數(shù)據(jù)集成工具中的AI助手和AI增強工作流將減少60%的人工干預(yù)，并實現(xiàn)自助數(shù)據(jù)管理，”根據(jù)2024年魔力象限報告。
通過屢獲殊榮的Denodo平臺，組織能夠獲取及時、可信且集成的數(shù)據(jù)集，從而加速分析并做出明智的業(yè)務(wù)決策，同時為加速生成式AI(GenAI)計劃打下堅實的AI數(shù)據(jù)基礎(chǔ)。Denodo平臺深受全球領(lǐng)先的財富500強及全球1000強品牌的信賴，幫助他們提升客戶體驗、獲得運營效率和靈活性、實現(xiàn)自助數(shù)據(jù)民主化，并實現(xiàn)IT基礎(chǔ)設(shè)施現(xiàn)代化。
“數(shù)據(jù)集成市場正向著包含先進AI和生成式AI能力的發(fā)展，Denodo引領(lǐng)著這一進程。我們非常自豪能夠再次被Gartner魔力象限評為數(shù)據(jù)集成工具領(lǐng)域的領(lǐng)導(dǎo)者，這是我們簡化和加速數(shù)據(jù)集成能力在這個復(fù)雜多變時代的獨特優(yōu)勢的體現(xiàn)，”Denodo高級副總裁兼首席營銷官Ravi Shankar表示?！拔覀兎浅８兄x忠實的客戶，感謝他們對我們數(shù)據(jù)管理方法的信任。能連續(xù)四年被評為Gartner Peer Insights?報告中的‘客戶之選’，對我們來說是莫大的榮譽。這證明了我們的客戶對我們數(shù)據(jù)管理的邏輯方法的強大依賴?！?/p>
在2024年Gartner Peer Insights《客戶之聲：數(shù)據(jù)集成工具》報告中，Denodo的客戶表示：
? “我與Denodo的總體體驗非常積極，尤其是在其能夠無縫連接來自各種數(shù)據(jù)源的數(shù)據(jù)，并快速從數(shù)據(jù)獲取洞察方面。此外，聯(lián)合架構(gòu)為我們的不同團隊之間提供了協(xié)作機會?！? - 數(shù)據(jù)賦能經(jīng)理，綜合行業(yè)
? “Denodo是數(shù)據(jù)集成的出色工具，因為它可以將來自不同來源的數(shù)據(jù)集中到一個地方。我發(fā)現(xiàn)Denodo是一款用戶友好的工具，其直觀的用戶界面和詳盡的文檔大大簡化了數(shù)據(jù)管理并提升了系統(tǒng)整體效率?！? - 產(chǎn)品負(fù)責(zé)人，制造業(yè)
? “通過與我們的關(guān)鍵客戶經(jīng)理的個人聯(lián)系、包括咨詢會和按需培訓(xùn)在內(nèi)的優(yōu)秀支持，以及官方和社區(qū)活動的結(jié)合，使Denodo在其他供應(yīng)商中脫穎而出?！?- 領(lǐng)域負(fù)責(zé)人，電信行業(yè)
圖1：2024年Gartner?數(shù)據(jù)集成工具魔力象限?
免責(zé)條款：Gartner Peer Insights內(nèi)容包括基于個人用戶與平臺上列出的供應(yīng)商的經(jīng)驗所提供的意見，不應(yīng)被解讀為事實聲明，也不代表Gartner或其附屬機構(gòu)的觀點。Gartner不支持在此內(nèi)容中出現(xiàn)的任何供應(yīng)商、產(chǎn)品或服務(wù)，也不對其準(zhǔn)確性或完整性做出任何明示或暗示的保證，包括任何適銷性或適用于特定目的的保證。
隨文摘選Denodo AI核心技術(shù)與應(yīng)用分享直播中，企業(yè)用戶對AI有關(guān)問題與Denodo專家的10問10答：
1、Denodo Assistant如何給數(shù)據(jù)分析師提供智能化推薦?
Denodo專家：Denodo主要滿足降低數(shù)據(jù)使用門檻，數(shù)據(jù)分析師建模這一側(cè)功能，一方面幫助豐富元數(shù)據(jù)、實現(xiàn)自然語言查詢、糾正語法錯誤、提問業(yè)務(wù)問題、數(shù)據(jù)目錄中查找視圖、根據(jù)使用習(xí)慣推薦、數(shù)據(jù)準(zhǔn)備時數(shù)據(jù)處理推薦等，也在持續(xù)覆蓋更多使用場景，包括后臺管理、元數(shù)據(jù)管理等，已納入到產(chǎn)品迭代發(fā)展中?？梢杂肈enodo AI SDK開發(fā)Agency，構(gòu)建更高級、更個性化、更豐富的應(yīng)用。
Denodo Express(試用版)：https://www.denodo.com.cn/zh-hans/denodo-platform/denodo-express
Denodo AI SDK：https://gitcode.com/Denodo/denodo-ai-sdk/overview
2、進行數(shù)據(jù)管理和調(diào)用時，Denodo平臺如何確保數(shù)據(jù)安全性和合規(guī)性，權(quán)限部分如何設(shè)計?
Denodo專家：權(quán)限管控是虛擬跨庫查詢難點之一，Denodo能夠解決的很好，提供行、列、單元格細(xì)顆粒度的權(quán)限管控，安全遮罩，自定義標(biāo)簽設(shè)定安全規(guī)則等能力，支持除了傳統(tǒng)的基于角色的訪問(ABAC，Attribute-based access control)，還可以基于屬性(IP地址、程序接口等)(RBAC，Role-Based Access Control )進行身份驗證和授權(quán)機制。
3、Denodo產(chǎn)品包括大模型打包嗎?
Denodo專家：Denodo定位數(shù)據(jù)管理平臺，不包括LLM，集成三方LLM開放使用。非官方集成的LLM，只要符合open API標(biāo)準(zhǔn)即可兼容，推薦上下文token長度較長的效果更好些。
4、Denodo產(chǎn)品會整合企業(yè)數(shù)據(jù)嗎?是提供DSL查詢語言，通過大模型適配方式進行AI數(shù)據(jù)輸出是嗎?
Denodo專家：Denodo是數(shù)據(jù)虛擬化平臺與元數(shù)據(jù)平臺，保存企業(yè)不同數(shù)據(jù)源的元數(shù)據(jù)，通過了解元數(shù)據(jù)構(gòu)建成本最優(yōu)路徑的數(shù)據(jù)查詢，實現(xiàn)實時、快速的業(yè)務(wù)交付，并不保存企業(yè)的業(yè)務(wù)數(shù)據(jù)。增加LLM能力來降低對用戶的技術(shù)要求，其工作方式為：用戶的問題流經(jīng)Denodo，通過LLM了解元數(shù)據(jù)，Denodo生成查詢重寫，到數(shù)據(jù)源查詢并返回結(jié)果。Denodo的查詢語言VQL是SQL超集，增加了管理方面的語法和指令。
5、Denodo是否支持大量并發(fā)使用，而且能夠秒級返回?
Denodo專家：Denodo默認(rèn)情況是優(yōu)化查詢后用數(shù)據(jù)源資源進行計算和存儲，Denodo本身二次處理的量不大，如果計算量大可以通過集成MPP引擎完成，大多數(shù)情況下的性能短板不在Denodo而在數(shù)據(jù)源側(cè)，因此不用過度擔(dān)心Denodo的并發(fā)和帶寬問題。
6、Denodo 對源數(shù)據(jù)語義是否不需要任何配置?如何理解各個數(shù)據(jù)之間的關(guān)系和對于業(yè)務(wù)術(shù)語的理解?
Denodo專家：僅需要配置數(shù)據(jù)源表的映射，數(shù)據(jù)系統(tǒng)里表的描述、依賴關(guān)系都會帶進來。AI SDK從Denodo取表的名稱、描述、字段、字段描述，允許采集示例數(shù)據(jù)的話，可在指定的條數(shù)范圍內(nèi)采集，有助于AI SDK理解所有業(yè)務(wù)對象間的關(guān)系，通過LLM embedding token方式，存到向量數(shù)據(jù)庫，判斷近似性等實現(xiàn)。如果公司內(nèi)有特別的業(yè)務(wù)術(shù)語，可以通過SDK配置文件，在環(huán)境相關(guān)的prompt配置中，放入同義詞、近義詞等。
7、VQL與AI SDK之間是什么關(guān)系?
Denodo專家：VQL是一種通過JDBC在Denodo平臺上執(zhí)行的腳本語言，其語法與SQL類似，同時也是標(biāo)準(zhǔn)SQL的超集。也就是說標(biāo)準(zhǔn)SQL(包括查改刪)就是VQL的一部分。此外VQL額外增加了Denodo平臺的管理腳本，所以從用戶管理到內(nèi)容管理都可以用VQL腳本來執(zhí)行。對于高級用戶來說，可以用VQL結(jié)合程序來做到Denodo平臺的自動化管理。而對于日常用戶來講，用Web UI也能做到大多數(shù)的功能，無須親自寫VQL。 而AI SDK是Denodo新推出的一組RestAPI，它提供一組接口簡化企業(yè)構(gòu)建自己AI Agent的難度。AI SDK包括了針對Denodo平臺，大語言模型，向量數(shù)據(jù)庫的配置文件，以及內(nèi)置向量數(shù)據(jù)庫和AI編排的組件，把構(gòu)建AI Agent的一些必須步驟包裝起來，開發(fā)者通過這些接口可以直接獲得元數(shù)據(jù)，查詢語義相似性，詢問元數(shù)據(jù)問題，詢問數(shù)據(jù)問題等。VQL和AI SDK是面向不同應(yīng)用場景的接口。
8、Denodo 在解決大模型幻覺方面有哪些優(yōu)勢?在數(shù)據(jù)分析時，對于數(shù)據(jù)準(zhǔn)確性如何保證?
Denodo專家：大模型迭代很快，上下文長度越來越長，結(jié)果越來越精準(zhǔn)，業(yè)界通常基準(zhǔn)為滿足可用標(biāo)準(zhǔn)85%以上，關(guān)鍵在于回答問題時需要給出解釋，比如生成的SQL是什么?便于檢查。如何保證接近85%、90%可用標(biāo)準(zhǔn)?一方面需要精準(zhǔn)元數(shù)據(jù)，Denodo元數(shù)據(jù)平臺可以大大補充和豐富元數(shù)據(jù)，基于LLM實現(xiàn)更精準(zhǔn)答案，另一方面Agency提示詞工程寫得非常細(xì)致。當(dāng)然還有一些成本更高的方式，比如采用針對企業(yè)語境的LLM。
9、Denode回支持natsql查詢語法嗎?
Denodo專家：Denodo引擎本身執(zhí)行的是VQL，這是一種類似PostgreSQL的語法，并額外增加了許多管理的功能。對于自然語言的查詢，我們需要通過結(jié)合大語言模型和AISDK來實現(xiàn)，Denodo豐富的元數(shù)據(jù)資源可以讓大語言模型生成更加準(zhǔn)確的VQL，然后在Denodo執(zhí)行。
10、在哪可以找到Denodo AI SDK源代碼?
Denodo專家：AI SDK的源代碼已在Github上開源：https://gitcode.com/Denodo/denodo-ai-sdk/overview
