數據中臺如何通過DataAPI實現數據共享

本篇內容介紹了“數據中臺如何通過DataAPI實現數據共享”的有關知識，在實際案例的操作過程中，不少人都會遇到這樣的困境，接下來就讓小編帶領大家學習一下如何處理這些情況吧！希望大家仔細閱讀，能夠學有所成！

數棧是云原生—站式數據中臺PaaS，我們在github和gitee上有一個有趣的開源項目：FlinkX，FlinkX是一個基于Flink的批流統一的數據同步工具，既可以采集靜態的數據，也可以采集實時變化的數據，是全域、異構、批流一體的數據同步引擎。大家喜歡的話請給我們點個star！star！star！

github開源項目：https://github.com/DTStack/flinkx

gitee開源項目：https://gitee.com/dtstack_dev_0/flinkx

如果把企業數字化轉型比作一輛自行車，那么技術與數據便是這輛車的兩個輪子，騎在車上的則是企業戰略、文化以及各種資源，它們決定了轉型將走向哪個方向。不管數字化轉型之路多么正確、戰術如何高明，其最終結果還是要通過這兩個輪子落地。

DT時代，“大數據”不是強調量大，是指數據來源多、維度多。現在很多系統的數據沒法給第三方用，只有打破這種壁壘，才會產生新的價值。在數智化轉型過程中，實現數據開放共享，是企業在DT時代實現彎道超車的前提。

一、什么是數據共享服務

數據共享服務可簡單概括為將數據中臺的數據共享給其他系統，或將某組織的數據共享給其他組織，提供數據的方式也十分多樣，如數據庫讀取、文件傳輸、API接口服務等。

如何通過數據API，對外提供數據服務，進行數據共享呢？

數據API，通過RestfulAPI的形式對外提供數據服務，適用于數據庫不直接對外開放，通過接口提供高并發快返回的數據服務場景，如企業內部將數據中臺加工的結果數據，通過數據API的方式，提供給上層數據應用、數據門戶，可視化大屏等；證券公司將股票、債券等行情數據通過數據API的方式提供給外部客戶；新媒體企業將資訊通過API的方式提供給外部客戶等，主要解決數據對外快速共享的場景。

二、怎樣生成數據服務

按照傳統方式，生成API接口，往往需要后端開發人員通過Java或Python等語言進行編寫。從開始生成到對外發布，中間再做一些鑒權、限流等，整個流程較長，且一個接口開發完成后，需要測試人員再進行測試驗證，整個過程下來，投入成本較高。

以下是傳統方式生成數據API的流程：

近幾年，在數據中臺的浪潮中，大數據平臺產品供應也越來越俱全。國內部分優秀的大數據產品供應商，也有標準化的數據共享服務產品，其將數據服務能力進行封裝，大部分功能在平臺產品內部完成，面向用戶的功能只是連接數據源、編寫查詢邏輯，大幅度縮短API流程，并降低開發成本。

利用標準化產品，一般開發流程如下：

在API生成中，經過以下步驟：

• API生成：平臺會封裝API創建能力，用戶只需在WEB界面上選庫選表，設定請求參數、返回參數即可；對于復雜的API查詢邏輯，有的平臺也會提供自定義SQL寫查詢邏輯的模式，滿足用戶不同場景。

• API發布：平臺會集成API網關，無需用戶自己寫網關邏輯，API發布后，會直接發布在API網關上，形成API市場，對外提供數據服務。

• API申請：有需要的用戶可直接在API申請已發布的API，管理員進行審批，審批通過后，申請者可拿到API的調用地址和請求示例。

• API授權：對API申請者的申請進行審批；

• API管理：對企業來講，一款標準化的產品提供了一個企業級數據服務統一管理平臺與企業級的API市場。

在API調用流程中，API網關可以進行鑒權、限流、數據解密等工作。

（一）較于傳統化的生成方式，標準化產品能帶來什么？

1. 開發效率的提升：將數據API開發流程縮短，一個API生成只需3分鐘

2. 人力成本的降低：傳統方式需要后端開發寫接口，現在只需更熟悉數據的開發，通過寫SQL，就可完成數據API的開發。

3. API接口服務更多的場景：除了用戶原有需求外，標準化的產品可帶來更多附加功能，如API、用戶限流，API調用監控等。

4. 企業級API市場：實現企業API統一管理，統一的API市場開放數據服務。

（二）數棧DTinsight 的DataAPI產品正是面向以上場景，提供數據API的共享服務。

DataAPI，通過雙模式可視化配置生成與注冊API，快速構建Oneservice數據服務，形成企業級的API市場和API服務管理平臺，提高數據開放與共享效率。

三、DataAPI可以做什么

DataAPI除以上介紹可解決的場景外，還在第三方數據服務、服務監控、數據服務安全深耕較多，提供給客戶一個優秀的數據服務產品。

• 雙模式生成API

通過向導模式、自定義SQL模式雙模式生成API服務，3分鐘可視化完成API創建。

• 第三方服務注冊

除在平臺上生成API服務，支持將原有的API服務注冊至DataAPI，進行統一管理、發布至API市場，企業所有的API服務統一管理。

• API調用監控

平臺從API管理者、API申請者視角分別提供API調用次數、調用日志、錯誤日志的監控。

• API使用權限控制

可控制單個API的用戶使用權限，調用次數是多少，調用周期是多長。

四、數據服務安全

數據對外服務過程中，數據安全是非常重要的一部分，DataAPI保障數據安全，主要有三方面：

• API調用

API調用中提供2種加密方式，可對用戶信息、API信息、數據信息進行加密，適用于不同安全級別的場景。

• API限流

針對API單秒調用次數、用戶對API的調用次數可進行限流，保障數據服務的安全穩定性。

• 黑白名單IP控制

通過設置黑白名單，從IP級別控制IP的訪問。

“數據中臺如何通過DataAPI實現數據共享”的內容就介紹到這里了，感謝大家的閱讀。如果想了解更多行業相關的知識可以關注億速云網站，小編將為大家輸出更多高質量的實用文章！