400-8010-352

數據工坊 TDF

數據工坊(Tencent Data Factory)是源于騰訊云數智大數據套件的輕量云上大數據產品,為您提供基于SQL的大數據計算框架;適合于需要動態靈活獲取大數據計算能力進行批量計算、日志處理或數據倉庫應用的場景。
產品概述
優勢 騰訊云數據工坊TDF 自行部署開源組件
無需運維

無需對節點進行管理,無需考慮組件升級或補丁安裝,注冊開通即可使用

安裝實施過程復雜,組件連接調試工作繁雜

成本更低

免去高昂硬件成本,按需開通,按使用時長計費

需承擔硬件采購部署成本以及折舊費用,無法做到按需使用

操作直觀

自帶圖形化工作流編輯器,拖拽式構建工作流,無需任何代碼開發

使用第三方開源任務和工作流管理器,需手動安裝維護

數據同步

工作流支持數據同步任務,直接對接已有數據源,完成數據入庫工作

使用第三方開源工具,需手動安裝維護

彈性擴容

可根據實際計算耗費增加或減少計算引擎,彈性擴縮容,靈活應對業務變化

需根據業務高峰用量預留資源,容易造成資源閑置浪費

產品功能
  • 全托管服務
  • 圖形化編輯
  • 多種數據導入導出
  • 其他工具整合
  • 云化服務注冊即用,避免復雜部署安裝過程;您可以關注于計算和數據分析本身,而無需管理節點、集群或維護軟件組件。我們提供任務和工作流運行狀態全景視圖,通過自定義告警,幫助您對異常和運行結果了然于胸。通過新增計算引擎功能,您還可以在數分鐘內獲得所需的額外計算能力,輕松響應動態計算需求。系統支持多種用戶角色和權限設置,對數據以及任務提供細粒度權限管控,保障您的業務安全。依托騰訊云多租戶隔離實踐,不同用戶之間數據以及計算資源嚴格相互獨立。

  • 您可使用熟悉的SQL對數據進行處理,無需考慮復雜代碼編寫過程。并可結合實際應用要求提供工程—工作流—任務層次化設置,通過拖拽編輯任務和工作流。TDF支持單次或周期性調度,無論您是需要立刻使用,還是按照一定頻次計算,TDF均可滿足靈活業務需求。

  • TDF內置支持騰訊云數據庫CDB、對象存儲服務COS等數據庫和存儲組件,無縫導入導出。您無需考慮復雜的數據遷移和對接過程,直接在編輯界面增加數據導入節點,并根據預先配置模板填寫數據庫等賬號信息,即可快速完成數據導入或導出工作。

  • TDF內置數據血緣工具,可幫助您管理TDF表項,分析數據關聯,并定義數據規范。
    內置的數據交互功能,可為您提供便捷的數據交互查詢服務。
    同時我們還可提供騰訊云BI工具,您可以將計算結果直接對接可視化BI,交互式直觀報表即刻可得,輕松完成數據接入—數據處理—數據展示的全流程服務。

產品架構
應用場景
  • Web應用日志分析
  • 游戲用戶數據分析
  • PB級數據倉庫應用
  • 無論是PC端還是移動端網頁瀏覽,都會產生大量的日志信息;這些日志可以為界面交互設計改進和業務邏輯優化提供重要的信息。使用TDF可以為大規模日志數據處理提供強大靈活的引擎,并做到按需開通,計算完成后,即刻釋放計算資源,滿足海量日志計算對靈活性的要求。

    • 1數據接入:將最終用戶訪問記錄從CDN節點以及Web應用服務器以文件形式存放到COS節點;
    • 2數據處理:將COS節點上的日志文件導入TDF中,并進行查詢分析;
    • 3數據展示:TDF處理結果可周期性存放至CDB,并借助BI組件進行可視化分析。
  • 從千萬級用戶數據中往往可以提取出寶貴信息以指導業務決策,包括游戲數值設定、轉化率優化方案等等。TDF可以為游戲開發商提供HIVE等成熟技術框架用于用戶數據分析服務,實現海量用戶數據分析。

    • 1數據接入:最終用戶在訪問業務服務器過程中,產生大量的行為數據和自身屬性數據,這些數據由各業務服務器產生并收集;
    • 2數據處理:原始數據可存放在CDB數據庫,隨后周期性提交給TDF,進行數據分析;
    • 3數據展示:TDF處理結果導出至CDB,并由BI組件進行可視化分析;業務決策者可由此分析判斷進行決策。
  • 傳統OLTP數據庫在超大規模數據分析上往往捉襟見肘,TDF可以為用戶提供高達P級容量的強大數據倉庫查詢和分析能力,幫助用戶以極低成本實現海量數據OLAP處理過程。

    • 1數據接入:CDB數據庫可直接運行OLTP業務,產生的數據將作為原始數據待分析;
    • 2數據處理:數據庫管理員可以直接通過TDF管理控制臺提交OLAP數據倉庫應用作業,作業將被TDF調度并計算;
    • 3數據展示:TDF計算結果可被導出至CDB存放,并由BI組件進行可視化分析;業務決策者可由此分析判斷進行決策。
超預云服務器

為企業提供:騰訊云服務器/視頻/游戲/微信開發/軟件/網站/APP…云解決方案

  • QQ群咨詢:212197992 咨詢電話:4008010352
  • 技術支持:021-60169696 13248283855
  • 產品咨詢:021-60169693 18521370613
  • 華北:
  • 華東:
  • 華南:

咨詢電話:400-8010-352

超預云服務器微信
400-8010-352
西甲历史射手榜