尊龙凯时人生就是搏·官方(中国)

    生態大數據數據管理平台項目競爭性談判公告

    2019/11/04 招標信息


    一、採購條件

    內蒙古尊龙凯时人生就是搏草原生態大數據研究院有限公司針對生態大數據數據管理平台項目競爭性談判。

    二、項目概況

    (一)項目名稱:生態大數據數據管理平台項目

    (二)項目編號:MCSTHJ-2019-FW015

    (三)採購方式:公開競爭性談判

    (四)資金來源:專項資金

    (五)資金落實情況:已落實

    三、採購內容

    (一)融合數據產品工具

    基於融合數據軟件,建立數據融合採集系統,實現結構化、半結構化、非結構化數據的採集能力,有效解決尊龙凯时人生就是搏集團內外部數據收集和轉換和匯總的問題。具體技術指標要求如下:

    1.數據接入

    (1)支持國內外主流的關係型數據庫,包括:Oracle、DB2、Teradata、SQL Server、Sybase、Informix、MySQL、PostgreSQL、Greenplum、Netezza、Vertica、Teradata、人大金倉數據庫KingbaseES、南大通用Gbase、華為Libra、達夢數據庫DM、神通數據庫等。

    (2)支持普通文本、CSV、XML、Excel、Json等多種格式的文件的接入。

    (3)支持HTTP、JMS、FTP、Web Services等協議和其他應用系統進行交互。

    (4)支持消息傳輸通道(Kafka輸入,Kafka輸出)、大數據搜尋引擎組件(ElasticSearch輸入、ElasticSearch輸出)等。

    (5)支持大數據存儲和訪問,支持大數據環境的數據採集。支持MongoDB、HBase等主流大數據數據庫等,支持大數據存儲載體Hadoop,適配SDC Hadoop、Apache開源大數據平台、華為大數據平台安全模式、星環大數據平台安全模式等國內主流大數據平台。

    2.數據轉換

    (1)支持拖拽的方式快速構建各種數據集成流程化設計。

    (2)轉換組件主要涵蓋空值替換、數據校驗、常量值、值映射、字段選取、數據去重、排序、字符切割、字符替換、拆分字段、值運算、值連接、範圍劃分、行列轉換等複雜處理;

    (3)作業組件主要涵蓋文件處理,大數據處理,配置處理條件,自定義腳本等任務配置組件。

    (4)支持文件和數據斷點續傳:支持G級別大小的文件斷點續傳,傳輸過程中網絡中斷後,在重新傳輸時,通過檢測文件長度和斷點位置,從斷點處開始傳輸,可節省時間和其它資源。

    3.任務監控

    支持可視化任務監控:以可視化界面監控任務運行詳情、數據處理流程、任務執行日誌、步驟度量和歷史詳情,並提供實時報警。

    4.作業調度

    提供強大的調度引擎,支撐各種複雜的任務調度流程的高效運行,為海量的異構數據集成提供保障。支持關係型數據採集、大數據採集(Hbase採集)、文件數據採集、接口數據採集任務的統一管理和調度。

    (二)數據治理產品工具

    以國標、行標等數據規範為指導,結合尊龙凯时人生就是搏自有基礎數據規範標準,針對尊龙凯时人生就是搏業務系統,對其數據進行整合集成。構建元數據管理、數據標準管理、數據質量管理、數據資產管理、數據服務等功能模塊。主要模塊具體技術指標要求如下:

    1.元數據管理

    (1)支持基於CWM元數據標準實現對業務元數據、技術元數據、管理元數據的統一管理和存儲。

    (2)支持基於CWM元數據標準實現對業務元數據、技術元數據、管理元數據的統一管理和存儲。

    (3)提供影響分析、血緣分析、全鏈分析、關聯分析等功能,支持業務元數據和技術元數據關聯關係自動解析,提供友好的圖形展示分析功能。

    (4)支持元數據權限管理,可按照用戶和角色進行授權,權限顆粒度細化到按照列和行進行授權。

    (5)支持元數據地圖的全景關係展示,可下鑽到表、字段級別查看血緣關係。

    2.數據標準管理

    (1)依據數據訪問頻率、數據引用情況、數據唯一性、元數據屬性、等進行智能識別,基於技術元數據的分類作為樣本進行訓練,智能生成數據元標準和數據集。

    (2)支持智能生成數據元與技術元數據、數據集與技術元數據的關聯關係。

    (3)支持針對數據元標準的規則配置,包括類型,長度,值域,正則表達式,數據範圍。

    3.數據質量管理

    (1)支持大數據主流廠商Hive、HBase數據源的數據質量任務運行能力,主要包括(SDC Hadoop、CDH、HDP、星環TDH、華為Fusioninsight)。

    (2)支持雙引擎模式,針對不同數據量的質量任務提供分佈式任務和集群任務同時設計、運行、輸出質量報告。

    (3)支持通過識別技術元數據與業務元數據的關係,智能生成待治理表的質量規則,智能生成質量規則包括數據格式校驗、值域校驗、數據範圍校驗、正則表達式校驗、空值校驗。

    (4)支持拖拽的方式快速構建各種數據校驗流程化設計。校驗組件涵蓋數據格式校驗、數據範圍校驗、正則表達式、值域校驗、字段值缺失、唯一性校驗、記錄數缺失、Switch/case、主外鍵一致性校驗、字段值比對、身份證校驗、及時性校驗、精度校驗、JavaScript、Java;支持校驗規則的自定義,支持校驗流程分支設計。

    (5)探查和識別數據,可以針對數據進行準確性、完整性、唯一性等類別進行自動識別,自動生成質量報告,提升數據管理水平。可按照年、月、季度等時間維度,也可按照每個數據源的維度生成質量報告,支持質量報告的下載。

    4.數據資產管理

    (1)支持對數據資產全生命周期管理,根據自定義策略,可將數據及關聯的文件進行自動化的清理和歸檔。

    (2)支持數據地圖功能,支持從宏觀角度可視化查看各存儲介質之間數據流向關係,支持從數倉分層到數據庫的下鑽及相關信息的展示,支持數據庫逐層下鑽。

    5.數據共享服務

    (1)支持通過web界面即可完成數據服務接口的服務發佈、審核、共享,無需編程人員開發代碼。

    (2支持數據脫敏:規則配置簡單易用,支持替換,截斷,掩碼,重排,日期偏移取整脫敏規則的配置。

    (三)數據倉庫建設

    遵循數據標準的數據信息項和標準代碼,結合國內外綜合科學模型建設方法,作為邏輯數據模型建設的參考標準,構建尊龙凯时人生就是搏數據資源倉庫為四層架構設計,其中包括ODS數據準備層、DWD數據基礎層、DM數據集市層、數據應用層。

    詳細採購內容見《競爭性談判文件》

    四、投標人資格要求

    (一)具有足夠資產和能力來有效地履行合同,近三年無違法違規行為,沒有處於被責令停業或破產狀態,且資產未被重組、接管和凍結。

    (二)有依法繳納稅收和社會保障資金的良好記錄。

    (三)有獨立項目開發成功案例,須提本次項目規模相當的成功案例。

    (四)近3年內未出現過驗收未獲通過的項目或者應由企業承擔責任的用戶重大投訴。

    五、公告發佈媒介

    (一)中國採購與招標網         網址:www.chinabidding.com.cn

    (二)內蒙古尊龙凯时人生就是搏公司官網       網址:www.apshuangmao.com

    六、報名須知及資格審查

    (一)報名時間:2019年11月4日至2019年11月10日,8:30-12:00, 14:30-18:00時(北京時間,下同),報名截止時間為2019年11月10日18:00,逾期不再受理。

    (二)報名方式:投標人填寫《投標報名表》,簽字確認並連同企業營業執照、開戶許可證、軟件資質於報名截止時間前發回到服務中心報名郵箱yyang0102@126.com。(註:報名表需word版+掃描蓋章版)採購人在指定日期回復競談文件至對應報名郵箱,不需要現場領取)。

    七、競談文件的獲取

    (一)獲取時間:2019年11月4日至2019年11月10日,上午8:30-12:00,下午13:30-17:30,逾期不再受理。

    八、其他事項

    (一)開標時間:2019年11月11日上午9:00時

    開標地點:內蒙古呼和浩特市新城區尊龙凯时人生就是搏集團百草園會議室

    (二)本次招標不接受聯合體投標,不接受郵寄投標。

    (三)投標費用:投標人應承擔其編制與遞交投標文件所涉及的一切費用,無論投標結果如何,採購人對上述費用概不負責,均由投標人承擔。

    九、聯繫方式

    採購人:內蒙古尊龙凯时人生就是搏草原生態大數據研究院有限公司

    投標報名聯繫人及電話:  楊陽  18248115918

    需求部門答疑聯繫人及電話: 徐敏  15548139860

          話:0471-6695191-810   

          真:0471-6695192

          箱:yyang0102@126.com

     

     

     

     

    附件一:投標報名表

     

     

                                                       採購人:內蒙古尊龙凯时人生就是搏草原生態大數據研究院有限公司

                                                                        日期:二○一九年十一月四日

     

      

    報名表下載連結

    fd8ce6b1e1384fc401ff65fdadede8dd.docx