1、招標條件
******有限責任公司數(shù)據(jù)中臺咨詢服務及數(shù)據(jù)工程管理工具采購項目(以下簡稱本項目),招標人為******有限責任公司,資金來源為企業(yè)自籌。本項目已具備招標條件,現(xiàn)對本項目進行公開招標。
2、項目概況
2.1項目編號:JT-XM-GKYQZB-FW-202507-0056
2.2項目名稱:******有限責任公司數(shù)據(jù)中臺咨詢服務及數(shù)據(jù)工程管理工具采購項目
2.3資金落實情況:已落實
2.4項目概況及標段劃分:本次招標共劃分為1個標段,即A1標段。
************集團一站式數(shù)據(jù)全生命周期******集團數(shù)據(jù)資產(chǎn)完成數(shù)據(jù)快速集成、數(shù)據(jù)統(tǒng)一管理、數(shù)據(jù)清洗加工、數(shù)據(jù)分析計算、統(tǒng)一算力分配、任務統(tǒng)一調(diào)配等業(yè)務操作。
************集團數(shù)據(jù)治理效率,最終用數(shù)據(jù)賦能業(yè)務創(chuàng)新形成核心壁壘,解決數(shù)據(jù)******集團數(shù)據(jù)集中管理、高效利用和價值最大化。
2.5招標內(nèi)容:本次采購咨詢服務和數(shù)據(jù)工程管理工具兩部分。要求投標人******集團的實際業(yè)務、數(shù)據(jù)和預算等實際情況進行綜合評估,并指導數(shù)據(jù)中臺的建設和實施,具體標準及要求詳見附件。
2.6最高限價:174萬元人民幣。
2.7服務期限:簽訂合同后3個月完成項目并交付(具體時間以簽訂合同為準)。
2.8質(zhì)量要求:符合國家、地方相關(guān)行業(yè)標準及招標人項目管理的要求。
2.9服務地點:黑龍江省哈爾濱市松北區(qū)創(chuàng)新三路899號陽光國際大廈b座。
3、對投標人資格要求
3.1本次招標要求投標人是中華人民共和國境內(nèi)注冊的獨立法人,具備有效的營業(yè)執(zhí)照,并在人員、設備、資金、技術(shù)等方面具有履行合同所必須的能力。
3.2信譽要求:
①近三年(2022年7月1日~遞交投標文件截止日)投標人或其法定代表人有行賄犯罪記錄的,不得參加本項目投標。無行賄犯罪行為的認定以投標人提供的在中國裁判文書(https://wenshu.court.gov.cn/)網(wǎng)站上無行賄犯罪查詢記錄的網(wǎng)頁截圖為準(查詢?nèi)掌趹?/span>招標公告發(fā)布后至投標文件遞交截止日期之間)。
②投標人在“信用中國”網(wǎng)站(******)中,未被列入失信被執(zhí)行人名單;
③投標人在國家企業(yè)信用信息公示系統(tǒng)(******/)中未被列入嚴重違法失信企業(yè)名單。
3.3投標人不得存在下列情形之一:
(1)與招標人存在利害關(guān)系可能影響采購公正性的法人、非法人組織、自然人。
(2)與本項目其他投標人的單位負責人為同一人。
(3)與本項目其他投標人存在直接控股關(guān)系。
(4)與本項目其他投標人存在管理關(guān)系。
(5)與本項目其他投標人高級管理人員之間存在交叉任職。
(6)近三年(2022年7月1日~遞交響應文件截止日)內(nèi)在經(jīng)營活動中存在以下嚴重不良情形:
①被本項目所在地省級以上行業(yè)主管部門依法暫停、取消投標或禁止參加采購活動的。
②處于被責令停產(chǎn)停業(yè)、暫扣或者吊銷執(zhí)照、暫扣或者吊銷許可證、吊銷資質(zhì)證書狀態(tài)。
③進入清算程序,或被宣告破產(chǎn),或其他喪失履約能力情形的。
******有限公司供應商管理辦法》管理要求,被禁止參與采購活動且處于有效期內(nèi)的。
⑤違反法律法規(guī)或招標采購文件規(guī)定的其他情形。
3.4本次招標項目不接受聯(lián)合體參加。
4、招標文件的獲取
4.1招標文件獲取時間:2025年7月3日0時00分至2025年7月8日0時00分。
4.2招標文件獲取方式:登錄本項目指定的“黑龍江政企招采數(shù)字服務平臺”(以下簡稱“電子交易平臺”)(******/)進行操作;投標人僅限于為本單位繳納CA數(shù)******集團及權(quán)屬企業(yè)實施的采購活動。
凡有意參與本項目的投標人,須在本平臺完成投標人注冊,并辦理CA數(shù)字證書后方可下載招標文件。數(shù)字證書可選擇線上或線下辦理方式,投標人應合理考慮郵寄時間(1-2個工作日),CA辦理咨詢電話:******(李女士);
4.3本項目采用網(wǎng)上申請方式,投標人登錄系統(tǒng)后,按要求提交資料上傳至電子交易平臺。
4.4 交納招標文件工本費
(1)招標文件售價500元人民幣(售后不退)。
(2)投標人僅限于為本單位支付平臺使用費及招標文件費用。若存在任一投標人為多家投標單位代繳上述費用的行為,根據(jù)《中華人民共和國招標投標法實施條例》第四十條“(二)************有限公司供應商管理辦法》中關(guān)于供應******集團及權(quán)屬企業(yè)實施的采購活動。
5、投標保證金:本項目無需繳納。
6、投標文件的遞交
投標文件遞交的截止時間(投標截止時間,下同)為2025年7月14日9時00分;投標人應使用電子交易平臺提供的“投標文件制作工具”編制電子投標文件,并按招標文件要求進行加密、遞交。投標人應在投標文件規(guī)定的開標截止時間前,通過互聯(lián)網(wǎng)使用CA數(shù)字證書登錄電子交易平臺,將加密的投標文件上傳,并保存上傳成功后系統(tǒng)自動生成的電子簽收憑證,遞交時間即為電子簽收憑證時間。投標人應充分考慮上傳文件時的不可預見因素,未在遞交截止時間前完成上傳的,視為逾期送達,將不予受理。
7、投標文件開標時間及地點
7.1投標文件開標時間:投標文件遞交截止時間。
7.2投標文件開標地點:登錄“黑龍江政企招采數(shù)字服務平臺”,進入“開標大廳”選擇所投標段進行簽到,并在投標文件開標時間實時在線關(guān)注招標人的文件開標情況。
8、其他說明
8.1本次招標評標采用綜合評估法,對投標人的資格審查采用資格后審形式。
8.2本項目采用全流程電子招采,通過黑龍江政企招采數(shù)字服務平臺(******/)開展招投標活動,注冊及操作等相關(guān)內(nèi)容,請先查閱門戶網(wǎng)站→幫助中心→操作指南內(nèi)的操作手冊,參與投標過程中遇到的平臺問題可撥打技術(shù)支持電話。
9、發(fā)布公告的媒介
本項目招標公告在黑龍江政企招采數(shù)字服務平臺(https://zc.hljsjtjt.com/)及中國招標投標公共服務平臺(******)、黑龍江省公共資源交易網(wǎng)(******)、黑龍江陽光采購服務平臺(******/)上同時發(fā)布,其它網(wǎng)址轉(zhuǎn)載無效。
10、受理異議聯(lián)系方式
采 購 人:******有限責任公司
地 ???址:******街道創(chuàng)新三路899號陽光國際大廈B座
聯(lián) 系 人:黃先生
電 ???話:******
?
******有限公司
地 ???址:黑龍江省哈爾濱市松北區(qū)松北大道245號
聯(lián) 系 人:王女士
電 ???話:0451-******
電子郵箱:******
11、監(jiān)督部門聯(lián)系方式
監(jiān)督機構(gòu)名稱******有限責任公司監(jiān)督檢查室
聯(lián)?系??電?話:0451-******
附件:
一、咨詢服務內(nèi)容:
(1)數(shù)據(jù)戰(zhàn)略
******集團對數(shù)據(jù)中臺的需求,明確數(shù)據(jù)中臺建設的目標和方向。
②制定實現(xiàn)路徑根據(jù)數(shù)據(jù)戰(zhàn)略需求評估結(jié)果,制定數(shù)據(jù)中臺建設的實現(xiàn)路徑,明確各階段的工作任務、目標、責任。
(2)數(shù)據(jù)治理
①建立數(shù)據(jù)治理組織,明確各組織的職責和權(quán)限。根據(jù)數(shù)據(jù)治理的需要,明確數(shù)據(jù)所有人、管理人等相關(guān)角色,以及數(shù)據(jù)的歸口的具體管理人員,并進行確認。
②指導數(shù)據(jù)治理實施工作,明確治理的指標、方法和流程,對數(shù)據(jù)治理工作的成效進行評估,并進行評審。
(3)數(shù)據(jù)架構(gòu)
******集團的業(yè)務需求和數(shù)據(jù)現(xiàn)狀,設計數(shù)據(jù)中臺的技術(shù)架構(gòu)和存儲架構(gòu),包括數(shù)據(jù)采集層、數(shù)據(jù)存儲層、數(shù)據(jù)處理層、數(shù)據(jù)服務層和數(shù)據(jù)應用層等,確保數(shù)據(jù)中臺的架構(gòu)具有先進性、可擴展性和安全性。
②制定數(shù)據(jù)模型規(guī)范,進行數(shù)據(jù)模型開發(fā)制定數(shù)據(jù)模型規(guī)范,明確數(shù)據(jù)模型的設計原則和規(guī)范,進行數(shù)據(jù)模型開發(fā),確保數(shù)據(jù)模型的規(guī)范性和一致性。
(4)數(shù)據(jù)應用
******集團的業(yè)務流程進行全面梳理,挖掘數(shù)據(jù)應用場景,并進行優(yōu)先級排序和評審。重點梳理職能類、物流貿(mào)易類數(shù)據(jù)應用場景,為后期其他業(yè)務域的拓展規(guī)劃奠定基礎。
******集團數(shù)據(jù)應用產(chǎn)品服務規(guī)劃,并進行優(yōu)先級排序和評審。
(5)數(shù)據(jù)安全
******集團的數(shù)據(jù)安全現(xiàn)狀進行全面調(diào)研和分析,識別數(shù)據(jù)安全風險,為數(shù)據(jù)安全管理提供依據(jù)。
②根據(jù)數(shù)據(jù)安全風險評估報告,建立統(tǒng)一的數(shù)據(jù)安全標準和管理流程,包括數(shù)據(jù)分類分級、數(shù)據(jù)訪問控制、數(shù)據(jù)加密脫敏、數(shù)據(jù)備份與恢復等,并進行評審。
(6)數(shù)據(jù)質(zhì)量
******集團的業(yè)務需求和數(shù)據(jù)現(xiàn)狀,定義數(shù)據(jù)質(zhì)量管理目標,明確數(shù)據(jù)質(zhì)量管理范圍,并建立數(shù)據(jù)質(zhì)量規(guī)則庫。
②設計數(shù)據(jù)質(zhì)量提升策略,根據(jù)數(shù)據(jù)質(zhì)量評估的結(jié)果,設計數(shù)據(jù)質(zhì)量提升策略,提高數(shù)據(jù)質(zhì)量。
(7)數(shù)據(jù)標準
******集團現(xiàn)有的數(shù)據(jù)標準現(xiàn)狀進行全面梳理和分析,找出數(shù)據(jù)標準中存在的問題和不足,撰寫數(shù)據(jù)標準現(xiàn)狀梳理報告。
②根據(jù)數(shù)據(jù)標準梳理報告,撰寫數(shù)據(jù)標準規(guī)范文檔,并進行評審。
(8)數(shù)據(jù)生命周期管理
①撰寫數(shù)據(jù)生命周期流程梳理報告
******集團的數(shù)據(jù)生命周期流程現(xiàn)狀進行全面梳理和分析,找出數(shù)據(jù)生命周期管理中存在的問題和不足,撰寫數(shù)據(jù)生命周期流程梳理報告,并進行評審。
②撰寫數(shù)據(jù)生命周期管理策略文檔
根據(jù)數(shù)據(jù)生命周期流程梳理報告,撰寫數(shù)據(jù)生命周期管理策略文檔,明確數(shù)據(jù)的創(chuàng)建、存儲、使用、歸檔和銷毀等環(huán)節(jié)的管理要求,并進行評審。
(9)數(shù)據(jù)資產(chǎn)管理
①設計數(shù)據(jù)資產(chǎn)目錄,對數(shù)據(jù)資產(chǎn)進行分類、編碼和描述,實現(xiàn)數(shù)據(jù)資產(chǎn)的可視化管理。
②定義數(shù)據(jù)資產(chǎn)所有者,明確其職責和權(quán)限,設計數(shù)據(jù)資產(chǎn)管理制度,包括數(shù)據(jù)資產(chǎn)的登記、使用、共享等方面。
(10)其他
******集團數(shù)據(jù)模型定義、數(shù)據(jù)編碼與命名規(guī)范、數(shù)據(jù)安全規(guī)范等標準,數(shù)據(jù)生命周期管理、數(shù)據(jù)共享與開放交換等管理制度。
二、數(shù)據(jù)工程管理工具內(nèi)容
具體包括以下工具:數(shù)據(jù)治理工具、任務調(diào)度工具、運維監(jiān)控工具、共享交換工具以及數(shù)據(jù)融合展示工具。
①?數(shù)據(jù)治理工具
******集團數(shù)據(jù)接入、處理效率,本工具需滿足是基于精通交通行業(yè)業(yè)務,打通數(shù)據(jù)治理各個環(huán)節(jié),智能高效的完成對數(shù)據(jù)的集成、積累、沉淀和共享,快速建立企業(yè)數(shù)據(jù)資產(chǎn)地圖,發(fā)揮數(shù)據(jù)效能。
產(chǎn)品功能需包括但不限于:元數(shù)據(jù)管理、數(shù)據(jù)標準、數(shù)據(jù)質(zhì)量、數(shù)據(jù)分類分級、數(shù)據(jù)服務、數(shù)據(jù)集成、數(shù)倉建模、數(shù)據(jù)開發(fā)、數(shù)據(jù)探查、數(shù)據(jù)訂閱等內(nèi)容。
產(chǎn)品需滿足以下重點業(yè)務要求:
??滿足Kafka,HTTP等多種接口的集成能力,具備日志記錄能力;
??滿足接入包括Oracle、MySQL、PostgreSQL、達夢數(shù)據(jù)庫、人大金倉數(shù)據(jù)庫、翰高數(shù)據(jù)庫、Doris、StarRocks、Hive、Impala、TiDB等多種異構(gòu)數(shù)據(jù)源信息;
??滿足對Oracle、MySQL、PostgreSQL、達夢數(shù)據(jù)庫、人大金倉數(shù)據(jù)庫、翰高數(shù)據(jù)庫、Doris、StarRocks、Hive、HDFS、Kudu等數(shù)據(jù)源創(chuàng)建元數(shù)據(jù)采集任務;
??滿足實施人員針對數(shù)據(jù)表結(jié)構(gòu)進行同步配置,實現(xiàn)異構(gòu)源數(shù)據(jù)庫與目標數(shù)據(jù)庫一鍵式數(shù)據(jù)同步,滿足單表同步和多表批量同步,支持的數(shù)據(jù)源類型包括Oracle、MySQL、Doris、StarRocks、Hive等;
??數(shù)據(jù)血緣信息精確到字段級別,支持根據(jù)SQL自動生成,動態(tài)解析對象血緣關(guān)系,同時支持實施人員手動拖拽編輯數(shù)據(jù)血緣關(guān)系,實現(xiàn)快速追溯上下游表關(guān)聯(lián)便于影響分析;
??要求提供可視化數(shù)據(jù)地圖,基于元數(shù)據(jù)應用,以數(shù)據(jù)搜索為核心,提升找到數(shù)據(jù)的效率,讀懂數(shù)據(jù),理清數(shù)據(jù)脈絡;
??要求通過向?qū)椒绞絼?chuàng)建發(fā)布管理API接口,完成API參數(shù)配置、在線測試,對API進行分組,可查看API發(fā)布狀態(tài)、使用應用數(shù)、調(diào)用總次數(shù)、以及API接口的情況測試;
??支持創(chuàng)建應用,可配置接入的API、日調(diào)用次數(shù)限制,系統(tǒng)自動生成APPKEY和秘鑰信息,支持接口調(diào)用限流功能;
??******集團數(shù)據(jù)資源目錄,且支持目錄編輯;
??工具需根據(jù)數(shù)據(jù)治理團隊配置的方案規(guī)則,支持輸出數(shù)據(jù)質(zhì)量報告,供數(shù)據(jù)治理團隊監(jiān)控數(shù)據(jù)質(zhì)量;
??滿足對不同數(shù)據(jù)源中的內(nèi)容按照類別和安全等級進行數(shù)據(jù)分類分級管理,數(shù)據(jù)分類包括基礎數(shù)據(jù)、統(tǒng)計數(shù)據(jù)和動態(tài)數(shù)據(jù),數(shù)據(jù)分級需包括公開數(shù)據(jù)、秘密數(shù)據(jù)、機密數(shù)據(jù)和絕密數(shù)據(jù)等。
??滿足數(shù)據(jù)治理團隊實現(xiàn)快速數(shù)據(jù)建模,展示數(shù)倉內(nèi)已存在的數(shù)據(jù)表所有數(shù)據(jù),支持對數(shù)據(jù)表進行增刪改查操作,支持自定義創(chuàng)建字段,或引用標準數(shù)據(jù)元創(chuàng)建字段,配置數(shù)倉內(nèi)數(shù)據(jù)表結(jié)構(gòu)的標準設計;
??滿足數(shù)據(jù)治理團隊實現(xiàn)數(shù)據(jù)表探查,可查看Oracle、MySQL、PostgreSQL、達夢數(shù)據(jù)庫、人大金倉數(shù)據(jù)庫、翰高數(shù)據(jù)庫、Doris、StarRocks、Hive等多種數(shù)據(jù)源內(nèi)的數(shù)據(jù)表數(shù)據(jù)情況,支持探查結(jié)果的下載。
??也支持可通過sql語句對Oracle、MySQL、PostgreSQL、達夢數(shù)據(jù)庫、人大金倉數(shù)據(jù)庫、翰高數(shù)據(jù)庫、Doris、StarRocks、Hive等多種數(shù)據(jù)源內(nèi)的數(shù)據(jù)表進行數(shù)據(jù)的自由探查;
②?調(diào)度計算工具
為解決數(shù)據(jù)處理流程中錯綜復雜的依賴關(guān)系,保證數(shù)據(jù)計算及時性,采購調(diào)度計算工具,要求支持調(diào)度系統(tǒng)在數(shù)據(jù)流程中開箱即用,支持流批一體混合計算模式,實現(xiàn)對多源異構(gòu)數(shù)據(jù)的離線處理、實時分析和流式計算處理,實時可視化監(jiān)控任務的運行狀態(tài)。
產(chǎn)品功能需包括但不限于:總覽、離線項目管理、實時項目管理、資源中心、數(shù)據(jù)源中心、監(jiān)控中心、配置中心等內(nèi)容。
產(chǎn)品需滿足以下重點業(yè)務要求:
??支持離線任類型包括Shell、SQL語句、數(shù)據(jù)庫存儲過程、條件任務、嵌套子任務、Python、Spark、Flink、MR、HTTP、DataX、Sqoop等,支持拖拉拽任務繪制DAG工作流任務;
??離線任務工作流定義運行后,支持查看每個工作流的運行情況,以甘特圖形式查看各個狀態(tài)的運行節(jié)點時間軸;
??支持離線任務查看每條任務的運行信息、運行時長、重試次數(shù)等任務詳情信息,展示運行日志;
??支持執(zhí)行類SQL任務的方式進行實時數(shù)據(jù)處理,提供數(shù)據(jù)聚合、分析、計算、JSON處理以及數(shù)組處理相關(guān)SQL算子,此外還支持以自定義算子的形式實現(xiàn)實時業(yè)務處理邏輯;
??支持導入腳本模版,格式化代碼,語法提示,SQL預校驗等可幫助快捷準確錄入;
??支持多個數(shù)據(jù)源采集流式數(shù)據(jù),如API接口、數(shù)據(jù)庫、消息隊列等;
??支持多種不同協(xié)議和傳輸方式收集數(shù)據(jù),如TCP、UDP、HTTP等,支持由多個數(shù)據(jù)源并行收集數(shù)據(jù);
??提供包括filter、keyby、distinct、flatMap、map等算子,支持數(shù)據(jù)過濾數(shù)據(jù)分組、數(shù)據(jù)去重、數(shù)據(jù)扁平化、數(shù)據(jù)格式轉(zhuǎn)換以及數(shù)據(jù)類型轉(zhuǎn)換等數(shù)據(jù)預處理功能;
??支持實時任務查看及檢索各個Flink實時任務的運行日志信息,包括各版本運行日志情況、任務狀態(tài),日志存放位置,日志詳情等信息;
??支持從數(shù)據(jù)治理工具進行數(shù)據(jù)源信息同步,支持對Oracle、MySQL、PostgreSQL、Clickhouse、Doris、StarRocks、Hive、Impala、TiDB等數(shù)據(jù)源的創(chuàng)建、測試、增刪改查管理;
③??運維監(jiān)控工具
為提升數(shù)據(jù)工程管理工具相關(guān)產(chǎn)品的運維效率,本工具需實現(xiàn)對大數(shù)據(jù)集群的自動化部署、運維、監(jiān)控、巡檢、告警等一站式管理,支持管理網(wǎng)絡設備、服務器、數(shù)據(jù)庫、中間件、服務、安全設備、虛擬機集群、存儲運維管理、機房動環(huán)等,并提供7*24不間斷監(jiān)測服務,支持故障快速定位,幫忙實施團隊掌握全局網(wǎng)絡運行狀態(tài),保障整個數(shù)據(jù)工程管理工具的平穩(wěn)運行。
產(chǎn)品功能需包括但不限于:監(jiān)控管理、運維管理、巡檢管理、告警管理、日志管理、配置管理等內(nèi)容。
產(chǎn)品需滿足以下重點業(yè)務要求:
??提供拓撲圖,展示主機和服務資源的結(jié)構(gòu)分布、鏈路關(guān)系、性能指標和運行狀態(tài),需包含主機拓撲圖和服務集群拓撲,主機拓撲支持查看各主機設備健康狀態(tài)及連接狀況,查閱告警信息,定位告警問題;服務集群拓撲支持查看各大數(shù)據(jù)服務組件、類型、實例、角色鏈路關(guān)系及異常情況,高亮閃動提示,支持在拓撲圖上直接操作啟動、重啟、停止服務運維事件。
??提供服務器監(jiān)控、服務監(jiān)控、網(wǎng)絡監(jiān)控等功能,監(jiān)控各服務器、服務集群、接口端口的網(wǎng)絡狀態(tài)、當前運行的性能參數(shù)指標,每個服務指標的變化可視化統(tǒng)計及異常告警統(tǒng)計信息;
??服務器監(jiān)控需提供以服務器維度查看各個服務器狀態(tài),性能參數(shù)需包括:服務器組、服務器、狀態(tài)、CPU、5分鐘負載、內(nèi)存、本地存儲、磁盤讀寫、網(wǎng)絡上傳/下載信息,并可清晰查看每個服務器下的服務監(jiān)控狀態(tài)及日志檢索;
??服務監(jiān)控需提供各服務集群的狀態(tài)監(jiān)控,針對不同的組件支持不同的監(jiān)控內(nèi)容(包括hdfs、yarn、kafka等服務類型),服務監(jiān)控支持級聯(lián)查看服務集群、服務類型、服務角色、服務實例,監(jiān)控數(shù)據(jù)包含角色指標和jvm指標,如:JVM堆內(nèi)存、GC、CPU使用率、線程數(shù)、TPS、吞吐量等;
??網(wǎng)絡監(jiān)控需提供針對接口和端口的監(jiān)控,接口實時在線監(jiān)控需包括:接口名稱、源主機、監(jiān)控地址、請求方式、返回碼、響應時間、監(jiān)控狀態(tài);端口實時在線監(jiān)控需包括:源主機、IP、端口、監(jiān)控狀態(tài)以及響應時長對比;
??支持線上服務運維,可以進行啟動、重啟、停止操作事件,便于發(fā)現(xiàn)異常后直接通過工具便捷操作,查看運行狀態(tài)及操作日志。
??支持線上巡檢,支持通過自定義設置巡檢對象,檢查指標、周期策略等進行即時性、周期性等巡檢工作的自動化執(zhí)行,并生成標準可視化報告;
④ 數(shù)據(jù)共享交換工具
為解決跨行業(yè)、跨部門間的數(shù)據(jù)資源共享,實現(xiàn)數(shù)據(jù)資源有序可控的統(tǒng)籌管理與得當利用,本工具需要結(jié)合行業(yè)標準或技術(shù)規(guī)范******集團信息資源目錄,完成各類數(shù)據(jù)資源進行歸集匯總,通過文件或接口等共享方式提供給第三方平臺或系統(tǒng)。
產(chǎn)品功能需包括但不限于:數(shù)據(jù)資源、數(shù)據(jù)統(tǒng)計、共享管理、審核管理等內(nèi)容。
產(chǎn)品需滿足以下重點業(yè)務要求:
??支持結(jié)合行業(yè)標準或技術(shù)規(guī)范(集團職能管理和物流貿(mào)易等)等梳理形成信息資源目錄,按行業(yè)、業(yè)務、主題、數(shù)據(jù)提供單位進行資源的分類展示,數(shù)據(jù)使用方可根據(jù)應用場景選擇合適的數(shù)據(jù)進行數(shù)據(jù)接口申請或數(shù)據(jù)文件下載;
??數(shù)據(jù)資源目錄是以信息資源核心元數(shù)據(jù)為基礎,對信息資源進行分級分類和格式標準化,形成有序組織,不同的業(yè)務展示不同的資源目錄。
??支持數(shù)據(jù)資源詳情展示,包括資源目錄的基本信息:資源名稱、資源簡介、共享條件、數(shù)據(jù)來源、更新頻率、更新方式、數(shù)據(jù)使用情況以及數(shù)據(jù)項信息、掛接的接口信息或數(shù)據(jù)文件。
??支持數(shù)據(jù)實施團隊進行接口配置,通過接口服務申請,審核通過后生效,申請內(nèi)容包括資源名稱、申請用途、申請要求、申請人、申請單位、共享方式等內(nèi)容。
??支持實施團隊進行數(shù)據(jù)配置共享,包括:是否允許共享、共享條件、共享方式、提供數(shù)據(jù)下載和接口服務,該模塊的數(shù)據(jù)資源(資源目錄管理、接口創(chuàng)建)來源于“數(shù)據(jù)治理工具”,治理工具梳理資源后同步到共享工具進行資源共享關(guān)聯(lián)、共享配置管理。
⑤ 數(shù)據(jù)融合展示工具
數(shù)據(jù)融合展示工具要求連接數(shù)據(jù)庫、大數(shù)據(jù)平臺、API接口等作為數(shù)據(jù)源,將復雜數(shù)據(jù)直觀映射,實現(xiàn)全局數(shù)據(jù)融合展示,支持通過拖拉拽方式快速制作圖表或大屏頁面進行分享展示。
產(chǎn)品功能需包括但不限于:數(shù)據(jù)處理、儀表板、數(shù)據(jù)大屏、系統(tǒng)配置等內(nèi)容。
產(chǎn)品需滿足以下重點業(yè)務要求:
??支持管理Oracle、MySQL、PostgreSQL、Clickhouse、Doris、StarRocks、Hive各類數(shù)據(jù)連接信息,是數(shù)據(jù)分析操作中數(shù)據(jù)的來源,支持關(guān)系型數(shù)據(jù)庫、數(shù)據(jù)倉庫、API等多種數(shù)據(jù)源類型;
??支持為數(shù)據(jù)分析或報表制作等操作進行相關(guān)的數(shù)據(jù)準備、加工,支持計算字段可在當前數(shù)據(jù)集字段的基礎上通過公式或函數(shù)生成新的字段。
三、數(shù)據(jù)工程管理工具技術(shù)要求
??需具備高效的數(shù)據(jù)存儲和處理能力,能夠處理TB級別(超過1000GB)海量的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù),包括數(shù)據(jù)的輸入、清洗、存儲、查詢和計算等。
??采用分布式計算和并行處理技術(shù),通過橫向擴展提高計算能力和處理效率,同時支持并行訪問和處理大規(guī)模數(shù)據(jù)。橫向擴展后可以支持創(chuàng)建超過2000個計算任務,使用Pipeline架構(gòu)執(zhí)行引擎,支持同時超過100個任務的并行執(zhí)行。
??底層采用MPP(Massively Parallel Processing)架構(gòu)設計,支持PB級別(超過1000TB)的數(shù)據(jù)存儲能力,支持對TB級別(超過1000GB)的單表數(shù)據(jù)進行秒級讀取和計算操作。
??大數(shù)據(jù)集群上的結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù),均采用多副本(默認為3份)的方式進行分布式存儲,同時實現(xiàn)了對數(shù)據(jù)的并發(fā)訪問支持和安全備份能力。
??大數(shù)據(jù)集群,支持服務的橫向伸縮。當集群訪問增加時,可以通過集群的橫向擴展(節(jié)點成倍擴展,例如從3節(jié)點擴展到6節(jié)點),來滿足數(shù)據(jù)的存儲和計算需求,確保系統(tǒng)的穩(wěn)定性和高可用性。
??簽訂合同后,一周內(nèi)完成產(chǎn)品交付,對數(shù)據(jù)治理團隊進行產(chǎn)品培訓,且有專業(yè)工程師7*24技術(shù)支持。
??提供一年免費運維,包括使用過程中的技術(shù)答疑、支持、培訓、版本升級等內(nèi)容。
??要求投標單位協(xié)助編寫著作權(quán)文檔,且著作權(quán)歸甲方所有。
??要求工具界面風格、工具界面名稱、工具******集團要求進行調(diào)整。
?