国产一级a片免费看高清,亚洲熟女中文字幕在线视频,黄三级高清在线播放,免费黄色视频在线看

數(shù)據(jù)復(fù)制與驗(yàn)證服務(wù)

 1）數(shù)據(jù)庫(kù)數(shù)據(jù)復(fù)制

通過(guò)日志分析，能捕捉變化的結(jié)構(gòu)、變化數(shù)據(jù)，并將變化的結(jié)構(gòu)、變化的數(shù)據(jù)通過(guò)數(shù)據(jù)流復(fù)制技術(shù)復(fù)制到緩存庫(kù)。支持異地、同城、同中心的數(shù)據(jù)復(fù)制。

• 支持關(guān)系數(shù)據(jù)庫(kù)復(fù)制。通過(guò)數(shù)據(jù)流復(fù)制技術(shù)，實(shí)現(xiàn)同構(gòu)或者異構(gòu)數(shù)據(jù)庫(kù)之間的復(fù)制，包括了：Oracle、SQL Server、DB2、Sybase ASE、Sybase IQ、AS 400、Informix、My SQL、Access、PostgreSQL、Intersystems Cache、Gupta SQL Base、dBase、Firebird SQL、MaxDB (SAP DB)、Hypersonic、Generic database、SAP R/3 System、CA Ingres、Borland Interbase、人大金倉(cāng)（KingbaseES）、達(dá)夢(mèng)（DM）、Oscar、Netezza等不同版本數(shù)據(jù)庫(kù)。

• 支持關(guān)系數(shù)據(jù)庫(kù)到NoSQL庫(kù)復(fù)制。提供數(shù)據(jù)流復(fù)制技術(shù)實(shí)現(xiàn)關(guān)系型數(shù)據(jù)庫(kù)的數(shù)據(jù)、結(jié)構(gòu)復(fù)制到NoSQL庫(kù)中，如mongodb、hbase、hive、Elastic Search等。

 2）數(shù)據(jù)文件復(fù)制

• 文件傳輸復(fù)制功能，將文件、文件夾下的文件復(fù)制到緩存庫(kù)中。

• 支持變化文件同步，能監(jiān)控給定文件夾，將文件夾下的變化文件復(fù)制到緩存庫(kù)中。

• 異構(gòu)系統(tǒng)間的復(fù)制，支持Windows、Linux、Aix、HP-Unix、Solaris等不同操作系統(tǒng)，支持異地?cái)?shù)據(jù)文件的復(fù)制。

• 可以將數(shù)據(jù)文件復(fù)制到分布式的文件系統(tǒng)中，如hadoop平臺(tái)中。

• 數(shù)據(jù)復(fù)制過(guò)程中的加密、壓縮處理。

• 對(duì)文件全生命周期管理，可以設(shè)定規(guī)則對(duì)文檔歸檔或者清理。

（3）比對(duì)驗(yàn)證

1. 提供比對(duì)驗(yàn)證驗(yàn)證功能，將緩存庫(kù)的數(shù)據(jù)和源端的數(shù)據(jù)做比對(duì)，發(fā)現(xiàn)不一致的結(jié)構(gòu)、不一致的數(shù)據(jù)、不一致的文件，并形成比對(duì)報(bào)告。

2. 通過(guò)比對(duì)驗(yàn)證功能方便用戶了解緩存區(qū)的數(shù)據(jù)和源端數(shù)據(jù)的差異，進(jìn)而保證源端數(shù)據(jù)和目標(biāo)端數(shù)據(jù)的完整、一致。

（4）可視化工具

提供圖形化工具集中配置、管理和監(jiān)控；可以通過(guò)Web方式監(jiān)控

數(shù)據(jù)交換服務(wù)組件，在遵循一定的交換策略條件下進(jìn)行數(shù)據(jù)交換及消息傳遞，支持?jǐn)?shù)據(jù)資源在不同單位、不同區(qū)域的快速交換和共享，提供配置工具生成交換節(jié)點(diǎn)，此外在數(shù)據(jù)傳輸過(guò)程中應(yīng)保證數(shù)據(jù)完整性、安全性、可靠性和傳輸性能。

基于統(tǒng)一的數(shù)據(jù)服務(wù)配置出不同的數(shù)據(jù)交換方式

數(shù)據(jù)交換服務(wù)組件：支持全量、批量、實(shí)時(shí)的數(shù)據(jù)交換；支持大數(shù)據(jù)量的數(shù)據(jù)交換；支持復(fù)雜網(wǎng)絡(luò)環(huán)境下的可靠數(shù)據(jù)交換；支持跨網(wǎng)段、跨單位的數(shù)據(jù)交換；支持基于通道、文件的加密傳輸；支持多種數(shù)據(jù)接口和傳輸協(xié)議；提供數(shù)據(jù)交換日志；支持?jǐn)帱c(diǎn)續(xù)傳功能。

（1）異構(gòu)、異地的數(shù)據(jù)交換

提供基于流加工技術(shù)的數(shù)據(jù)交換和共享，在一個(gè)服務(wù)內(nèi)實(shí)現(xiàn)數(shù)據(jù)庫(kù)、文件、JSON、XML、傳輸隊(duì)列、適配器等之間的相互交換。具有以下交換功能：

1. 支持?jǐn)?shù)據(jù)庫(kù)：Oracle、SQL Server、DB2、Sybase ASE、Sybase IQ、Informix、My SQL、FoxPro、Access等；國(guó)產(chǎn)數(shù)據(jù)庫(kù)：達(dá)夢(mèng)、人大金倉(cāng)、神州數(shù)據(jù)庫(kù)等。

2. 支持SQL語(yǔ)句作為數(shù)據(jù)源。

3. No SQL的交換：支持與MongoDB的交換，支持與Hive的交換，支持與HBASE的交換，支持與Elastic Search的交換。

4. 支持文件：文本文件（分隔符、定長(zhǎng)等）、Excel文件、DBF文件、MDB文件等。分隔符文件要支持組合分隔符。能可視化配置文件與異構(gòu)系統(tǒng)的交換。

5. 支持XML， XML可以是文件，也可以是來(lái)源消息隊(duì)列、API、 Web URL等。能可視化配置XML與異構(gòu)系統(tǒng)的交換。

6. 支持JSON， JSON可以是文件，也可以是來(lái)源消息隊(duì)列、API、 Web URL等。能可視化配置JSON與異構(gòu)系統(tǒng)的交換。

提供內(nèi)存對(duì)象映射滿足API、傳輸隊(duì)列數(shù)據(jù)抽取。可視化定義內(nèi)存表與異構(gòu)系統(tǒng)的交換；可視化配置數(shù)據(jù)采集結(jié)果可輸出到通道中，實(shí)現(xiàn)數(shù)據(jù)傳輸服務(wù)的綁定。

跨網(wǎng)段的數(shù)據(jù)交換能力。跨網(wǎng)段是指數(shù)據(jù)源和數(shù)據(jù)目標(biāo)位于不同的網(wǎng)段，每個(gè)網(wǎng)段不能訪問(wèn)跨網(wǎng)段的數(shù)據(jù)庫(kù)。能配置跨網(wǎng)段的數(shù)據(jù)交換服務(wù)；能實(shí)現(xiàn)跨網(wǎng)段的實(shí)時(shí)聯(lián)動(dòng)的數(shù)據(jù)交換；支持CLob字段、blob字段等。

（2）數(shù)據(jù)交換過(guò)程中的數(shù)據(jù)加工

數(shù)據(jù)交換過(guò)程中的數(shù)據(jù)加工，實(shí)現(xiàn)如下加工能力：

1. 多種數(shù)據(jù)轉(zhuǎn)換方法：包括字符串轉(zhuǎn)換、字段賦值、時(shí)間類轉(zhuǎn)換、數(shù)據(jù)比對(duì)與翻譯、數(shù)學(xué)運(yùn)算、身份證格式轉(zhuǎn)換等。

2. 交換過(guò)程中的數(shù)據(jù)質(zhì)量檢查，根據(jù)數(shù)據(jù)邏輯判斷規(guī)則，將干凈的數(shù)據(jù)裝載到目標(biāo)中，將判斷有問(wèn)題的數(shù)據(jù)路由到數(shù)據(jù)庫(kù)表或者數(shù)據(jù)文件中。

3. 多種邏輯處理，包括：格式匹配檢查（如日期格式、數(shù)據(jù)格式、身份證格式、自定義格式等）、字符串邏輯檢查（包含、以結(jié)束、以開始、在列表中、等于等）、內(nèi)容為空檢查、重復(fù)記錄檢查、范圍內(nèi)檢查（如在列表內(nèi)、字典或代碼表內(nèi)、包含、等于）、表表外鍵關(guān)聯(lián)檢查、邏輯檢查（=、>、>=、<、<=、為空、非空、<And<、<=And<、<And<=、<=And<=、為真、為假等）、復(fù)合邏輯檢查（以上邏輯的and、or組合）、自定義邏輯檢查等。并能可視化配置。

4. 多種路由策略，路由條件可以是邏輯判斷，也可以是等于、不等于、小于、小于等于、大于、大于等于、大于且小于、大于等于且小于、大于且小于等于、大于等于且小于等于、規(guī)則表達(dá)、是空、非空、在列表中、包含、開始為、結(jié)束為、為真、為假等方法。數(shù)據(jù)路由也可以是條件的組合，可以是and 也可以是Or。

（3）保證交換的可靠性、性能、實(shí)時(shí)性

1. 支持?jǐn)帱c(diǎn)續(xù)傳。在數(shù)據(jù)交換任務(wù)運(yùn)行過(guò)程中由于各種不確定原因造成網(wǎng)絡(luò)中斷，網(wǎng)絡(luò)恢復(fù)后重新運(yùn)行服務(wù)后保證數(shù)據(jù)一致。

2. 支持實(shí)時(shí)交換。實(shí)現(xiàn)通過(guò)字符串報(bào)文、XML、JSON等格式實(shí)時(shí)交換數(shù)據(jù)。

3. 支持通過(guò)分析日志捕捉變化數(shù)據(jù)的實(shí)時(shí)交換。支持?jǐn)?shù)據(jù)庫(kù)CDC技術(shù),能捕捉指定表的變化數(shù)據(jù)，增量抽取變化數(shù)據(jù)，經(jīng)過(guò)轉(zhuǎn)換等處理后按照條件路由到多個(gè)數(shù)據(jù)目標(biāo)中。

4. 支持?jǐn)?shù)據(jù)分組分塊平行加工。在一個(gè)數(shù)據(jù)交換服務(wù)中實(shí)現(xiàn)數(shù)據(jù)分塊及數(shù)據(jù)并行加工處理，保證加工性能。

（4）提供批量文件交換

提供文件傳輸服務(wù)功能。保證文件的可靠傳輸，主要實(shí)現(xiàn)如下功能：

1. 支持對(duì)文件、文件夾、文件夾下指定文件等的傳輸。

2. 提供變化文件傳輸功能，實(shí)現(xiàn)對(duì)文件夾含子文件夾的文件增量傳輸。

3. 提供文件篩選功能，實(shí)現(xiàn)滿足條件的文件傳輸。

4. 提供多節(jié)點(diǎn)間文件接力傳輸功能，實(shí)現(xiàn)多節(jié)點(diǎn)間文件傳輸?shù)穆?lián)動(dòng)。

5. 實(shí)現(xiàn)文件傳輸過(guò)程加密、壓縮、斷點(diǎn)續(xù)傳等功能。

6. 支持一對(duì)一、一對(duì)多，支持同步、異步傳輸方式。

7. 提供和外部FTP、SFTP的傳輸服務(wù)，方便給外部的FTP/SFTP文件服務(wù)器交換文件。

8. 提供FTP文件傳輸服務(wù)，包括文件的上傳和下載，支持文件和文件夾傳輸，支持變化文件傳輸、刪除已傳輸文件等處理 。

9. 提供SFTP文件傳輸服務(wù)，包括文件的上傳和下載，支持文件和文件夾傳輸。

10. 提供文件清理功能，方便整理文件存儲(chǔ)空間主要實(shí)現(xiàn)如下功能：能壓縮備份給定天數(shù)之前的文件，能刪除給定天數(shù)之前的的文件。

數(shù)據(jù)加工處理實(shí)現(xiàn)數(shù)據(jù)的轉(zhuǎn)換、邏輯判斷、數(shù)據(jù)質(zhì)量的檢查、異常處理、數(shù)據(jù)路由、數(shù)據(jù)的規(guī)范化等處理，用于將貼源緩沖區(qū)的數(shù)據(jù)根據(jù)需要加工到數(shù)據(jù)存儲(chǔ)與處理層的結(jié)構(gòu)化區(qū)、非結(jié)構(gòu)化區(qū)，并能給數(shù)據(jù)主題區(qū)、分析服務(wù)區(qū)、數(shù)據(jù)實(shí)驗(yàn)室提供規(guī)范合理的數(shù)據(jù)。支持全量、增量、實(shí)時(shí)的數(shù)據(jù)處理，基于數(shù)據(jù)流處理技術(shù)，處理在數(shù)據(jù)流引擎中進(jìn)行，減輕對(duì)數(shù)據(jù)源和目標(biāo)的影響；提供統(tǒng)一加工服務(wù)實(shí)現(xiàn)數(shù)據(jù)庫(kù)、數(shù)據(jù)倉(cāng)庫(kù)、NoSQL、搜索引擎、文件、XML、We b Service、傳輸隊(duì)列、適配器、內(nèi)存表、JSON 等之間的相互交換，通過(guò)工具可視化配置通過(guò)拖拉等操作，可視化配置異構(gòu)數(shù)據(jù)之間的轉(zhuǎn)換、加工、映射規(guī)則。

流加工技術(shù)示意圖

數(shù)據(jù)加工基于流加工技術(shù)實(shí)現(xiàn)。流加工技術(shù)是指在一個(gè)數(shù)據(jù)服務(wù)流內(nèi)實(shí)現(xiàn)數(shù)據(jù)檢查、數(shù)據(jù)清洗、數(shù)據(jù)比對(duì)、數(shù)據(jù)轉(zhuǎn)換、數(shù)據(jù)邏輯判斷、數(shù)據(jù)路由、數(shù)據(jù)異常處理等計(jì)算并將計(jì)算的結(jié)果輸出到數(shù)據(jù)服務(wù)的目標(biāo)中；流加工技術(shù)通過(guò)優(yōu)化算法，將數(shù)據(jù)服務(wù)的加工計(jì)算在數(shù)據(jù)管理引擎內(nèi)一次完成，減輕數(shù)據(jù)源和目標(biāo)IO操作和計(jì)算壓力，大大降低了對(duì)數(shù)據(jù)源和數(shù)據(jù)目標(biāo)的影響。

流加工技術(shù)實(shí)現(xiàn)數(shù)據(jù)庫(kù)、No SQL（hive、hbase、mogodb）、搜素引擎（Elastic Search）、文件、XML、Web Service、傳輸隊(duì)列、適配器、內(nèi)存表、JSON等之間的相互交換。

基于流加工技術(shù)的數(shù)據(jù)交換及整合服務(wù)

數(shù)據(jù)加工服務(wù)包括數(shù)據(jù)抽取、流加工、數(shù)據(jù)路由等部分。其中：抽取條件支持全量抽取、增量數(shù)據(jù)、SQL語(yǔ)句、動(dòng)態(tài)規(guī)則、以及通過(guò)API或者接口表等調(diào)用方法傳來(lái)的變量。

流加工處理可以是數(shù)據(jù)加工處理、數(shù)據(jù)邏輯檢查、數(shù)據(jù)安全處理、調(diào)用服務(wù)或者方法等。數(shù)據(jù)加工處理包括字符串加工、字段賦、時(shí)間類轉(zhuǎn)換、比對(duì)翻譯、數(shù)學(xué)計(jì)算、數(shù)組操作、系統(tǒng)信息、變量操作、專用轉(zhuǎn)換、GIS轉(zhuǎn)換等；數(shù)據(jù)邏輯檢查包括：格式檢查、范圍檢查、缺失記錄檢查、相似重復(fù)記錄檢查、數(shù)字檢查、專用檢查、邏輯表達(dá)式檢查、復(fù)合規(guī)則檢查等；數(shù)據(jù)安全處理包括：安全過(guò)濾、模糊加密等；調(diào)用服務(wù)或者方法包括：調(diào)用流程/服務(wù)、根據(jù)邏輯判斷調(diào)用處理方法；數(shù)據(jù)路由包括：干凈數(shù)據(jù)路由、異常數(shù)據(jù)路由、業(yè)務(wù)規(guī)則路由等。

提供可視化界面實(shí)現(xiàn)如下功能:

支持?jǐn)?shù)據(jù)庫(kù)、NoSQL（hive、hbase、mogodb等）、搜素引擎（ElasticSearch等）、文件、XML、Web Service、傳輸隊(duì)列、適配器、內(nèi)存表、JSON等之間的相互交換。

1. 基于流加工技術(shù)的轉(zhuǎn)換加工處理

2. 基于流加工技術(shù)的邏輯判斷和數(shù)據(jù)質(zhì)量檢查

3. 保證數(shù)據(jù)事務(wù)完整性

4. 分組并行加工能力

5. 全量、批量、實(shí)時(shí)的數(shù)據(jù)交換

6. 大數(shù)據(jù)量的數(shù)據(jù)交換

7. 復(fù)雜網(wǎng)絡(luò)環(huán)境下可靠數(shù)據(jù)交換

8. 跨網(wǎng)段、跨單位的聯(lián)動(dòng)式數(shù)據(jù)交換

9. 基于通道、文件的加密傳輸

服務(wù)提供方做服務(wù)資源的編目，注冊(cè)到數(shù)據(jù)資源目錄中心；中心做服務(wù)資源的審核、維護(hù)，并將共享的服務(wù)發(fā)布出去；服務(wù)使用方查詢到服務(wù)后，向中心申請(qǐng)使用該服務(wù)；中心審核審批通過(guò)后給申請(qǐng)用戶授權(quán)該服務(wù)的使用；服務(wù)使用方通過(guò)安全可管理的服務(wù)總線調(diào)用該服務(wù)，實(shí)現(xiàn)提供方和使用方的數(shù)據(jù)交換和共享。

數(shù)據(jù)共享示意圖

（1）提供安全可管理的服務(wù)總線，方便安全可控的使用服務(wù)

1. 將配置好的服務(wù)分級(jí)授權(quán)給不同的部門、用戶，用戶包括管理角色、開發(fā)角色、查詢角色、使用角色等。業(yè)務(wù)系統(tǒng)是具有使用角色的用戶。

2. 安全可管理的數(shù)據(jù)服務(wù)總線作為數(shù)據(jù)服務(wù)使用入口，當(dāng)用戶訪問(wèn)數(shù)據(jù)服務(wù)時(shí)，服務(wù)總線將做用戶的身份鑒定，通過(guò)后檢查其訪問(wèn)權(quán)限，都通過(guò)后，才能使用該數(shù)據(jù)服務(wù)。

3. 通過(guò)訪問(wèn)數(shù)據(jù)服務(wù)屏蔽數(shù)據(jù)源，實(shí)現(xiàn)共享數(shù)據(jù)的安全授權(quán)，可以到表、字段、記錄級(jí)的安全控制。

（2）如下是通過(guò)服務(wù)總線使用服務(wù)時(shí)的內(nèi)部 SOAP XML

1. 包括了調(diào)用的用戶信息（包括用戶名和密碼）、服務(wù)信息（提供者標(biāo)識(shí)、服務(wù)類型、服務(wù)標(biāo)識(shí)、服務(wù)業(yè)務(wù)句柄）。

2. 如果有報(bào)文、XML等輸入數(shù)據(jù)時(shí)，包括了服務(wù)輸入信息（類型：XML、String、RowsSet等）。

3. 如果是查詢服務(wù)時(shí)，還包括了查詢條件（變量名、查詢條件）、返回值類型（ XML、String、RowsSet等）。

安全可管理的服務(wù)總線

通過(guò)安全可管理的數(shù)據(jù)服務(wù)總線，可以采用多種方式服務(wù)調(diào)度使用服務(wù)或者流程，包括：

• 菜單交互

• 定時(shí)

• 接口文件文件

• 接口表

• 消息隊(duì)列

• 服務(wù)代理

• 流程

• 前處理（發(fā)送方、接收方、服務(wù)）

• 后處理（發(fā)送方、接收方、服務(wù)）

• shell

• API

• Web

• 其他事件

調(diào)度管理組件，主要包括可視化配置及監(jiān)控、調(diào)度規(guī)則的管理及運(yùn)行監(jiān)控、調(diào)度策略、流程調(diào)度、基于總線調(diào)度件、集成調(diào)用能夠服務(wù)等組成。

調(diào)度管理組件

（1）調(diào)度規(guī)則的管理及運(yùn)行監(jiān)控

1. 調(diào)度規(guī)則的管理及運(yùn)行監(jiān)控實(shí)現(xiàn)了對(duì)平臺(tái)調(diào)度功能的集中管理，包括配置管理、運(yùn)行監(jiān)控、規(guī)則管理。配置管理實(shí)現(xiàn)了對(duì)任務(wù)配置、任務(wù)調(diào)度策略、人工干預(yù)任務(wù)的響應(yīng)等。規(guī)則管理實(shí)現(xiàn)了對(duì)調(diào)度規(guī)則的管理，可以以XML對(duì)外開放。

2. 可視化配置和監(jiān)控是調(diào)度管理的可視化操作界面，通過(guò)和調(diào)度管理交互實(shí)現(xiàn)對(duì)調(diào)度任務(wù)的配置、調(diào)度策略的定義、調(diào)度運(yùn)行監(jiān)控等。

（2）調(diào)度策略

調(diào)度策略模塊實(shí)現(xiàn)了調(diào)度策略的管理，包括基于菜單的交互調(diào)度、定時(shí)調(diào)度、文件觸發(fā)調(diào)度、文件分類調(diào)用、接口文件/接口表調(diào)用、分布式調(diào)用等。

1. 菜單生成器可以定義任務(wù)調(diào)度菜單，通過(guò)菜單可以交互調(diào)度，包括發(fā)起和終止任務(wù)等。

2. 可以在任務(wù)運(yùn)行菜單上可視化定義定時(shí)調(diào)用任務(wù)，定義定時(shí)調(diào)度策略。

3. 通過(guò)可視化界面定義文件觸發(fā)調(diào)度，方便滿足某些給定的文件條件后觸發(fā)調(diào)用任務(wù)。

4. 通過(guò)可視化界面定義文件分類調(diào)用，監(jiān)控給定文件夾，根據(jù)給定的條件對(duì)文件夾下的文件分類調(diào)用不同的服務(wù)，同時(shí)將文件名等信息傳遞給被調(diào)用的服務(wù)使用。

5. 通過(guò)可視化界面定義接口文件/接口表調(diào)度，根據(jù)接口文件或者接口表的內(nèi)容調(diào)用服務(wù)，同時(shí)將接口文件或者接口表中的數(shù)據(jù)以變量方式傳遞給被調(diào)用的服務(wù)。

6. 多種分布式調(diào)度策略，包括服務(wù)代理調(diào)度、文件傳輸前后處理調(diào)用、通訊隊(duì)列綁定調(diào)用等。

7. 通過(guò)可視化界面定義服務(wù)代理調(diào)度，可以調(diào)用部署在另一個(gè)交換節(jié)點(diǎn)下的服務(wù)，觸發(fā)該服務(wù)運(yùn)行。

8. 通過(guò)可視化界面定義文件傳輸前后處理調(diào)用，可以定義發(fā)送方文件發(fā)送前處理調(diào)用、文件發(fā)送完成后處理調(diào)用，定義文件傳輸接收方接收前處理調(diào)用、文件接收完成后處理調(diào)用，方便文件傳輸和處理的聯(lián)動(dòng)。

9. 通過(guò)可視化界面定義通訊隊(duì)列綁定，滿足通訊環(huán)境下某個(gè)消息隊(duì)列接收消息或者數(shù)據(jù)后觸發(fā)調(diào)用相應(yīng)的服務(wù)。

（3）流程調(diào)度

流程調(diào)度組件主要是為了滿足復(fù)雜調(diào)度策略，通過(guò)可視化界面將要調(diào)度的服務(wù)（可以位于不同的交換節(jié)點(diǎn)上）組成流程，運(yùn)行時(shí)按照給定的規(guī)則執(zhí)行，支持并行處理、順序執(zhí)行、條件處理、意外處理等。流程本身也可以作為另一個(gè)流程的處理節(jié)點(diǎn)，方便實(shí)現(xiàn)流程的嵌套。

并行處理是指多個(gè)處理任務(wù)可以放到一個(gè)并行組中，組中的所有任務(wù)處理完成后再調(diào)用流程的下一個(gè)節(jié)點(diǎn)執(zhí)行，并行處理既可以讓組中的所有的任務(wù)并行運(yùn)行，也可以根據(jù)硬件、網(wǎng)絡(luò)等情況指定處理并發(fā)數(shù)。

當(dāng)流程運(yùn)行出意外時(shí)，可選擇補(bǔ)償運(yùn)行、斷點(diǎn)續(xù)運(yùn)行、間隔檢查運(yùn)行等處理方式。

（4）基于總線的調(diào)度

數(shù)據(jù)服務(wù)總線也可以作為調(diào)度總線使用，調(diào)用方可以通過(guò)URL、API等方式通過(guò)總線調(diào)用服務(wù)，如下是通過(guò)服務(wù)總線使用服務(wù)時(shí)的相應(yīng)的輸入。

1. 包括了調(diào)用的用戶信息（包括用戶名和密碼）、服務(wù)信息（提供者標(biāo)識(shí)、服務(wù)類型、服務(wù)標(biāo)識(shí)、服務(wù)業(yè)務(wù)句柄）。

2. 如果有報(bào)文、XML等輸入數(shù)據(jù)時(shí)，包括了服務(wù)輸入信息（類型：XML、String、RowsSet等）。

3. 如果是查詢服務(wù)時(shí)，還包括了查詢條件（變量名、查詢條件）、返回值類型（ XML、String、RowsSet等）。

（5）集成調(diào)用服務(wù)

集成調(diào)用服務(wù)組件包括了被調(diào)用的數(shù)據(jù)交換和數(shù)據(jù)整合服務(wù)、數(shù)據(jù)傳輸服務(wù)，還包括了集成調(diào)用服務(wù)：shell腳本調(diào)用、SQL調(diào)用、調(diào)用URL等。

1. 操作系統(tǒng)的Shell腳本調(diào)用服務(wù)，實(shí)現(xiàn)通過(guò)可視化配置服務(wù)調(diào)用Shell腳本的功能，對(duì)于數(shù)據(jù)庫(kù)的操作系統(tǒng)級(jí)的shell命令調(diào)用，提供安全策略保護(hù)用戶名和密碼等敏感信息。

2. SQL調(diào)度功能，通過(guò)可視化配置服務(wù)實(shí)現(xiàn)對(duì)SQL語(yǔ)句、存儲(chǔ)過(guò)程、SQL函數(shù)的調(diào)用功能。

3. URL調(diào)度服務(wù)， 調(diào)用可視化配置的外部URL。

（6）后臺(tái)支撐組件

后臺(tái)管控組件提供可視化工具方便數(shù)據(jù)服務(wù)的管理，支持?jǐn)?shù)據(jù)服務(wù)集中管控，主要包括配置管理、任務(wù)管理、安全管理、監(jiān)控管理。

1. 配置管理提供統(tǒng)一的配置管理工具：在同一個(gè)工具內(nèi)，可視化實(shí)現(xiàn)數(shù)據(jù)節(jié)點(diǎn)的管理、交換服務(wù)建模、數(shù)據(jù)加工建模、共享服務(wù)建模、數(shù)據(jù)質(zhì)量的管理、服務(wù)目錄管理、資源目錄管理、運(yùn)行及監(jiān)控管理等。通過(guò)相應(yīng)服務(wù)的可視化操作界面生成相應(yīng)類型的服務(wù)模型，可以根據(jù)業(yè)務(wù)需要?jiǎng)?chuàng)建文件傳輸、ETL、數(shù)據(jù)交換和處理、數(shù)據(jù)質(zhì)量、安全共享、流程等各類服務(wù)，并可以根據(jù)需要分類、編碼形成服務(wù)目錄，便于重用、編輯、安全授權(quán)等需要，提供服務(wù)創(chuàng)建、編輯、刪除、部署、查看等功能。支持按單位、部門、業(yè)務(wù)分類管理，支持服務(wù)模型的一致性檢查，支持團(tuán)隊(duì)分工協(xié)同開發(fā)等。

2. 任務(wù)管理：包括任務(wù)菜單樹管理、調(diào)度管理、任務(wù)監(jiān)控等功能。提供菜單生成器生成任務(wù)菜單樹，方便人工交互調(diào)度管理，包括運(yùn)行、終止任務(wù)等；調(diào)度管理提供任務(wù)調(diào)度功能，可以可視化配置定時(shí)、文件觸發(fā)、服務(wù)代理調(diào)用、分布式調(diào)度、文件分類調(diào)度等策略。任務(wù)中心實(shí)現(xiàn)數(shù)據(jù)服務(wù)工廠和資源目錄的一體化，可以通過(guò)資源目錄查找到共享數(shù)據(jù)服務(wù)，經(jīng)過(guò)申請(qǐng)、審批等流程后，通過(guò)服務(wù)控制中心得到授權(quán)的數(shù)據(jù)服務(wù)，進(jìn)而通過(guò)數(shù)據(jù)服務(wù)平臺(tái)進(jìn)行數(shù)據(jù)的交換和共享。

3. 安全管理主要包括部門管理、用戶管理、安全管理、角色管理、分級(jí)授權(quán)、安全審計(jì)、交換節(jié)點(diǎn)的安全認(rèn)證等。提供統(tǒng)一的安全管理，實(shí)現(xiàn)對(duì)交換和共享數(shù)據(jù)的分級(jí)授權(quán)和訪問(wèn)控制、交換和共享服務(wù)的分級(jí)授權(quán)和訪問(wèn)控制、交換和共享資源目錄的分級(jí)授權(quán)和訪問(wèn)控制，交換和共享服務(wù)的安全審計(jì)和身份鑒定等。

4. 監(jiān)控管理對(duì)數(shù)據(jù)服務(wù)全流程監(jiān)控管理，主要包括交換節(jié)點(diǎn)的監(jiān)控、數(shù)據(jù)服務(wù)運(yùn)行流程監(jiān)控、運(yùn)行統(tǒng)計(jì)等。

組織內(nèi)部數(shù)據(jù)交換，同一單位內(nèi)各信息系統(tǒng)數(shù)據(jù)將由各單位內(nèi)部交換區(qū)內(nèi)的交換節(jié)點(diǎn)進(jìn)行交換共享，交換節(jié)點(diǎn)提供數(shù)據(jù)加解密管理，交換過(guò)程支持?jǐn)?shù)據(jù)加密（支持SM2、SM4等國(guó)密算法加密）。

平臺(tái)支持上下級(jí)單位數(shù)據(jù)交換，各部門跨層級(jí)數(shù)據(jù)交換先由內(nèi)部交換節(jié)點(diǎn)將數(shù)據(jù)加密（支持SM2、SM4等國(guó)密算法加密）并交換至本單位前置機(jī)上的前置交換節(jié)點(diǎn)，交換完成后平臺(tái)將對(duì)上下級(jí)單位進(jìn)行單位認(rèn)證、用戶身份鑒定及訪問(wèn)權(quán)限驗(yàn)證，驗(yàn)證通過(guò)后本單位前置機(jī)的前置交換節(jié)點(diǎn)再將數(shù)據(jù)交換至上下級(jí)單位的前置機(jī)上的前置交換節(jié)點(diǎn)，再由上下級(jí)單位的前置機(jī)上的前置交換節(jié)點(diǎn)將數(shù)據(jù)交換至上下級(jí)單位的內(nèi)部交換區(qū)，實(shí)現(xiàn)跨層級(jí)的數(shù)據(jù)交換共享。

平臺(tái)提供基于前置機(jī)的數(shù)據(jù)交換，基于前置機(jī)的數(shù)據(jù)交換先由內(nèi)部交換節(jié)點(diǎn)將單位內(nèi)各信息系統(tǒng)數(shù)據(jù)加密（支持SM2、SM4等國(guó)密算法加密）并交換至前置機(jī)，交換完成后平臺(tái)將對(duì)目標(biāo)方單位進(jìn)行單位認(rèn)證、用戶身份鑒定及訪問(wèn)權(quán)限驗(yàn)證，若驗(yàn)證通過(guò)，由前置機(jī)將數(shù)據(jù)對(duì)外共享，滿足跨部門、跨網(wǎng)絡(luò)的數(shù)據(jù)交換的需要。

“物理隔離”情況下的可靠交換，具體說(shuō)明如下：

（1）存儲(chǔ)各種異構(gòu)系統(tǒng)的數(shù)據(jù)源（如各種數(shù)據(jù)庫(kù)等）的各種字段類型（如數(shù)據(jù)庫(kù)表的字符型、日期型、數(shù)字型、Blob、Clob、流類型等）數(shù)據(jù)的通用數(shù)據(jù)文件作為被隔離的兩段網(wǎng)絡(luò)的共享數(shù)據(jù)存儲(chǔ)介質(zhì)，文件本身支持SM2、SM4等國(guó)密算法加密。

（2）數(shù)據(jù)提供單位調(diào)用通過(guò)拖拉等可視化配置將異構(gòu)數(shù)據(jù)源映射到通用文件的服務(wù)，該服務(wù)將指定的數(shù)據(jù)源如數(shù)據(jù)庫(kù)表、文件等映射到共享文件夾的以表名開頭的動(dòng)態(tài)文件名的文件上，以保證每次調(diào)用生成不同的文件。

（3）傳輸服務(wù)將生成后的加密數(shù)據(jù)文件交換至前置機(jī)的共享存儲(chǔ)介質(zhì)（如光盤、硬盤等）中，支持設(shè)備訪問(wèn)權(quán)限管理，可通過(guò)可視化工具對(duì)各信息系統(tǒng)用戶設(shè)置指定目錄的訪問(wèn)權(quán)限。數(shù)據(jù)需求單位進(jìn)行身份鑒定及訪問(wèn)權(quán)限驗(yàn)證，通過(guò)驗(yàn)證后數(shù)據(jù)需求單位可通過(guò)傳輸服務(wù)將共享存儲(chǔ)介質(zhì)（如光盤、硬盤等）中數(shù)據(jù)文件交換至內(nèi)部交換區(qū)。

（4）按照約定數(shù)據(jù)需求方調(diào)用經(jīng)可視化配置的文件分類服務(wù)，該服務(wù)監(jiān)控共享存儲(chǔ)介質(zhì)（如光盤、硬盤等）下指定的文件目錄，根據(jù)文件夾下文件名稱的特點(diǎn)分別調(diào)用經(jīng)可視化配置的文件到異構(gòu)系統(tǒng)的映射加工處理服務(wù)，將文件內(nèi)容裝載到異構(gòu)目標(biāo)方，實(shí)現(xiàn)了物理隔離情況下的異構(gòu)系統(tǒng)的數(shù)據(jù)傳遞。

（5）物理隔離情況下的數(shù)據(jù)交換采用基于共享文件的方式。共享文件能存儲(chǔ)各種異構(gòu)系統(tǒng)的數(shù)據(jù)源（如各種數(shù)據(jù)庫(kù)等）的各種字段類型（如數(shù)據(jù)庫(kù)表的字符型、日期型、數(shù)字型、Blob、Clob、流類型等）數(shù)據(jù)的通用數(shù)據(jù)文件作為被隔離的兩段網(wǎng)絡(luò)的共享數(shù)據(jù)存儲(chǔ)介質(zhì)。

 1）數(shù)據(jù)提供單位

1. 可視化配置異構(gòu)源到數(shù)據(jù)文件、文件傳輸

2. 運(yùn)行時(shí)完成異構(gòu)源到數(shù)據(jù)文件

3. 文件名稱動(dòng)態(tài)編碼等處理、文件傳遞

 2）數(shù)據(jù)需求單位

1. 可視化配置數(shù)據(jù)文件到異構(gòu)數(shù)據(jù)目標(biāo)

2. 根據(jù)文件名稱編碼調(diào)用不同數(shù)據(jù)文件到異構(gòu)目標(biāo)處理

3. 傳輸和加工過(guò)程可視化監(jiān)控和管理。