沧州市大数据操作手册数据共享交换平台.docx

沧州市大数据操作手册数据共享交换平台.docx

《沧州市大数据操作手册数据共享交换平台.docx》由会员分享，可在线阅读，更多相关《沧州市大数据操作手册数据共享交换平台.docx（29页珍藏版）》请在冰点文库上搜索。

沧州市大数据操作手册数据共享交换平台

<数据共享交换平台>

用户操作手册

（1.0）

文档编号：

项目名称：

编写：

编写日期：

审核：

审核日期：

批准：

批准日期：

年月日

文档修订记录

序号

修改时间

修改人

审核人

备注

1

2

3

引言

编写目的

用户操作手册编写目的是明确本软件的功能、软件的作用、功能的操作，帮助用户理解及操作本软件。

1.1.读者对象

用户操作手册的读者为系统管理员、运维人员和部门用户。

1.2.定义、首字母缩写词和缩略语

1.3.参考资料

无。

环境要求

硬件要求：

名称

推荐硬件指标

数量

Web服务器

32G内存，8核CPU，1T存储空间

2

应用服务器

32G内存，8核CPU，1T存储空间

2

数据库服务器

64G内存，8核CPU，2T存储空间

2

软件要求：

名称

版本

Mysql

5.6.x以上

DM数据库

7.0以上

操作系统器

CentOS6.5，64位

JDK

OracleJDK8，64位

软件配置

软件安装

大数据平台集成了提供一键导航式安装的运维管理子系统（UniOM）。

平台总体安装流程如下：

总体安装流程图

具体步骤如下：

1.安装CentOS

2.部署Yum源服务器

3.安装部署UniOM

4.安装部署Hadoop基础组件

5.安装部署平台子系统

6.安装验收与故障处理

参数配置

请参考《安装部署手册-数据共享交换平台》2.3.5章节。

软件综述

系统简介

数据交换平台是指将分散建设的若干应用信息系统进行整合，通过计算机网络构建的信息交换平台，它使若干个应用子系统进行信息/数据的传输及共享，提高信息资源的利用率，成为进行信息化建设的基本目标，保证分布异构系统之间互联互通，建立中心数据库，完成数据的抽取、集中、加载、展现，构造统一的数据处理和交换。

系统流程介绍

数据共享交换平台主要包括两大核心功能模块：

管理中心、交换节点。

1、管理中心

包含了统一配置管理和统一监控管理两个子模块。

●统一配置管理：

统一配置管理提供了交换基础信息配置，交换业务配置，及系统管理，所有的交换基础信息例如交换节点、交换通道、交换拓扑、交换任务、交换流程等都在此模块统一配置管理。

●统一监控管理：

包含交换环境监控、交换业务数据监控，有了这个监控管理模块，用户能更好的监控整个交换环境及数据交换的情况。

2、交换节点

交换节点提供了从交换数据处理、传输、入目标库等整个交换环节的处理能力。

交换节点可分为前置交换和数据传输两个模块。

●前置交换：

包括数据抽取、流程触发，数据处理等模块，这里主要包含了不同的数据抽取模式、触发模式、及数据处理等；

●数据传输：

数据传输链接，可根据业务需要配置为长链接和短链接，同时支持断点续传，对数据安全可靠传输提供了有力的支持。

功能架构图

操作说明

资源概览

功能描述

资源概览是数据共享交换平台首页，显示平台中管理的资源目录总体情况。

用户通过资源概览可以进一步查询部门、主题、基础库中的资源目录列表。

1.3.1.用户界面

1.3.2.操作方法

查看资源目录列表

点击基础库、部门库、主题库区域，会进入资源目录列表页。

资源列表页面

查看资源详情

在列表页面点击查看，显示资源详情。

点击“文件列表”按钮，显示该资源下所有文件。

最新资源详情

资源概览页面的最新资源区域，点击任意一个资源，可以显示该资源的详细信息。

1.4.我的资源

功能描述

我的资源是部门用户管理自己创建的资源的地方，包括资源的新增、修改、提交审核等功能。

1.4.1.用户界面

1.4.2.操作方法

查看资源详情

选择列表中的一行，点击“操作”栏的“查看”链接，弹出框中显示资源详情。

查看变更历史

选择列表中的一行，点击“操作”栏的“变更历史”链接，弹出框中显示资源的变更记录。

查看审批历史

选择列表中的一行，点击“操作”栏的“审批历史”链接，弹出框中显示资源审批历史。

新增单个资源

点击“新增”按钮，进入资源新增页面

在列表区域可以添加、删除信息项

编辑单个资源

在我的资源中，对状态为“草稿”和“退回修改”的资源可以进行编辑操作。

对编辑页面中的内容修改后，点击“确定”按钮，保存修改结果。

批量新增资源

在我的资源中可以通过Excel上传的方式，批量增加增加资源。

资源提交审核

对于状态为“草稿”和“退回修改”状态的资源，可以点击“提交审核”按钮，提交审核的资源。

提交成功后，资源状态变为“待注册审批”。

数据上报

功能描述

数据上报是为了解决非自动化采集数据的资源数据更新问题，提供给部门用户使用，通过人工上传数据文件的方式更新资源数据的途径。

支持数据库类和文件类资源的数据上报。

1.4.3.用户界面

1.4.4.操作方法

查看上报作业

点击列表中的上报作业编码，显示该作业的执行情况。

上报数据

点击“上报数据”按钮，进入上报数据导航页。

点击“模版下载”，可以获取空的excel表格，将要上报的数据，按照excel的格式要求填充完整后，选择数据批次（数据批次是yyyy-nn-dd格式字符串），通过页面的文件上传功能上传完文件，点击对话框右下角的“上传”按钮，完成一次数据上报。

1.5.订阅申请

功能描述

部门用户通过资源目录订阅申请功能，发起对需求数据资源的订阅申请，订阅审核通过后，平台将数据通过前置机数据库的方式推送到部门的前置机，或者开放文件下载权限，允许部门用户下载资源下的数据文件。

1.5.1.用户界面

1.5.2.操作方法

点击列表页的“订阅”链接，弹出申请对话框。

填写订阅事由、订阅截至日期后，点击“订阅”按钮，完成申请操作。

注册管理-待我审批

功能描述

部门用户创建资源后，要先提交到部门管理员，进行注册审批。

部门管理员确认提交的资源描述没有错误，审批同意后，变成待发布状态。

审批拒绝后，变成退回修改状态。

1.5.3.用户界面

1.5.4.操作方法

审批操作

点击“审批”链接，进入审批页，可以看到资源详情，部门管理员可以修改资源内容，点击“保存”生效。

点击“同意”审批同意，或者“不同意”审批拒绝。

1.6.注册管理-我审批的

功能描述

我审批的页面，显示当前用户审批过的资源记录。

1.6.1.用户界面

1.6.2.操作方法

查看详情

点击“详情”链接，显示选定资源的详细信息。

查看审批历史

点击“审批历史”链接，显示选定资源的审批记录。

订阅管理-我订阅的

功能描述

1.6.3.用户界面

1.6.4.操作方法

1.7.订阅管理-待我审批

功能描述

订阅审批员，通过待我审批页面，查看所有待审批的订阅申请，可以同意或者拒绝其他部门的订阅申请

1.7.1.用户界面

1.7.2.操作方法

审批操作

点击“审批”链接，进入审批界面。

填写审批意见后，点击“同意”或者“不同意”完成审批操作。

查看订阅详情

点击“订阅详情”，显示订阅的详细信息。

1.8.订阅管理-我审批的

功能描述

查看用户订阅审批的操作记录。

1.8.1.用户界面

1.8.2.操作方法

查看用户订阅审批的操作记录。

1.9.系统管理-资源分类管理

功能描述

维护资源分类信息。

1.9.1.用户界面

1.9.2.操作方法

新增单个节点

点击左上角“新增”

图标，弹出新增操作对话框。

批量新增节点

点击左上角“文件上传”

图标，弹出文件上传对话框，可以通过excel上传，一次性创建多个节点。

1.10.系统管理-系统参数

功能描述

通过系统参数配置功能，可以定义共享交换平台运行参数。

包括文件类资源目录、上报文件目录、上传文件大小等。

1.10.1.用户界面

1.10.2.操作方法

文件类资源目录：

表示文件类资源数据文件存储的HDFS路径，该路径在元数据管理-元数据定义功能页面中设定好，在本页面只能做选择操作。

上报文件目录：

表示数据上报中上传的文件存储的临时目录的HDFS路径，该路径在元数据管理-元数据定义功能页面中设定好，在本页面只能做选择操作。

部门管理员：

负责部门用户创建的资源目录的注册审批。

数据中心管理员：

负责整个数据共享交换平台的运营，数据目录的上架和下架，拥有所有菜单权限。

订阅审批角色：

负责本部门资源目录订阅审批。

目录填报角色：

负责部门资源目录的创建和修改，默认所有部门用户都拥有该角色权限。

1.11.系统管理-资源维护

功能描述

资源维护功能，是数据中心管理员操作资源上架、下架的地方。

1.11.1.用户界面

1.11.2.操作方法

资源下架

对于已发布的资源，可以进行下架操作。

选择要下架的资源，点击“下架”按钮。

下架成功的资源状态为“下架”。

资源发布

对于下架状态的资源，可以重新发布。

选择一个已下架的资源，点击“发布”按钮。

资源状态重新变成“已发布”状态。

资源退回修改

对于下架状态的资源，可以退回到部门目录填报人员处，做修改操作。

选择一个已下架的资源，点击“退回修改”按钮，资源从列表中消失，回到创建人“我的资源”列表中。

1.12.系统管理-服务管理

功能描述

管理平台使用的第三方服务和平台发布的共享服务。

1.12.1.用户界面

1.12.2.操作方法

新增服务

点击“新增”按钮，弹出新增操作对话框。

填写完必要内容后，点击“确定”按钮保存。

1.13.交换管理-日志管理

功能描述

服务日志功能，用来记录服务调用的过程数据，包括：

调用方、调用时间、执行时长、输入输出和错误日志。

1.13.1.用户界面

1.13.2.操作方法

1.14.交换管理-作业管理

功能描述

作业管理实现对上报数据任务和交换任务的状态监控。

1.14.1.用户界面

1.14.2.操作方法

1.15.交换管理-前置管理

功能描述

管理部门前置机信息，当执行数据交换任务时，系统可以根据部门前置机信息，将数据推送到预设的位置。

1.15.1.用户界面

1.15.2.操作方法

新增前置机

列表页点击“新增”按钮，弹出新增前置机对话框，选择部门、服务器、数据库实例，填写sFTP端口和用户名，点击“确定”保存。

1.16.发布管理-待我审批

功能描述

1.16.1.用户界面

1.16.2.操作方法

1.17.发布管理-我审批的

功能描述

查看用户发布审批的操作记录。

1.17.1.用户界面

1.17.2.操作方法

查看操作

点击“查看”链接，显示审批资源的详情。

查看审批历史

点击“审批历史”链接，显示该资源的审批历史。

附录：

常见问题解答