关于springboot:数据处理分析平台一

36次阅读

共计 2300 个字符,预计需要花费 6 分钟才能阅读完成。

一、简介

RSCMP-HDP 数据分析平台蕴含数据源适配、ETL 数据处理、数据建模、数据分析、数据填报、工作流一站式数据处理剖析平台。
数据获取形式:
a、通过文件类型创立多数据源
b、连接池多数据源
c、接口

二、数据回填

1、目前已撑持在线表格数据填报,减少对表格数据、格局的审核性能
2、理论的业务流程在工作流中流转体现,在工作流编辑工具中,用图形化的形式将理论的业务过程或步骤形容进去,并转化成标准的工作流定义语言格局。
3、数据权限、审核权限设定。

三、数据可视化

1、报表统计
2、内置域对立 XML 接口 json 格局
四、门户、机构权限
数据连贯设置:
1、/**

 * 性能形容: 增加数据源
 * 〈〉
 * @Param: [diaSource]
 * @Return: com.rscmp.hdp.datrans.source.domain.DiaSource
 * @Author: Steven
 * @Date: 2021/7/12 18:08
 */
@Override
public void addDiaSource(DiaSource diaSource) {Map<String, String> params = new HashMap<String, String>();
    params.put("connectorType",diaSource.getDriveType());
    params.put("password",diaSource.getUserPass());
    params.put("name",diaSource.getName());
    params.put("driverClassName",diaSource.getDriverClassName());
    params.put("url",diaSource.getUrl());
    params.put("username",diaSource.getUserName());
    ConfigModel model = connectorChecker.checkAddConfigModel(params);
    manager.addConnector(model);
}

/**
 * 性能形容: 新增配置
 * 〈〉
 * @Param: [diaSource]
 * @Return: com.rscmp.hdp.datrans.source.domain.DiaSource
 * @Author: Steven
 * @Date: 2021/7/12 18:08
 */
@Override
public ConfigModel checkAddConfigModel(Map<String, String> params) {String name = params.get(ConfigConstants.CONFIG_MODEL_NAME);
    String connectorType = params.get("connectorType");
    Assert.hasText(name, "connector name is empty.");
    Assert.hasText(connectorType, "connector connectorType is empty.");

    Connector connector = new Connector();
    connector.setName(name);
    connector.setType(ConfigConstants.CONNECTOR);
    setConfig(connector, connectorType);
    // 配置连接器配置
    String type = StringUtils.toLowerCaseFirstOne(connectorType).concat("ConfigChecker");
    ConnectorConfigChecker checker = map.get(type);
    Assert.notNull(checker, "Checker can not be null.");
    checker.modify(connector, params);
    // 获取表
    setTable(connector);
    // 批改根本配置
    this.modifyConfigModel(connector, params);
    return connector;
}
/**
 * 性能形容: 连贯配置
 * 〈〉
 * @Param: [diaSource]
 * @Return: com.rscmp.hdp.datrans.source.domain.DiaSource
 * @Author: Steven
 * @Date: 2021/7/12 18:08
 */
private void setConfig(Connector connector, String connectorType) {Class<ConnectorConfig> configClass = (Class<ConnectorConfig>) ConnectorEnum.getConfigClass(connectorType);
    Assert.notNull(configClass, String.format("不反对该连接器类型:%s", connectorType));
    try {ConnectorConfig config = configClass.newInstance();
        config.setConnectorType(connectorType);
        connector.setConfig(config);
    } catch (Exception e) {// logger.error(e.getMessage());
        throw new BizException("获取连接器配置异样.");
    }
}

正文完
 0