# mydata-blade

**Repository Path**: itllb/mydata-blade

## Basic Information

- **Project Name**: mydata-blade
- **Description**: mydata是基于Web API的数据集成平台，提供数据集成服务，简化跨系统之间的数据对接；
mydata-blade是平台后端，基于 SpringBlade 微服务平台开发；
- **Primary Language**: Java
- **License**: Apache-2.0
- **Default Branch**: boot
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 0
- **Forks**: 13
- **Created**: 2023-12-28
- **Last Updated**: 2023-12-28

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# MyData 数据融合平台

基于Web API的数据融合平台，提供数据融合服务，简化跨系统之间的数据对接；

* 数据结构支持自定义配置；
* 配置调度任务，调用API 实现数据的读与写；
* 数据安全，业务系统无需暴露数据库；
* 零侵入，无需引入额外SDK；

采用前后端分离框架开发；

* mydata-blade是平台后端，基于 [SpringBlade](https://gitee.com/smallc/SpringBlade) 开发；

* mydata-sword是平台前端，基于 [Sword](https://gitee.com/smallc/Sword) （React、Ant Design）开发；

# 演示&交流

* Demo体验环境：http://www.mydata.work
* 交流Q群：430089673

# 更新记录

## 0.7.0（2023-12-26）

### 新功能

- 项目管理

    - 新增模块，用于按项目区分管理数据集成相关内容；

    - 项目数据项管理，用于管理项目里的数据标准；

    - 数据项任务管理，按环境管理数据的同步任务；

- 环境管理
    - 增加所属项目，环境按项目区分管理；

- 数据存储
    - 业务数据按 租户、项目、环境 区分存储，以便隔离项目中的开发、测试、生产等多个环境的业务数据；

### 优化

- 定时任务
    - 增加数据库加密开关参数；

### 修复

- 任务管理
    - 修复编辑任务时，若未关联数据项时 显示-1的问题；

## 0.6.1（2023-11-21）

### 修复

- 【定时任务】
    - 修复任务启动状态 但后台不执行问题；
    - 修复任务更新时 丢失参数问题；

- 【环境变量】
    - 修复环境变量值的缓存 在定时任务中未更新问题；

### 优化

- 【定时任务】
    - 增加定时任务存活的检查和恢复；
    - 完善日志内容，方便查看执行过程和异常追踪；

## 0.6.0（2023-11-11）

### 新功能

- 【环境管理】
    - 增加环境变量管理，提供变量值的存储和查看；

- 【任务管理】

    - 增加数据存入变量，配置API返回结果中某些字段值存入指定变量；
    - 增加手动执行功能，方便立即确认任务能否正常运行；

- 【接口管理】
    - Headers、Params 支持配置变量名，任务执行时获取变量的值；

## 0.5.0（2023-10-07）

### 演示环境

- 新增采集“核辐射”数据，包括省份信息、省份监测记录、监测站点信息、站点每日监测记录；

### 新功能

- 【数据管理】支持多个字段组合为唯一标识；

### 修复

- 【接口管理】调试中的ContentType增加raw选项；
- 【环境管理】为支持第三方外部应用，环境前缀可为空；
- 【任务管理】修复编辑任务后周期不更新问题；

## 0.4.0（2023-04-05）

### 新功能

- 【接口管理】新增和编辑表单页面 增加在线调试接口功能；
- 【定时任务】任务异常结束时 发送邮件通知；

## 0.3.0（2023-02-28）

### 新功能

- 【应用管理】新模块，管理API所属的应用信息；
- 【接口管理】增加所属应用配置；
- 【任务管理】增加过滤条件配置，提供数据时 用于清洗数据，消费数据时 用于过滤数据；
- 【工作台】新增 数据项、应用、API、任务 相关的概要统计；

### 修复

- 【任务管理】优化字段映射配置，不是所有字段都需要映射；

## v0.2.0（2022-08-30）

### 新功能

* 上线Demo体验环境，http://www.mydata.work ；
* 【任务管理】增加任务模式：订阅模式；
* 【定时任务】实现订阅模式：当定时任务获取业务数据后 立即推送给订阅相同数据项的任务；
* 【接口管理】增加header、query参数配置；
* 【环境管理】增加通用header、query参数配置；

## v0.1.0（2022-07-30）

### 新功能

* 【数据管理】维护业务数据项及其字段；
* 【接口管理】维护API基本信息；
* 【环境管理】维护环境，以便相同的API在不同运行环境中的调用；
* 【任务管理】维护“提供数据”和“消费数据”类型的任务，能够手动启动和停止，查看任务日志；
* 【定时任务】定时运行启动的任务，从接口获取业务数据并保存到数据仓库、定时向接口发送业务数据；