# 德塔数据分析ETL源代码 **Repository Path**: DetaChina/Deta_Unicorn_ETL ## Basic Information - **Project Name**: 德塔数据分析ETL源代码 - **Description**: 数据可视化 数据分析 ETL - **Primary Language**: Java - **License**: GPL-2.0 - **Default Branch**: master - **Homepage**: https://github.com/yaoguangluo/ETL_Unicorn - **GVP Project**: No ## Statistics - **Stars**: 166 - **Forks**: 61 - **Created**: 2019-06-04 - **Last Updated**: 2025-04-20 ## Categories & Tags **Categories**: data-mining **Tags**: None ## README # 🔥 Deta ETL AI Workflow Tool Software For Data Mining Piple Line Operations /德塔人工智能数据分析ETL可重用节点工作流处理软件引擎系统。 ## 这个工程用于节点数据工作流执行。该软件的亮点为：世界最轻的ETL批处理引擎（6KB）采用VPCS结构，启动快，效率高，操作简单，结构轻，网页嵌入，执行快，高并发，二次开发简易，自由修改源码实现各种风格。 ##### <<100%属于(首创)个人著作权 引擎系统 cn 2019R11L803285>> 当前版本号 V1.0.2 软著登字第4240558号 ##### 说明书地址： https://github.com/yaoguangluo/AOPM_VPCS_Theroy/blob/master/%E5%BE%B7%E5%A1%94ETL%E5%8F%AF%E8%A7%86%E5%8C%96%E6%95%B0%E6%8D%AE%E5%88%86%E6%9E%90%E5%BC%95%E6%93%8E%E7%B3%BB%E7%BB%9FAPI%201.0.2%20%E8%AF%B4%E6%98%8E%E4%B9%A6%20final.docx ##### 皮肤系统 3%借鉴Sun Tech的开源组件皮肤实例(拖标样式，Jtree样式和分割板样式)。已经从该项目移动到如下项目。 https://github.com/yaoguangluo/Data_Processor/tree/master/DP/org/LYG/GUI/platForm ##### 皮肤系统 神经元皮肤 灵感思想来自牛顿教授linkedin发布的各种脑科图片 注 如图 右下角 红色部分 神经细胞。 ![实例](https://images.gitee.com/uploads/images/2019/0604/025722_0e7e9c78_5008798.jpeg) ##### 节点系统 的文件命名规则 采用 Knime的节点包文件命名规则(配置，执行，查看 3个词语)), （该规则世界主流分析软件通用）。 ###### 作者感谢德国康斯坦茨大学 Knime 项目组。为作者提供了ETL知识 与其 年轻时启蒙基础。并永久承诺该项目的闭源商业应用10%的综合权益赠与 Knime 项目组。 ###### 作者感谢英国牛津大学 牛顿霍华德教授。并永久承诺该项目的闭源商业应用3%的综合权益赠与牛顿霍华德教授。 ###### 作者感谢github，给作者免费的移动硬盘空间服务，并永久承诺该项目的闭源商业应用1%的综合权益赠与github 运维组。 ###### 作者感谢gitee，给作者免费的移动硬盘空间服务，并永久承诺该项目的闭源商业应用1%的综合权益赠与gitee 运维组。 ###### 作者感谢 Sun Tech (被甲骨文公司收购) JDK控件开发组。并永久承诺该项目的闭源商业应用1%的综合权益赠与JDK控件开发组。 ## 项目进展 ##### ![实例](http://progressed.io/bar/30)正完善功能 算法整体优化。 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 快速链接弧线箭头带精度自适应未优化版。Mr.Yaoguang 20190306 ![实例](https://images.gitee.com/uploads/images/2019/0604/025704_0b677f81_5008798.png) ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 引擎 while loop 优化，大幅缩短延迟。 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 汉化版本 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 比较级优化，避免条件错误。 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 引擎优化 一次操作500节点不卡。 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 数据操作进行文字提示 20190304 Mr.Luo ##### ![实例](http://progressed.io/bar/90?title=completed)正完善功能 神经元细胞皮肤设计，灵感来自牛顿教授。, 1:1, 1:2, 2:1, 2:2, 3:1(已完成), 3:2, 3:3。 20190223 罗瑶光 ![实例](https://images.gitee.com/uploads/images/2019/0604/025704_ecaa7c58_5008798.jpeg) ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 可自由以applet形式发布到网页上。 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 可自由设置节点的传递对象。 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 可自由修改和引用任何api。 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 可自由集成各种javaUI组件。 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 可自由嵌入到各种java程序中。 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 节点流序列化 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 节点流多样化 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 节点分级 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 节点终端处理 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 节点实例化 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 节点功能操作 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 osgi扩展 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 节点连线时进行去其他节点闪烁优化。 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 规范了下编程结构。 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 链接自动校准 2012-2019 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 链接磁力效果 20190203 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 链接点提示 20190203 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 文件命名规范 20190203 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 节点输入输出链接点提示 20190203 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 将放映界面从70帧改成32帧，有效滤燥 20190203 罗瑶光 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 上中下的三种连接模式进行美观化。 20190205 罗瑶光， 简单实现而已，专业设计搁置 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 箭头校准(箭头画采用bit map)。 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 节点功能窗口显示放弃JInternalFrame 采用 JFrame,因为画版是自己手工的, 所以刷新针把窗体给透明了,造成关闭按钮动态显示需要鼠标移动右上角激活,现在已经修复.20190504 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 箭头比例修正。链接修正。20190206 罗瑶光 ##### ![实例](http://progressed.io/bar/70?title=completed)已完善功能 节点 神经元结构设计。 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 (图形加速算法正在设计)自适应操作速度开始优化20190503. ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 规范编程变量名称。 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 异常提示功能区。 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 节点连线完整性矫正。20190612 ##### ![实例](http://progressed.io/bar/100?title=completed)已完善功能 ETL 删除功能 实现。20190604 ##### ![实例](http://progressed.io/bar/99?title=completed)正完善功能 带单例运行记录，保存，载入，刷新。删除, 其他的流整体档案操作ok了，只差配置执行数据了。 20190606 ##### ![实例](http://progressed.io/bar/79?title=completed)正完善功能 《码农的修养》格式化中。。。。 ##### ![实例](http://progressed.io/bar/99?title=completed)正完善功能 一键执行功能. ##### ![实例](http://progressed.io/bar/62?title=completed)正完善功能 全面过渡到 vpcs 催化结构和细化工作。已完成局部pcs注册工厂模式。 ##### ![实例](http://progressed.io/bar/99?title=completed)正完善功能 一键执行功能. ##### ![实例](http://progressed.io/bar/92?title=completed)正完善功能 一键档案执行功能. ##### ![实例](http://progressed.io/bar/72?title=completed)正完善功能 一键批处理档案集合执行功能. 这几天写下unit 测试包. ##### ![实例](http://progressed.io/bar/28?title=completed)正完善功能 所有代码进行文字描述，方便日后出版。作者要组织文字来描述当年为什么要这样写，写的时候遇到了什么困难， 是怎么解决的，写的时候怎么思考，将来需要怎么优化等。 ##### ![实例](http://progressed.io/bar/68?title=completed)正完善功能 软件执行可观测的状态map ##### 未完善功能 batch 批处理（不再做这CMD功能， 以后做 TinShell） ##### 未完善功能 最近100次节点配置记录流程进行 时间操作。 ##### 未完善功能 集成更多的weka 和 R ##### ![实例](http://progressed.io/bar/28?title=completed)正完善功能 第5次 引擎清洗，全面用VPCS 替换 vpc 结构，需要时间。 ##### 未完善功能 删除功能进行美观化。 ##### 未完善功能 多国语言。 ##### 未完善功能 基于这个etl 软件 开发商业版，把我的照片去掉，换成开源无版权的独角兽图片。 ##### 未完善功能 osgi 注册模式修改为文件 扫描注册。 ![实例](https://images.gitee.com/uploads/images/2019/0604/025716_f7c52c54_5008798.png) ![实例](https://images.gitee.com/uploads/images/2019/0604/025717_3005a67f_5008798.jpeg) ![实例](https://images.gitee.com/uploads/images/2019/0604/025718_2bc2fb0f_5008798.jpeg) ![实例](https://images.gitee.com/uploads/images/2019/0614/054920_05fc6cd9_5008798.jpeg) ## 德塔数据分析怎么编译 ##### 该软件 只需要一个Java IDE（eclipse， idea 等）， 和utf8字符集，在任何支持JDK8+以上的操作系统都能跑。 ##### 该软件引擎 作者纯手工，没有任何插件，可自由翻译成其他语言版本。 ## 德塔数据分析怎么编译 ##### 该软件 只需要一个Java IDE（eclipse， idea 等）， 和utf8字符集，在任何支持JDK8+以上的操作系统都能跑。 ##### 该软件引擎 作者纯手工，没有任何插件，可自由翻译成其他语言版本。 作者：罗瑶光 20190310