首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >qData数据中台【商业版】v1.1.10 全新发布:多源数据集成全面升级,清洗规则体系再进化!

qData数据中台【商业版】v1.1.10 全新发布:多源数据集成全面升级,清洗规则体系再进化!

原创
作者头像
吴同
发布2025-10-31 21:55:15
发布2025-10-31 21:55:15
1180
举报
文章被收录于专栏:qData数据中台qData数据中台

随着企业数据环境日益复杂,如何高效整合多源异构数据、实现灵活可视化编排与智能治理,成为数据中台的关键能力。

qData 作为新一代智能数据中台,本次 v1.1.10 版本 围绕「多源数据集成」「MongoDB 数据源接入」「清洗规则体系完善」等核心方向进行了重大升级,进一步强化系统的开放性与可维护性。


🧭 版本概述

qData 数据中台商业版 v1.1.10 聚焦于 多源数据融合、灵活任务编排与可视化交互体验 的全面优化:

  • 新增多表 Join 组件,支持复杂数据融合;
  • 新增 MongoDB 数据源与组件,打通文档型数据库通道;
  • 完善清洗规则体系,实现更直观、更高效的数据治理;
  • 同步优化日志机制、资产模块与前端性能。

本次更新不仅让 qData 在异构数据环境下的操作更流畅,更为企业构建高质量数据资产提供了坚实支撑。


🛠 主要更新内容

🔹 1. 数据集成能力再升级

  • 🧩 多表 Join 关联组件:undefined支持多表左/内连接、字段映射、条件配置与类型校验,轻松应对复杂数据融合场景。
  • 🍃 MongoDB 数据源接入:undefined新增 MongoDB 连接支持,包括连接测试、集合结构自动识别与字段映射。
  • ⚙️ MongoDB 输入输出组件:undefined支持集合级数据读取与写入(插入、更新、覆盖写),让文档型数据与结构化数据无缝衔接。
  • 💡 Java 脚本组件:undefined支持在数据集成流程中灵活编写逻辑,提升 ETL 流程的可定制性。
  • 🔄 多异构数据源联动:undefined实现 MySQL、DM8、Kingbase、Doris、MongoDB 等多端协同,满足跨源汇聚与多目标分发。
  • 🖱️ ETL 交互优化:undefined属性配置更流畅,建模体验更自然,复杂流程的操作效率显著提升。

🔹 2. 清洗规则体系完善

清洗规则体系实现前后端联动优化,配置更直观、执行更高效,新增与优化如下规则:

  • 字段值替换
  • 超长字段截取
  • 日期格式统一
  • 主键去重
  • 日期空值填充
  • 手机号格式统一

同时支持规则示例预览、参数校验与执行日志增强,让清洗任务更可控、更可追踪。


🔹 3. 系统与交互优化

  • 🧾 日志机制重构:数据质量任务日志结构更清晰,查询与定位更高效。
  • 📦 数据资产模块重构:目录结构与依赖优化,扩展性与维护性全面提升。
  • 🔍 资源检索性能优化:海量数据场景下响应速度显著提升。
  • ⚠️ 异常捕获增强:系统稳定性进一步提升,任务风险显著降低。
  • 🧭 ETL 页面连线体验优化:更精准的连线操作,更流畅的可视化设计体验。
  • 🖼️ 图片预览交互优化:点击任意空白处即可关闭,操作更自然。
  • 📋 作业管理新增描述字段:便于任务文档化与后期维护。
  • 前端加载与响应性能优化:整体交互体验再度提速。

🌟 版本亮点总结

模块

主要增强点

价值提升

数据集成

MongoDB 支持 + 多表 Join

实现多源异构数据融合

清洗规则

六大清洗功能优化

规则配置更清晰、执行更稳定

系统性能

日志、异常、前端优化

系统更稳定,体验更流畅

资产管理

模块重构

扩展性与维护性全面提升


💬 总结

qData 数据中台商业版 v1.1.10 的发布,标志着 qData 商业版在多源数据融合与数据治理领域迈上新台阶。

未来,qData 将持续围绕「数据智能化」「模型化治理」「低代码可视化」三大方向深耕,助力企业打造高效、可靠、智能的数据中台。

✨立即咨询 qData 数据中台商业版 v1.1.10,探索更智能的数据集成与治理之路。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 🧭 版本概述
  • 🛠 主要更新内容
    • 🔹 1. 数据集成能力再升级
    • 🔹 2. 清洗规则体系完善
    • 🔹 3. 系统与交互优化
  • 🌟 版本亮点总结
  • 💬 总结
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档