瓴羊旗下的智能数据建设与治理平台Dataphin近日推出V3.14全新版本,此次更新大力强化了对传统数据库MySQL、Oracle的研发和任务调度支持,全面拓展数据研发能力,在数据智能时代中为各企业构建起高效、可靠、安全且易用的企业级数据资产体系,推动数据价值最大化。
突破全域覆盖,实现更高效便捷的数据研发
DataphinV3.14现全面支持Oracle和MySQL数据库的SQL研发、调度与运维工作。用户能够在Notebook和SQL分析环境中直接探查并分析数据库内部数据,实现一站式无缝数据研发及快速验证,无需跨平台协作。同时,通过统一采用Hive元数据存储,兼容SparkSQL、HiveQL和ImpalaSQL等多种引擎,其中SparkSQL凭借其卓越的查询性能和高度语法兼容性,以及内置丰富函数,为企业在复杂数据分析与处理上提供了更多可能,助力提升数据加工处理与分析效能。
![](https://pic.wy6000.com/upload/image/rw/doc/20240202/paste_271_b314bb2612b8c19bf3a0277010bff1aa.png)
同时新版本还支持FlinkSQL任务基于Session集群进行调试,便于实时在线调试代码逻辑,更加灵活可控地处理线上数据。
灵活可控的资产治理,即时全面的数据保护
本次升级的一大亮点是针对识别规则未覆盖或新增的数据字段,系统将自动基于血缘关系继承上游分类分级,结合默认脱敏策略,有效降低敏感数据不当使用和泄露的风险,并独立管控数据标准上下线审批流程,实现批量审批高效化,满足企业的差异化管理需求。
新增了FPE加密解密算法,适用于个人隐私信息、医疗健康等敏感数据场景,相比AES等传统算法,FPE在保障数据安全的同时,能够保持原始格式不变,确保数据加工处理过程不受影响,并保持数据库结构和查询性能稳定。此外,DataphinV3.14提供灵活的可视化配置工具和多种异常兼容策略,广泛应用于集成任务加密组件、脱敏规则制定以及代码任务中的FPE算法调用场景。
![](https://pic.wy6000.com/upload/image/rw/doc/20240202/paste_271_8fcea7beffc96e60313793147d3aee4e.png)
自由适应企业个性化需求,助力高效运营
为了更好地适应企业个性化需求,DataphinV3.14新增了对接企业微信和飞书群机器人的消息渠道功能,告警信息和系统通知可自动发送至预先配置的群机器人。
![](https://pic.wy6000.com/upload/image/rw/doc/20240202/paste_271_6d35a69a7abbe06e19945705e7774389.png)
同时,支持公告发布、首页介绍视频嵌入、备案号展示等个性化配置选项,便于平台及时传递重要信息,帮助用户高效学习和运用各项功能。例如,版本停服升级前可通过租户公告预发通知,协助相关人员提前准备业务预案;升级后则可通过公告推送新版本亮点功能图文介绍,引导用户掌握新功能操作;上线核心资产时,亦能迅速传达相关资产内容,同步开发人员和业务人员共同使用。
![](https://pic.wy6000.com/upload/image/rw/doc/20240202/paste_271_ec3d741e4c5a479a4604aac70f6fae62.png)
![](https://pic.wy6000.com/upload/image/rw/doc/20240202/paste_271_3a45b90020b0b93f07bee8effd12d055.png)
DataphinV3.14版本涵盖了四大方向超过20项功能更新,服务17个应用场景。未来,Dataphin将持续迭代,计划在下一个版本中推出升级版元数据中心、智能化数据标准推荐映射等功能,敬请期待更多创新体验!