数据中台
先知数据中台为学校数据统一、管理、处理和运用提供一站式平台服务,具备智能和AI嵌入能力, 帮助学校挖掘和发现数据价值,进行智能应用的构建。
系统功能:
一、基础平台
平台首页展示数据源总数、集成任务总数、开发任务总数、API接口总数、Flink任务列表等。
平台涵盖了基础建设、数据治理、标签应用、数据集成、数据开发、调度中心、数据服务、人工智能、流程管理等能力。
二、元数据管理
元数据是描述数据的数据,通过元数据对数据进行结构化描述,可以使用数据更容易理解、查找和使用。因此,科学规范的元数据管理是数据开发、治理、管理的基础。
三、标签应用
在数据中台架构中,标签是一个重要的组成部分。通过标签,数据中台可以对数据进行分类、标记和索引,使得数据的检索和使用更为便捷。同时,标签还可以用于数据的清洗、去重和校验,确保数据的准确性和完整性。此外,标签还可以用于数据的隐私保护和安全控制,通过限制对敏感数据的访问来提高数据的安全性。
主要包括标签分类管理、标签库管理、人物画像管理、标签运营管理等功能。
四、数据资产目录
数据开放共享的窗口,用户可基于资产目录进行全局数据检索访问、数据订阅以及API 服务接口申请。改变校园数据沉积在数据库底层不可见、难管理、难获取、难理解、难使用的现状,激发用户发掘数据价值的积极性和效率。
五、数据服务
数据服务是将中台内整合、处理后的各类数据,通过标准化接口或工具,按需提供给校内不同角色与应用场景使用的服务体系。
提供包括API接口测试、外部接口测试、API接口列表、访问权限管理、访问权限管理、调用频次列表、JSON格式化等服务。
六、数据集成
数据集成有助于提高数据质量,不同系统的数据可能存在格式不规范、重复、错误等问题。通过数据集成,可以对数据进行清洗、转换和标准化处理。比如统一学生身份信息格式,去除重复的学生记录,纠正错误的联系方式等,从而提升数据质量。
主要包括中台项目管理、任务调度模版、构建单表任务、构建多表任务、任务调度执行、查看任务日志。
数据血缘图
数据血缘图有助于数据溯源,它能够清晰展示数据的来源和演变过程。例如,在一个数据分析项目中,通过数据血缘图可以追溯报表中的某个数据是从哪个原始数据库表提取的,经过了哪些转换和处理步骤,这有助于数据审计和验证数据的准确性。
七、调度中心
主要包括调度资源监控、系统任务列表、系统执行日志、运行文件列表、DAG任务编排、任务调度列表、任务调度日志等功能。
八、人工智能
主要包括AI智能问答、AI图像生成、AI代码生成、AI语音转换、AI短视频库等功能。
留言咨询