首页 > 社交 > 科普中国

智慧城市数据中台数字孪生城市建设方案(57页WORD)

常驻编辑 科普中国 2022-05-24 检核   数据   作业   城市建设   规则   指标   智慧   加工   标签   数据模型   数字   基础   方案   专题   城市
o6w拜客生活常识网

平台应提供可视化引用数据标准创建数据模型的能力,实现模型创建的标准化和便捷化。o6w拜客生活常识网

开发者可上传本地自定义的jar、txt或json文件作为资源,在节点运行时使用(如创建自定义函数、加载数据等)。o6w拜客生活常识网

支持系统函数和自定义函数,系统函数主要包括字符函数、数学函数,日期函数,聚合函数等,同时支持自定义函数。o6w拜客生活常识网

支持对当前项目空间所有能使用的表的字段信息、分区信息进行查看,对表数据进行预览;提供字段引用、表名拖拽方式,快速生成SQL语句;支持在线可视化建表。o6w拜客生活常识网

对整个运维中心的任务(流)进行统一查看,包括任务总数、运行成功、失败、运行中、等待资源的任务总数,动态展示任务(流)的执行情况等。支持对任务的冻结、解冻、补数据操作,可以查看任务每次运行实例的运行日志、运行代码。o6w拜客生活常识网

针对单个任务可自定义预警项目(任务完成、任务未完成、任务出错、任务超时),确定任务接收人,当系统检测到对应任务有触发预定规则的,将通过邮件、系统消息、短信等告警方式向相关接收人推送预警信息。o6w拜客生活常识网

(2)实时计算o6w拜客生活常识网

支持通过项目空间来实现组织、人员、数据源、计算资源的安全隔离。项目空间初始化时支持为单个项目空间分配独立的调度资源池来实现计算资源的精准调控和分配。项目配置时支持对项目的基本属性、成员进行维护以及对数据源、计算引擎进行查看。其中基础配置应支持对项目空间中是否启用“实时采集”、“上传资源”、“FlinkSQL脚本模式”等进行控制。同时对任务的并行度及上传文件大小限制进行预设置。o6w拜客生活常识网

平台应在提供实时计算脚本在线编辑的基础功能之上,将脚本编写过程中常用的算子封装为可视化的组件,用户只需轻松拖拽组件简单配置便可实现实时数据处理。屏蔽脚本开发的复杂性,降低对实时数据开发人员的技术要求,提升实时数据开发效率。要求提供的组件应包含数据源表、数据维表、数据处理、结果表四类,其中数据处理组件应包含连接、过滤、聚合、字段转换等组件。o6w拜客生活常识网

开发者可上传本地自定义的jar、python或文件作为资源,在节点运行时使用(如创建自定义函数)。o6w拜客生活常识网

支持系统函数和自定义函数,系统函数主要包括字符函数、数学函数,日期函数,聚合函数等,同时支持自定义函数。o6w拜客生活常识网

对实时采集任务、实时计算任务的运维管理功能,支持任务运行状态总览、查看单任务运行状态及对当前任务进行修改,提交,停止,续跑操作。应支持单个任务的运行监控、运行日志查看、运行代码查看及告警配置功能。其中运行监控的指标项应包含输入/输出RPS,输入/输出BPS,累计输入/输出记录数,累计输入/输出数据量等。o6w拜客生活常识网

针对单个任务可自定义预警项目(任务失败,任务停止、消费延迟),确定任务接收人,当系统检测到对应任务有触发预定规则的,将通过邮件、系统消息等告警方式向相关接收人推送预警信息。o6w拜客生活常识网

大数据安全中心

从数据采集安全、数据存储安全、数据传输安全、数据使用安全四个方面来全面管理控制数据全流程安全。提供对数据库表、文件、图片、视频等结构化和非结构化数据的安全管理功能。o6w拜客生活常识网

数据沙箱平台

(1)数据源管理o6w拜客生活常识网

支持通过与数据源进行数据连接(支持HDFS、MySQL、Oracle、Hive、Cache、SQLServer六种类型连接数据源)方式连接/获取数据源信息。o6w拜客生活常识网

支持CSV、xls、xlsx、ZIP四种文件类型上传数据,支持UTF-8、GBK两种数据编码格式。o6w拜客生活常识网

支持对数据源的批量操作,包括同步、删除、启用、禁用;支持管理和查询数据表、数据字段。o6w拜客生活常识网

支持数据预览。o6w拜客生活常识网

支持导入数据字典文件。o6w拜客生活常识网

(2)沙箱环境初始化o6w拜客生活常识网

支持用户的批量导入、导出,支持导入用户时创建用户组、并且将用户加入到用户组当中。o6w拜客生活常识网

支持通过控制用户的IP地址(黑名单或白名单)和MAC地址(黑名单或白名单)以及访问时段控制,限制用户访问。o6w拜客生活常识网

支持用户的批量修改,包括重置密码、修改有效期、修改登录时段、修改IP限制、修改MAC限制。o6w拜客生活常识网

(3)数据空间管理o6w拜客生活常识网

支持为每个数据空间独建租户,在多租户环境下,各个数据空间共用相同的系统或程序组件,并且可确保彼此间数据的隔离。支持系统管理员查询数据空间的资源情况,并对相应的存储资源使用进行授权。

相关阅读:

  • 上海徐汇:周一、周三晚间开展全区三天两检核酸筛查
  • 9月2日0-2时,海口新增1例无症状感染者,为外省返海口人员
  • 诸城市愿检尽检核酸采样点有哪些
  • 潍坊坊子区人民医院愿检尽检核酸采样点恢复
  • 核酸检测有什么变化?哪些地方不用做核酸检测了?
  • 光环大数据培训怎么样(大数据对培训与开发)
  • 手机恢复出厂设置会怎么样(手机如何永久删除数据)
  • 数据分析的方法有哪些(数据分析通常包括哪两种方法)
  • 哪些是大数据(大数据具有哪些基本特征)
  • 分析软件有哪些(数据分析软件排名)
    • 网站地图 |
    • 声明:登载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述。文章内容仅供参考,不做权威认证,如若验证其真实性,请咨询相关权威专业人士。