- 1、本文档共29页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
青海大学大数据中心建设技术方案分享学校现状与遇到的问题分析12具体的解决办法和思路CONTENT目录3整体解决方案和产品功能介绍青海大学现状分析和主要问题学校数据接入不全。1、日志类数据;2、视频类数据;3、MQ消息类数据;4、API接口类数据;5、水电暖、以及其他环境感知IOT设备等。青海大数据已建设的数据仓库系统(离线数仓),不是全域数据的接入。以上每天产生大量的数据,这些数据种类丰富、数量大,具有高度的可分析和应用价值。目前的学校数据接入已无法满足全量数据的接入需求。学校无有效数据治理和分析。1、学校亟需对各类原始数据进行场景化、定制化需求做数据分析2、学校已构建数据仓库系统(离线数仓),满足不了实时数据分析的需求3、学校没有以学生和老师为核心的主题库,也就不能很好的支持一站式大厅、一表通、师生个人数据中心等应用学校数据中心与业务强耦合1、学校目前的数据中心不是中立的、第三方的数据平台2、数据能力无法对不同厂家应用开发3、无法高度定制化服务各类学校的数据需求场景学校现状与遇到的问题分析12具体的解决办法和思路CONTENT目录3整体解决方案和产品功能介绍数据接入--关系型数据库(原大数据平台)学校大数据中心/全域数据中心学业预警离校预警贫困资助教研辅助......专题分析库教师库学生库学校财务库学校资产库基础库学工教务财务一卡通......资源库融合数据集成工具实时实时离线离线数据归集教务学工一卡通图书馆原数据中心(离线数仓)学校已建待建业务系统数据归集科研门禁人事......数据接入--MQ消息和API问题:当前越来越多的业务系统,以MQ消息或者API接口的方式对外共享数据获取的方式,需要获取token、鉴权、确认等操作,传统的数据接入工具无法满足类型一:MQ消息比如某学校的校内一卡通,依托于支付宝在线付费和缴费,数据信息为MQ消息队列,获取一条推送一条。类型二:自定义API接口厂家业务系统不直接提供数据库(比如财务),对外发布API接口,根据不同接口请求获取不同数据,学校数据中心一方面需要调用接口,另外一方面需要对数据进行落盘。数据接入--MQ消息和API(数据落盘)MQ或API数据落盘的任务流,如下:1、获取接口授权信息(token)2、查询数据量3、获取数据(xml、json、html、txt、cvs、excle等)4、数据转发或写入大数据平台数据接入--视频数据(前置条件)摄像头分辨率1080p(最低720p)码率(2Mbps以上)帧率25fps点位基础信息以及经纬度信息,视频实时播放接口(RTMP/HLS)、历史下载播放接口视频推流协议采用GB28181国标网络要求支持500路分析需要1000M网络平台组件DSC(使用Kafka提供了一个数据队列功能)大数据平台(数据存储)虚拟机(基于学校云平台)接流、计算(视频接流工具)OSS数据接入--视频数据(视频结构化分析)大数据平台缓存推流学校厂商视频平台结构化接流服务DSC(kafka)视频应用BLINK计算GB2818关系型数据库归档引擎分项视频结构化引擎视频资源动态调度机非人实时结构化极速离线视频处理视频搜索引擎目标再识别、以图搜图关注人员管控EMR大数据平台数据接入--视频数据(视频资源动态调度管理)——视频点位管理视频点位资源管理,包括点位信息增删改查、标签自定义等点位动态调度系统涉及接入的全部视频点位,可根据实战情况动态调整视频分析的计算资源。实现对指定区域的视频进行结构化,同时支持指定区域内的历史数据,进行结构化分析,共享分析资源。数据分析--场景化数据分析(MQ消息接口)一卡通实时消费分析大额刷卡预警(按时间、清单逆序)25元交易时间实收金额门店名称消费者名字学号密集刷卡预警(按时间、按学号、清单逆序)1分钟内刷卡3次交易时间实收金额门店名称消费者名字学号疑似饭卡丢失(按时间、按学号、清单逆序)非节假日连续一周无消费最后一次交易时间实收金额门店名称消费者名字学号疑似贫困生消费(按月消费金额、按学号、清单逆序)连续1个月每天都消费,且总金额15元月消费金额月均消费金额消费者名字学号数据资源一卡通食堂消费明细、商店消费明细模型逻辑获取学校各食堂、窗口消费明细,与餐饮分类做对应统计,实时计算出按时段、按窗口、按人流量、按餐饮种类、按消费金额、按饮食结构等方面的分类和模型分析实现功能根据逻辑分析内容,提取出师生饮食不规律、营养不均衡、缺餐少食、暴饮暴食的相关人员的预警标记,以短信或微信的方式发送校内关怀提醒人脸图搜用户上传一张人脸图片,可从视频流中查找到相似图片通过相似图片比对,从视频流结构化输出的人脸图片中匹配相似图片,将命中结果返回人脸目标及属性识别从视频流中实时结构化输出人脸目标图片对人脸特征和位置进行智能检测,识别输出人
您可能关注的文档
- 29智慧校园建设背景下的数据治理思考-华中农业大学.pptx
- 99-TRS智拓人工智能技术平台介绍.pptx
- 99-汽车行业数字化建设研究.pptx
- 99-区块链解决方案.pptx
- 99-数据开放平台技术实现方案.pptx
- 99-天枢遥感智能视觉平台_深度学习样本制作简介.pptx
- 99-天眼守望场景应用.pptx
- 99-县域矛调“五环智控”应用场景.pptx
- 99-智慧工业互联网平台解决方案.pptx
- 99-智慧园区数据平台方案.pptx
- 2024年《义务教育语文课程标准(2022年版)》学习心得体会梳理.docx
- 2024年高中物理 必修一册 课时 加速度的概念及计算.pdf
- 2024年加水拌沙玩泥土 动手动脑做“研究”——科学《土壤和岩石》课例分析.docx
- 2024年创设情境下的课堂导入实践——四年级语文组新课导入探究.docx
- 2024年大观念下小学数学单元整体教学的设计与实施——以“多位数乘一位数”单元教学为例.docx
- 2024年《大自然的声音》同课异构课例观课感言.docx
- 2024年心理健康:心理效应在师生沟通中的运用.docx
- 2024年高中物理 选择性必修三册 专题强化 光电效应方程及其应用.pdf
- 【同课异构 北师生物】八上《5.16第2节 动物行为的主要类型》 (5).pdf
- 第三章 锤式破碎机.3【水泥培训 精品资源】.pdf
1亿VIP精品文档
相关文档
最近下载
- 广州数控DAT系列交流伺服驱动单元使用手册.pdf
- 期货指标公式大全准确率最高的期货指标文华期货软件指.doc
- BOSCH DLE 70 Professional 使用说明书用户手册.pdf
- 专题11 机械功与机械能-2024年中考物理【热点·重点·难点】专练(全国通用)解析版.docx
- 《改造我们的学习》读后感-(精选·课件).ppt
- (新版)白酒酿造工(制酒制曲)理论考试题库(浓缩400题).docx
- 2.3无线局域网的组建课件2021-2022学年教科版(2019)高中信息技术必修二.pptx
- 市场营销基础及实务完整版电子课件.pptx
- Lesson 14 Catkin the kitten(课件)典范英语一年级下册.pptx
- 钢带增强聚乙烯PE螺旋波纹管下水道管网专项工程施工组织设计方案.docx VIP
文档评论(0)