电脑桌面
添加蜗牛文库到电脑桌面
安装后可以在桌面快捷访问

基于Hadoop的智慧社区大数仓库系统设计与开发_胡必波.pdfVIP免费

基于Hadoop的智慧社区大数仓库系统设计与开发_胡必波.pdf_第1页
基于Hadoop的智慧社区大数仓库系统设计与开发_胡必波.pdf_第2页
基于Hadoop的智慧社区大数仓库系统设计与开发_胡必波.pdf_第3页
2023.4电脑编程技巧与维护1概述智慧社区充分利用物联网、云计算、移动互联网等新一代信息技术,通过数字化信息技术将管理、服务提供者与每个社区的住户紧密地连接在一起,使服务提供者、社区管理者与居民之间可以实时地进行各种形式的信息交互,营造一个丰富多彩的虚拟社区,为居民提供一个安全、舒适、便利的生活环境,拉近与物业管理者之间的距离,快速传递物业消息,更好地了解、响应、跟进、满足居民的各种意见和物业管理需求,提高住户对物业管理的评价和认可。智慧社区主要由智慧物业管理系统、慧小区公共服务系统、社区信息发布系统、人脸识别系统、楼宇可视云对讲系统等子系统组成。智慧社区的一大特点就是利用大数据进行社区治理,通过对信息进行深入分析,可以对某些情况的发生进行预计、预判。例如,通过对用电数据的分析,预测独居老人的状况;通过对门岗进出人员的流量数据分析,规划安保资金的投入。有了“数据池”之后,要利用它来支撑社区精准治理,充分运用相关系统和信息平台,建立相应的场景并分析应用模型,动态监测、研判、分析社区实时状况,而不是一味追求设施、设备上的高端豪华、高额投入,却没有对社区治理能力进行质的提升。Hadoop是一个由Apache软件基金会所开发的分布式系统基础架构,主要解决海量数据的存储、分析和计算问题,具有高可靠性、高扩展性、高效性、高容错性。Hadoop的框架核心设计是Hadoop分布式文件系统(HDFS)、MapReduce和另一种资源协调者(YARN)。HDFS为海量的数据提供了存储;而MapReduce为海量的数据提供了计算;YARN只负责资源的调度。针对传统社区选择比较迫切、影响大、可行性高的业务项目,通过对抓取的海量数据进行深入分析,实现对社区状况充分预判下的“超前治理”。2大数据仓库分层架构智慧社区大数据仓库分层架构如图1所示,各系统的元数据通过数据抽取转换和加载(ETL)同步到操作性数据仓库ODS中,对ODS数据进行面向主题域建模形成数据仓库(DW),DW包含DWD和DWS,DM是针对某个业务领域建立模型,具体用户(决策层)查看DM生成的报表。复杂的任务可以被分解成多层,每一层只处理相应的任务,减少重复开发,提高计算结果的复用性。通过分层隔离原始数据,使真实数据与统计数据隔离开,ODS之后层级的数据处理,无论出现数据的异常还是数据的敏感,都可以重新从ODS再计算。数据源是数据库的数据来源,可以为MySQL、SQLServer、Oracle等,一般存在于现有的业务系统中;基金项目:Hadoo...

1、当您付费下载文档后,您只拥有了使用权限,并不意味着购买了版权,文档只能用于自身使用,不得用于其他商业用途(如 [转卖]进行直接盈利或[编辑后售卖]进行间接盈利)。
2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。
3、如文档内容存在违规,或者侵犯商业秘密、侵犯著作权等,请点击“违规举报”。

碎片内容

蜗牛文库的最新文档

二年级数学下册其中检测卷二年级数学下册其中检测卷附答案#期中测试卷.pdf
10.00金币
0下载
二年级数学下册期末质检卷(苏教版)二年级数学下册期末质检卷(苏教版)#期末复习 #期末测试卷 #二年级数学 #二年级数学下册#关注我持续更新小学知识.pdf
10.00金币
0下载
二年级数学下册期末混合运算专项练习二年级数学下册期末混合运算专项练习#二年级#二年级数学下册#关注我持续更新小学知识 #知识分享 #家长收藏孩子受益.pdf
10.00金币
1下载
二年级数学下册年月日三类周期问题解题方法二年级数学下册年月日三类周期问题解题方法#二年级#二年级数学下册#知识分享 #关注我持续更新小学知识 #家长收藏孩子受益.pdf
10.00金币
0下载
二年级数学下册解决问题专项训练二年级数学下册解决问题专项训练#专项训练#解决问题#二年级#二年级数学下册#知识分享.pdf
10.00金币
1下载
二年级数学下册还原问题二年级数学下册还原问题#二年级#二年级数学#关注我持续更新小学知识 #知识分享 #家长收藏孩子受益.pdf
10.00金币
1下载
二年级数学下册第六单元考试卷家长打印出来给孩子测试测试争取拿到高分!#小学二年级试卷分享 #二年级第六单考试数学 #第六单考试#二年级数学下册.pdf
10.00金币
0下载
二年级数学下册必背顺口溜口诀汇总二年级数学下册必背顺口溜口诀汇总#二年级#二年级数学下册 #知识分享 #家长收藏孩子受益 #关注我持续更新小学知识.pdf
10.00金币
0下载
二年级数学下册《重点难点思维题》两大问题解决技巧和方法巧算星期几解决周期问题还原问题强化思维训练老师精心整理家长可以打印出来给孩子练习#家长收藏孩子受益 #学霸秘籍 #思维训练 #二年级 #知识点总结.pdf
10.00金币
0下载
二年级数学下册 必背公式大全寒假提前背一背开学更轻松#二年级 #二年级数学 #二年级数学下册 #寒假充电计划 #公式.pdf
10.00金币
0下载
蜗牛文库+ 关注
实名认证
内容提供者

提供各种专业文档内容

确认删除?
QQ
  • QQ点击这里给我发消息
微信客服
  • 微信客服
回到顶部