大数据基础和行业应用(讲义版)PPT.pptx

大数据基础和行业应用;;;大数据时代的背景;;体量Volume;大数据 = 海量数据 + 复杂类型的数据;;;; 大数据技术被设计用于在成本可承受的条件下，通过非常快速（velocity）地采集、发现和分析，从大量（volumes）、多类别（variety）的数据中提取价值（value），将是IT 领域新一代的技术与架构。 ;技术领域的挑战;大数据的相关技术;数据众包;大数据的相关技术;分布式文件系统;分布式文件系统;分布式文件系统;分布式文件系统;非关系型数据库NoSQL;非关系型数据库NoSQL;非关系型数据库NoSQL;云计算和云存储;;云计算和云存储;实时流处理;实时流处理;大数据的相关技术;A/B Testing ;MapReduce;MapReduce;R语言;大数据的相关技术;标签云;标签云;聚类图;空间信息流;热图;热图;大数据的应用实例;;电商基本系统名称;44;45;46;47;48;49;50;51;52;53;54;55;56;57;58;59;60;61;62;63;64;5.2 大数据分析结果示例-流量变化;3小时内使用两种应用的用户比例;用户平均应用数;使用同种类型应用的用户之间的关联性;根据图的结构信息，判定节点的重要性。 PageRank是google用来根据结构信息判定网页重要性的算法。入选2006年十大数据挖掘经典算法 如果一个页面被多次引用，那么这个页面很可能是重要的。 如果一个页面被重要的页面 引用，那么这个页面很可能 是重要的。 一个页面的重要性被均分并 传递到它所引用的页面。 ;运营商CDR 分析案例;CDR 分析;CDR 分析;实时经分的应用-淘宝双11交易情况现场直播;重庆实时经营分析系统;河北网格化分析系统;（信令数据字段有（MC口信令）：号码、lac、cell、进入时间、离开时间、imsi、imei） wlan精准分流：在用户进入wlan停留一定时长，进行订购营销或服务提醒 宽带营销：实时获取小区当前用户，可群发短信提醒 ICT应用：可对商户附近进行分析， 旅游景区分析：可以分析景区的总人数，监控线路的人数等。 集团客户真实性核查：结合经分系统其他数据，核查集团客户资料的真实性。 ;;感谢聆听！