【No0091】2017 Spark 2.0大型项目实战：移动电商app交互式数据分析平台

|-[javaxxz]课件文档代码

|--000.软件安装包.rar-文件大小:1.12 GB

|--000.课件文档代码[123-138].rar-文件大小:7.54 MB

|--000.课件、代码、软件包.rar-文件大小:1.28 GB

|--000.课程代码+软件包.rar-文件大小:2.22 GB

|--000.第一次升级软件包+课程代码[113-245].zip-文件大小:984.48 MB

|-[javaxxz]098.用户访问session分析-生产环境测试_rec.flv-文件大小:55.71 MB

|-[javaxxz]097.页面单跳转化率-生产环境测试 _rec.flv-文件大小:106.41 MB

|-[javaxxz]096.页面单跳转化率-本地测试_rec.flv-文件大小:22.31 MB

|-[javaxxz]095.页面单跳转化率-将页面切片转化率写入MySQL _rec.flv-文件大小:46.91 MB

|-[javaxxz]094.页面单跳转化率-计算页面切片的转化率 _rec.flv-文件大小:41.59 MB

|-[javaxxz]093.页面单跳转化率-计算页面流起始页面的pv_rec.flv-文件大小:43.34 MB

|-[javaxxz]092.页面单跳转化率-页面切片生成以及页面流匹配算法实现_rec.flv-文件大小:43.34 MB

|-[javaxxz]091.页面单跳转化率-编写基础代码_rec.flv-文件大小:119.30 MB

|-[javaxxz]090.页面单跳转化率-需求分析、技术方案设计、数据表设计 _rec.flv-文件大小:72.59 MB

|-[javaxxz]089.页面单跳转化率-模块介绍_rec.flv-文件大小:42.62 MB

|-[javaxxz]088.用户访问session分析-数据倾斜解决方案之使用随机数以及扩容表进行join_rec.flv-文件大小:88.57 MB

|-[javaxxz]087.用户访问session分析-数据倾斜解决方案之sample采样倾斜key单独进行join_rec.flv-文件大小:150.33 MB

|-[javaxxz]086.用户访问session分析-数据倾斜解决方案之将reduce join转换为map join_rec.flv-文件大小:78.26 MB

|-[javaxxz]085.用户访问session分析-数据倾斜解决方案之使用随机key实现双重聚合_rec.flv-文件大小:59.85 MB

|-[javaxxz]084.用户访问session分析-数据倾斜解决方案之提高shuffle操作reduce并行度_rec.flv-文件大小:68.30 MB

|-[javaxxz]083.用户访问session分析-数据倾斜解决方案之聚合源数据以及过滤导致倾斜的key_rec.flv-文件大小:109.62 MB

|-[javaxxz]082.用户访问session分析-数据倾斜解决方案之原理以及现象分析_rec.flv-文件大小:99.76 MB

|-[javaxxz]081.用户访问session分析-troubleshooting之错误的持久化方式以及checkpoint的使用_rec.flv-文件大小:91.97 MB

|-[javaxxz]080.用户访问session分析-troubleshooting之解决yarn-cluster模式的JVM栈内存溢出问题 _rec.flv-文件大小:92.42 MB

|-[javaxxz]079.用户访问session分析-troubleshooting之解决yarn-client模式导致的网卡流量激增问题_rec.flv-文件大小:93.65 MB

|-[javaxxz]078.用户访问session分析-troubleshooting之解决算子函数返回NULL导致的问题 _rec.flv-文件大小:20.87 MB

|-[javaxxz]077.用户访问session分析-troubleshooting之解决各种序列化导致的报错_rec.flv-文件大小:34.72 MB

|-[javaxxz]076.用户访问session分析-troubleshooting之解决YARN队列资源不足导致的application直接失败 _rec.flv-文件大小:63.42 MB

|-[javaxxz]075.用户访问session分析-troubleshooting之解决JVM GC导致的shuffle文件拉取失败 _rec.flv-文件大小:72.69 MB

|-[javaxxz]074.用户访问session分析-troubleshooting之控制shuffle reduce端缓冲大小以避免OOM _rec.flv-文件大小:76.99 MB

|-[javaxxz]073.用户访问session分析-算子调优之reduceByKey本地聚合介绍_rec.flv-文件大小:59.20 MB

|-[javaxxz]072.用户访问session分析-算子调优之使用repartition解决Spark SQL低并行度的性能问题_rec.flv-文件大小:83.12 MB

|-[javaxxz]071.用户访问session分析-算子调优之使用foreachPartition优化写数据库性能_rec.flv-文件大小:83.12 MB

|-[javaxxz]070.用户访问session分析-算子调优之filter过后使用coalesce减少分区数量 _rec.flv-文件大小:58.56 MB

|-[javaxxz]069.用户访问session分析-算子调优之MapPartitions提升Map类操作性能 _rec.flv-文件大小:51.71 MB

|-[javaxxz]068.用户访问session分析-Shuffle调优之HashShuffleManager与SortShuffleManager_rec.flv-文件大小:150.11 MB

|-[javaxxz]067.用户访问session分析-Shuffle调优之调节map端内存缓冲与reduce端内存占比 _rec.flv-文件大小:100.69 MB

|-[javaxxz]066.用户访问session分析-Shuffle调优之合并map端输出文件_rec.flv-文件大小:143.70 MB

|-[javaxxz]065.用户访问session分析-Shuffle调优之原理概述_rec.flv-文件大小:87.83 MB

|-[javaxxz]064.用户访问session分析JVM调优之调节executor堆外内存与连接等待时长_rec.flv-文件大小:120.70 MB

|-[javaxxz]063.用户访问session分析-JVM调优之原理概述以及降低cache操作的内存占比_rec.flv-文件大小:171.90 MB

|-[javaxxz]062.用户访问session分析-性能调优之在实际项目中调节数据本地化等待时长_rec.flv-文件大小:99.51 MB

|-[javaxxz]061.用户访问session分析-性能调优之在实际项目中使用fastutil优化数据格式_rec.flv-文件大小:121.10 MB

|-[javaxxz]060.用户访问session分析-性能调优之在实际项目中使用Kryo序列化 _rec.flv-文件大小:97.52 MB

|-[javaxxz]059.用户访问session分析-性能调优之在实际项目中广播大变量_rec.flv-文件大小:171.21 MB

|-[javaxxz]058.用户访问session分析-性能调优之在实际项目中重构RDD架构以及RDD持久化_rec.flv-文件大小:144.01 MB

|-[javaxxz]057.用户访问session分析-性能调优之在实际项目中调节并行度_rec.flv-文件大小:167.67 MB

|-[javaxxz]056.用户访问session分析-性能调优之在实际项目中分配更多资源_rec.flv-文件大小:111.51 MB

|-[javaxxz]055.用户访问session分析-top10活跃session之本地测试以及阶段总结_rec.flv-文件大小:98.31 MB

|-[javaxxz]054.用户访问session分析-top10活跃session之分组取TopN算法获取top10活跃session_rec.flv-文件大小:72.55 MB

|-[javaxxz]053.用户访问session分析-top10活跃session之计算top10品类被各sessoin点击的次数_rec.flv-文件大小:49.72 MB

|-[javaxxz]052.用户访问session分析-top10活跃session之开发准备以及top10品类RDD生成_rec.flv-文件大小:78.50 MB

|-[javaxxz]051.用户访问session分析-top10热门品类之使用Scala实现二次排序_rec.flv-文件大小:19.30 MB

|-[javaxxz]050.用户访问session分析-top10热门品类之本地测试_rec.flv-文件大小:37.43 MB

|-[javaxxz]049.用户访问session分析-top10热门品类之获取top10品类并写入MySQL_rec.flv-文件大小:35.31 MB

|-[javaxxz]048.用户访问session分析-top10热门品类之进行二次排序_rec.flv-文件大小:18.88 MB

|-[javaxxz]047.用户访问session分析-top10热门品类之自定义二次排序key_rec.flv-文件大小:32.61 MB

|-[javaxxz]046.用户访问session分析-top10热门品类之join品类与点击下单支付次数_rec.flv-文件大小:68.29 MB

|-[javaxxz]045.用户访问session分析-top10热门品类之计算各品类点击、下单和支付的次数_rec.flv-文件大小:79.53 MB

|-[javaxxz]044.用户访问session分析-top10热门品类之获取session访问过的所有品类_rec.flv-文件大小:56.70 MB

|-[javaxxz]043.用户访问session分析-top10热门品类之需求回顾以及实现思路分析_rec.flv-文件大小:39.07 MB

|-[javaxxz]042.用户访问session分析-session随机抽取之本地测试_rec.flv-文件大小:47.70 MB

|-[javaxxz]041.用户访问session分析-session随机抽取之获取抽取session的明细数据_rec.flv-文件大小:69.48 MB

|-[javaxxz]040.用户访问session分析-session随机抽取之根据随机索引进行抽取_rec.flv-文件大小:88.61 MB

|-[javaxxz]039.用户访问session分析-session随机抽取之按时间比例随机抽取算法实现_rec.flv-文件大小:87.36 MB

|-[javaxxz]038.用户访问session分析-session随机抽取之计算每天每小时session数量_rec.flv-文件大小:68.02 MB

|-[javaxxz]037.用户访问session分析-session随机抽取之实现思路分析_rec.flv-文件大小:37.69 MB

|-[javaxxz]036.用户访问session分析-session聚合统计之使用Scala实现自定义Accumulator_rec.flv-文件大小:52.70 MB

|-[javaxxz]035.用户访问session分析-session聚合统计之本地测试_rec.flv-文件大小:63.93 MB

|-[javaxxz]034.用户访问session分析-session聚合统计之计算统计结果并写入MySQL_rec.flv-文件大小:93.15 MB

|-[javaxxz]033.用户访问session分析-session聚合统计之重构过滤进行统计_rec.flv-文件大小:68.49 MB

|-[javaxxz]032.用户访问session分析-session聚合统计之重构实现思路与重构session聚合_rec.flv-文件大小:129.82 MB

|-[javaxxz]031.用户访问session分析-session聚合统计之自定义Accumulator_rec.flv-文件大小:96.09 MB

|-[javaxxz]030.用户访问session分析-按筛选参数对session粒度聚合数据进行过滤_rec.flv-文件大小:155.47 MB

|-[javaxxz]029.用户访问session分析-按session粒度进行数据聚合_rec.flv-文件大小:232.74 MB

|-138.基于Spark 2.0的用户活跃度分析：统计指定注册时间范围内头7天购买金额最高的10个用户_rec.flv-文件大小:27.37 MB

|-137.基于Spark 2.0的用户活跃度分析：统计指定注册时间范围内头7天访问次数最高的10个用户 _rec.flv-文件大小:14.87 MB

|-136.基于Spark 2.0的用户活跃度分析：统计最近一个周期相比上一个周期购买金额增长最多的10个用户 _rec.flv-文件大小:15.94 MB

|-135.基于Spark 2.0的用户活跃度分析：统计最近一个周期相比上一个周期访问次数增长最多的10个用户_rec.flv-文件大小:22.90 MB

|-134.统计指定时间内购买金额最多的10个用户_rec.flv-文件大小:13.92 MB

|-133.用户活跃度分析：统计指定时间内访问次数最多的10个用户_rec.flv-文件大小:52.36 MB

|-132.用户活跃度分析：模块介绍以及交互式用户行为分析系统的解释 _rec.flv-文件大小:31.05 MB

|-131.Spark 2.0-开发环境搭建：Eclipse+Maven+Scala+Spark_rec.flv-文件大小:14.24 MB

|-130.Spark 2.0-课程环境搭建：虚拟机、CentOS、Hadoop、Spark等_rec.flv-文件大小:107.56 MB

|-129.Spark 2.0-Spark 2.x与1.x对比以及分析、学习建议以及使用建议_rec.flv-文件大小:72.94 MB

|-128.Spark 2.0-新特性介绍-whole-stage code generation技术和vectorization技术_rec.flv-文件大小:18.96 MB

|-127.Spark 2.0-新特性介绍-Spark 1.x的Volcano Iterator Model深度剖析_rec.flv-文件大小:23.77 MB

|-126.Spark 2.0-新特性介绍-智能化：Structured Streaming介绍_rec.flv-文件大小:14.71 MB

|-125.Spark 2.0-高性能：让Spark作为编译器来运行_rec.flv-文件大小:17.48 MB

|-124.Spark+2.0-易用性：标准化SQL支持以及更合理的API_rec.flv-文件大小:106.44 MB

|-123.Spark 2.0-新特性介绍 _rec.flv-文件大小:32.87 MB

|-122.课程总结-都学到了什么？_rec.flv-文件大小:99.18 MB

|-121.广告点击流量实时统计-生产环境测试 _rec.flv-文件大小:36.29 MB

|-120.广告点击流量实时统计-对实时计算程序进行性能调优（正确）_rec.flv-文件大小:53.90 MB

|-119.广告点击流量实时统计-实现实时计算程序的HA高可用性_rec.flv-文件大小:75.09 MB

|-118.广告点击流量实时统计-计算每天各广告最近1小时滑动窗口内的点击趋势_rec.flv-文件大小:129.65 MB

|-117.广告点击流量实时统计-计算每天各省的top3热门广告_rec.flv-文件大小:136.86 MB

|-116.广告点击流量实时统计-计算每天各省各城市各广告的点击量 _rec.flv-文件大小:149.19 MB

|-115.广告点击流量实时统计-基于动态黑名单进行点击行为过滤_rec.flv-文件大小:107.95 MB

|-114.广告点击流量实时统计-过滤出每个batch中的黑名单用户以生成动态黑名单_rec.flv-文件大小:144.05 MB

|-113.广告点击流量实时统计-使用高性能方式将实时计算结果写入MySQL中_rec.flv-文件大小:144.05 MB

|-112.广告点击流量实时统计-为动态黑名单实时计算每天各用户对各广告的点击次数_rec.flv-文件大小:103.84 MB

|-111.广告点击流量实时统计-需求分析、技术方案设计以及数据设计_rec.flv-文件大小:117.94 MB

|-110.各区域热门商品统计-生产环境测试_rec.flv-文件大小:186.88 MB