首页 首页 资源教程 数据资源 查看内容

驴妈妈旅游网站大数据项目实战,资源教程下载

木马童年 2020-5-29 14:38 218 0

课程名称驴妈妈旅游网站大数据项目实战,资源教程下载课程目录第1章 大数据基本技能储备项目介绍hadoop介绍SSH免密码登录JAVA安装Hadoop安装及验证shell命令相关配置信息httpfs相关命令集群启动相关命令介绍集群启动 ...

image.png

课程名称

驴妈妈旅游网站大数据项目实战,资源教程下载

课程目录

第1章 大数据基本技能储备

项目介绍

hadoop介绍

SSH免密码登录

JAVA安装

Hadoop安装及验证

shell命令相关配置信息

httpfs相关命令

集群启动相关命令介绍

集群启动相关命令操作

hdfs相关命令

其他HadoopShell命令

HDFS结构介绍

windows开发环境搭建

HdfsJavaApi介绍

MapReduce介绍

Wordcount实现

Wordcount运行介绍以及异常解决

倒排索引实现

InputFormat和OutputFormat介绍

自定义InputFormat实现

自定义OutputFormat实现

案例演示

shuffle阶段介绍

自定义group+partitioner实现

案例damo编写

HBase结构介绍

HBase安装

hbase命令概述及帮助命令使用方式介绍

命名空间相关命令介绍

HBase Shell常用命令介绍

Scan命令详解

其他shell命令介绍

Java客户端概述以及Java开发Hbase基本环境搭建

HBaseAdmin类详细介绍

Put类详细介绍

Get和Delete类详细介绍

Scan类和Hbase连接池详细介绍

环境搭建

案例介绍

案例Mapper及Reducer类编写

案例执行入口代码编写及异常解决

Hive介绍

MYSQL安装

Hive安装

hive服务介绍

Database相关命令介绍

Hive表类型及创建命令格式介绍

Hive表创建案例介绍

Hive&Hbase关联介绍

导入数据命令介绍

select语句介绍

join介绍

子查询介绍

导出数据和其他命令介绍

Hive函数介绍

UDF自定义函数实现

UDAF自定义函数实现

UDTF自定义函数实现

Hive自定义函数jar集成方式介绍

Nginx介绍

Flume结构介绍

Flume安装

Flume简单案例实现

Nginx+Flume+Hdfs日志收集案例实现

Sqoop介绍和安装

Sqoop基本命令介绍

Import命令介绍

Export命令介绍

Oozie介绍

Tomcat安装

Oozie安装

Oozie Workflow工作流介绍

Oozie Workflow编写规则和自定义介绍

Workflow案例

Oozie Coordinator和Bundle介绍

Highcharts介绍

案例介绍

基本介绍

环境搭建

案例测试

数据展示框架介绍

第2章 项目需求介绍

bf_track项目总体介绍

JavaSDK需求分析介绍

JsSDK需求分析介绍

bf_dataapi项目总体介绍

bf_dataapi页面展示介绍

bfdataapi的restapi和bftransformer项目结构介绍

数据存储结构介绍

第3章 用户行为数据收集模块实现讲解

SDK Engine入口类编写

SDK Monitor数据发送类编写

JavaSDK测试

JsSDK CookieUtil对象编写

JsSDK tracker对象编写

JsSDK测试

第4章 数据分析模块讲解

UserAgent解析

IP解析

EventLogConstants类编写

LoggerUtil日志解析工具类编写

AnalyserLogDataMapper类编写

AnalyserLogDataRunner类编写

测试

BrowserDimension类编写

DateDimension类编写

PlatformDimension类编写

DimensionConverter类编写

TransformerOutputFormat类编写

新增用户统计mr程序输出类编写

NewInstallUserMapper类编写

NewInstallUserRudecer类编写

NewInstallUserRunner类编写

NewInstallUser代码测试

TotalInstallUser统计代码编写

ActiveUserMapper类编写

ActiveUserReducer类编写

ActiveUserRunner类编写

Collector输出类编写及测试

活跃会员分析

MemberUtil类编写

NewMemberMapper类编写

NewMemberReducer类和Runner类编写

测试

SessionMapper类编写

SessionsReducer类编写

SessionsRunner类编写以及测试

HourlyActiveUser分析

HourlySession相关分析

Mapper编写

Reducer和Runner编写

测试

Mapper公用代码提取

Runner公用代码提取

统计规则介绍

LocationDimension类编写

Mapper类编写

Reducer和Runner类编写

测试

统计规则介绍

InboundDimension相关类编写

InboundMapper类编写

InboundReducer&Runner类编写以及测试

InboundBounceMapper类编写

InboundBounceReducer类编写

InboundBounceRunner类编写以及测试

服务器hdfs参数调优

Linux文件句柄数操作

服务器hbase参数优化

服务器mapreduce参数调优

代码调优

Mapper&Reduce调优

Runner调优

服务器端相关类编写

client端相关类编写

测试

用户浏览深度Hive分析

事件分析Hive编写

规则介绍以及外部表创建

Dimension操作相关UDF编写

订单数量分析

订单金额分析

订单信息mysql保存

订单信息获取相关UDF编写

TotalAmount相关UDF编写

成功支付订单相关统计指标的分析

退款订单相关统计指标分析

Oozie流部署规则介绍

Oozie流编写

第5章 数据展示模块讲解

规则介绍

AEController编写

AEService编写

其他类编写

Spring配置信息编写及测试

前台页面编写

前端页面编写

后台程序编写

后台&前端程序代码编写

程序后台实现

程序前端实现

后台程序编写

前端页面编写

项目总结

大数据项目 大数据 数据存储 数据收集 数据分析
0
为您推荐
什么样的人才是大数据人才呢?我们应该怎么定义和分类?

什么样的人才是大数据人才呢?我们应该怎么定义和分类

在未来世界,国家之间、区域之间甚至是公司之间的大数据人才的争夺战,将是愈演愈烈的…...

数据科学,数据分析和机器学习之间,有什么本质区别?

数据科学,数据分析和机器学习之间,有什么本质区别?

我们都知道机器学习,数据科学和数据分析是未来的发展方向。有些公司不仅利用大数据帮…...

大数据现在处于什么阶段,入行大数据,需要学习哪些基础知识?

大数据现在处于什么阶段,入行大数据,需要学习哪些基

大数据的发展历程总体上可以划分为三个重要阶段,萌芽期、成熟期和大规模应用期…...

大数据技术怎么学习,在学习大数据之前,需要具备什么基础?

大数据技术怎么学习,在学习大数据之前,需要具备什么

  大数据又称黑暗数据,是指人脑无法处理的海量数据聚合成的信息资产,在民生、IT、…...

对于大数据开发的学习,最经典的学习路线是什么?

对于大数据开发的学习,最经典的学习路线是什么?

对于现代社会,大数据开发的重要性不言而喻,通过大量的数据处理、分析获取有价值的信…...

大数据时代,主要需要什么类型的人才?

大数据时代,主要需要什么类型的人才?

什么是大数据,大数据是主要指的是,无法在可承受的时间范围内用常规软件工具进行捕捉…...