首页 > 大数据 > 大数据项目实战-某头条亿级流量采集与监控
大数据项目实战-某头条亿级流量采集与监控

大数据项目实战-某头条亿级流量采集与监控 精品

浏览次数:
下载次数:
收藏次数:
发布时间:2021-01-09

编号 SP633   视频类型 大数据   下载权限 包年VIP

微信扫一扫关注我们

  • 视频介绍
  • 下载记录
  • 用户评价
本课程是大数据项目实战系列课程,项目基于某条亿级流量背景,实现了一站式的数据采集与监控。包含了行为数据、产品数据、业务数据的高效采集,定义并监控数据采集流程中各个指标,当数据采集链路发生故障时能够及时收到报警,同时当遇到性能问题时,通过监控系统我们能更有针对性的优化采集流程。项目设计基于场景而非基于行业,选择以技术驱动,重在各技术组件的组合,目的是解决特定场景的问题。课程从零环境基础出发,逐步搭建完成,能够帮助你快速搭建亿级流量场景下的数据采集平台。% A, Y9 R5 Z  B, K* D) L. j" G
' ?* ?. @2 T5 d; h: w5 E- _& L  j7 ]
关键词:大数据 2020  数据采集  数据监控 数据仓库 lua flume hadoop hive Prometheus Grafana

01_项目背景.mp4. a  c  ]+ u' j; `
02_项目需求.mp4
03_监控项目架构.mp4
04_数据格式解析.mp4% \8 f; |: d2 v# @% `" M
05_OpenResty安装.mp4
06_创建OpenResty应用.mp4
07_编写应用主配置文件nginx.conf.mp4
08_编写应用子配置文件collect-app.conf.mp4
09_测试并启动应用.mp4
10_配置接口到数据管理中心.mp4
11_日志切分.mp4% k  U' j1 Y  X  p
12_Hadoop安装.mp4
13_Flume安装.mp4& ]/ i  O2 S& U( g/ ~. L9 y
14_编写Flume配置文件.mp4, M6 \/ l' |2 l, I
15_编写Flume拦截器.mp4
16_部署Flume拦截器.mp4, M$ O. p" _$ e( ], I
17_资讯数据采集Flume配置.mp4
18_资讯数据采集Flume Agent对接数据管理中心.mp4
19_业务数据采集SQOOP脚本.mp41 x3 W2 [" ]$ u! D
20_Hive安装配置.mp4
21_Beeline加载JsonSerde.mp4  s2 V  z' k, ]' X( t6 ]
22_创建行为数据表.mp4
23_创建行为数据加速表.mp41 I& m: a$ V! d/ C+ U
24_创建新闻资讯表.mp4
25_创建业务数据表.mp4
26_编译安装Azkaban Solo Server.mp4
27_Azkaban 作业流开发.mp4; Q0 |9 A1 r1 B( v5 c; Y
28_Azkaban 作业流定时调度.mp47 I$ `7 u( B  K. |( K' J
29_DingTalk添加Webhook机器人.mp4/ {* A. W; G1 S6 D; d
30_DingTalk SDK测试.mp4  \8 Y7 n8 g1 K5 S
31_Azkaban Alert接口开发.mp4
32_Azkaban Alert插件部署.mp4/ }$ _1 Z- C( B2 A# i7 M
33_Azkaban Alert插件运行测试.mp4
34_Prometheus安装.mp4
35_Prometheus数据模型介绍.mp4; T% F& Q4 Y5 b% w$ w, y9 D  C
36_架构简介.mp4
37_Supervisor与Prometheus集成.mp4
38_Supervisor与Grafana集成.mp4. I% P6 X9 `# R5 M# Z+ H
39_Grafana集成Prometheus数据源.mp4
40_加载nginx-lua-prometheus扩展模块.mp4. H; l. X* _( U4 x% W5 W
41_nginx指标收集.mp4- _7 W, G8 j8 d. V! N
42_nginx metric接口配置到prometheus.mp4
43_监控指标最终效果展示.mp40 G( z, e+ R5 I$ ?5 U4 {7 X+ u
44_Supervisor管理Flume Agent.mp40 k0 k$ I) _  b
45_flume-exporter接口配置到prometheus.mp4
46_在Grafana上配置flume metric 监控.mp4' _1 f3 e: z" D5 }
笔记.rar
代码.rar
资料.rar& |; M8 r* ~4 z6 f  \
软件.rar& K! }% S# y

IT视频网-网站版权
1、IT视频网为非营利性网站,全站所有资料仅供网友个人学习使用,禁止商用
2、本站所有文档、视频、书籍等资料均由网友分享,本站只负责收集不承担任何技术及版权问题
3、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除下载链接并致以最深的歉意
4、本帖部分内容转载自其它媒体,但并不代表本站赞同其观点和对其真实性负责
5、一经注册为本站会员,一律视为同意网站规定,本站管理员及版主有权禁止违规用户
6、其他单位或个人使用、转载或引用本文时必须同时征得该帖子作者和IT视频网的同意
7、IT视频网管理员和版主有权不事先通知发贴者而删除本文

分享:

共有 条评论

    热门标签

    热门视频

    Knowledge Graph知识图谱高级

    2020-08-16   浏览:206

    全新Hadoop 3.X及生态圈大实

    2020-08-16   浏览:195

    2019云计算与大数据零基础

    2020-08-15   浏览:187

    2019年Kudu分布式存储引擎数

    2020-08-16   浏览:169

    尚硅谷大数据线下班全套

    2020-08-15   浏览:166

    大数据教程:Spark基础及源

    2020-08-17   浏览:155

    2019大数据入门到精通项目

    2020-08-15   浏览:144

    极客时间-从0开始学大数据

    2020-08-16   浏览:133

    喜欢我嘛?喜欢就按“ctrl+D”收藏我吧!♡