收起左侧

大数据项目实战-某头条亿级流量采集与监控2020年8月

109
回复
  [复制链接]
avatar
  • TA的每日心情
    qdsmile
    2020-11-19 01:32
  • 签到天数: 7 天

    [LV.3]偶尔看看

    26

    主题

    20

    帖子

    916

    积分

    发表于 2021-1-9 01:39:00 | 显示全部楼层 |阅读模式
    课程简介

    本课程是大数据项目实战系列课程,项目基于某条亿级流量背景,实现了一站式的数据采集与监控。包含了行为数据、产品数据、业务数据的高效采集,定义并监控数据采集流程中各个指标,当数据采集链路发生故障时能够及时收到报警,同时当遇到性能问题时,通过监控系统我们能更有针对性的优化采集流程。项目设计基于场景而非基于行业,选择以技术驱动,重在各技术组件的组合,目的是解决特定场景的问题。课程从零环境基础出发,逐步搭建完成,能够帮助你快速搭建亿级流量场景下的数据采集平台。

    关键词:大数据 2020  数据采集  数据监控 数据仓库 lua flume hadoop hive Prometheus Grafana

    01_项目背景.mp4
    02_项目需求.mp4
    03_监控项目架构.mp4
    04_数据格式解析.mp4
    05_OpenResty安装.mp4
    06_创建OpenResty应用.mp4
    07_编写应用主配置文件nginx.conf.mp4
    08_编写应用子配置文件collect-app.conf.mp4
    09_测试并启动应用.mp4
    10_配置接口到数据管理中心.mp4
    11_日志切分.mp4
    12_Hadoop安装.mp4
    13_Flume安装.mp4
    14_编写Flume配置文件.mp4
    15_编写Flume拦截器.mp4
    16_部署Flume拦截器.mp4
    17_资讯数据采集Flume配置.mp4
    18_资讯数据采集Flume Agent对接数据管理中心.mp4
    19_业务数据采集SQOOP脚本.mp4
    20_Hive安装配置.mp4
    21_Beeline加载JsonSerde.mp4
    22_创建行为数据表.mp4
    23_创建行为数据加速表.mp4
    24_创建新闻资讯表.mp4
    25_创建业务数据表.mp4
    26_编译安装Azkaban Solo Server.mp4
    27_Azkaban 作业流开发.mp4
    28_Azkaban 作业流定时调度.mp4
    29_DingTalk添加Webhook机器人.mp4
    30_DingTalk SDK测试.mp4
    31_Azkaban Alert接口开发.mp4
    32_Azkaban Alert插件部署.mp4
    33_Azkaban Alert插件运行测试.mp4
    34_Prometheus安装.mp4
    35_Prometheus数据模型介绍.mp4
    36_架构简介.mp4
    37_Supervisor与Prometheus集成.mp4
    38_Supervisor与Grafana集成.mp4
    39_Grafana集成Prometheus数据源.mp4
    40_加载nginx-lua-prometheus扩展模块.mp4
    41_nginx指标收集.mp4
    42_nginx metric接口配置到prometheus.mp4
    43_监控指标最终效果展示.mp4
    44_Supervisor管理Flume Agent.mp4
    45_flume-exporter接口配置到prometheus.mp4
    46_在Grafana上配置flume metric 监控.mp4
    笔记.rar
    代码.rar
    资料.rar
    软件.rar

    下载地址:犊斜鸥菸茡
    游客,如果您要查看本帖隐藏内容请回复
    avatar
  • TA的每日心情
    qdsmile慵懒
    2022-2-23 13:51
  • 签到天数: 299 天

    [LV.8]狂热吧粉

    1

    主题

    41

    帖子

    5913

    积分
    发表于 2021-1-9 11:13:54 | 显示全部楼层
    友及会员分享和其它网络媒体.
    4、如本帖侵犯到任何版权问
    avatar
  • TA的每日心情
    qdsmile
    2024-3-16 01:35
  • 签到天数: 848 天

    [LV.10]以吧为家

    0

    主题

    14

    帖子

    2964

    积分
    发表于 2021-1-10 17:49:42 | 显示全部楼层
    据项目实战-某头条亿级流
    avatar
  • TA的每日心情
    qdsmile奋斗
    2024-7-7 15:32
  • 签到天数: 1216 天

    [LV.10]以吧为家

    0

    主题

    5

    帖子

    7353

    积分
    发表于 2021-1-10 19:29:43 | 显示全部楼层
    大数据项目实战-某头条亿级流量采集与监控2020年8月
    avatar
  • TA的每日心情
    qdsmile开心
    2024-6-29 21:33
  • 签到天数: 374 天

    [LV.9]铁杆吧粉

    2

    主题

    781

    帖子

    2006

    积分
    发表于 2021-1-11 00:00:16 | 显示全部楼层
    66
    avatar
  • TA的每日心情
    qdsmile奋斗
    2024-5-29 09:36
  • 签到天数: 211 天

    [LV.7]超级吧粉

    0

    主题

    125

    帖子

    797

    积分
    发表于 2021-1-11 14:25:55 | 显示全部楼层
    大数据项目实战-某头条亿级流量采集与监控2020年8月
    avatar
  • TA的每日心情
    qdsmile擦汗
    2024-6-28 10:29
  • 签到天数: 195 天

    [LV.7]超级吧粉

    0

    主题

    4

    帖子

    374

    积分
    发表于 2021-1-11 15:49:51 | 显示全部楼层
    谢谢分享~~~~~~~~~~
    avatar
  • TA的每日心情
    qdsmile
    2024-7-9 01:18
  • 签到天数: 883 天

    [LV.10]以吧为家

    0

    主题

    560

    帖子

    3977

    积分
    发表于 2021-1-12 08:35:59 | 显示全部楼层
    kkk
    avatar
  • TA的每日心情
    qdsmile
    2024-7-8 23:20
  • 签到天数: 781 天

    [LV.10]以吧为家

    0

    主题

    341

    帖子

    2235

    积分
    发表于 2021-1-12 20:20:34 | 显示全部楼层
    可以的
    avatar
  • TA的每日心情
    qdsmile郁闷
    2023-2-23 09:42
  • 签到天数: 75 天

    [LV.6]普通吧粉

    0

    主题

    60

    帖子

    276

    积分
    发表于 2021-1-30 13:03:05 | 显示全部楼层
    对对对
    您需要登录后才可以回帖 登录 | 立即注册 QQ登录

    本版积分规则