大数据运维-第7页-白眉大叔

hive 入库延迟排查

白眉大叔发布于2023年7月17日

hive 入库延迟排查 SRC 层分钟表 hive 入库延迟排查一、问题发现 2019-04-27 上午张 …

大数据运维点赞(181) 评论关闭阅读(445)

白眉大叔发布于2023年7月17日

NameNode RPC 负载过高一、问题发现 2019-10-18 基于小文件问题与 XXX 和 XXX …

大数据运维点赞(168) 评论关闭阅读(430)

白眉大叔发布于2023年7月17日

用户反映 JOB 执行失败报错，如下怀疑为没有此目录权限查找该目录下权限正常，但并无 map…

大数据运维点赞(175) 评论关闭阅读(523)

白眉大叔发布于2023年7月17日

hive 任务中报内存不足

大数据运维点赞(163) 评论关闭阅读(438)

白眉大叔发布于2023年7月17日

GC overhead limit exceeded 相关案例 2019 年 5 月 13 日，4m1-01 …

大数据运维点赞(175) 评论关闭阅读(605)

白眉大叔发布于2023年7月17日

hadoop集群数据倾斜任务排查实战记录一、问题发现作业监控发现作业存在数据倾斜问题排查在 YARN …

大数据运维点赞(177) 评论关闭阅读(587)

白眉大叔发布于2023年7月17日

所谓推测式执行，就是计算框架判断，如果有一个task执行的过慢，则会启动备份任务，最终使用原任务…

大数据运维点赞(163) 评论关闭阅读(408)

白眉大叔发布于2023年7月17日

集群作业执行缓慢问题排查 1 问题发现 2022-05-07 XXX 告知 XXX 集群作业跑的很慢，提供作业…

大数据运维点赞(168) 评论关闭阅读(409)

白眉大叔发布于2023年7月17日

慢作业问题 1.慢作业-日志打印问题在 AA 集群中存在部分任务，执行较慢的情况。这些任务都是比较长的 hi…

大数据运维点赞(175) 评论关闭阅读(872)

白眉大叔发布于2023年7月17日

kafka参数调优 1.broke 可以按如下配置将自动生成 brokeid 自动识别 host.name …

大数据运维点赞(183) 评论关闭阅读(910)