作者归档:sylar

HBase整集群异常crash

1、集群crash故障原因 前段时间一个生产HBase集群发生了整集群的Regi … 继续阅读

发表在 Hadoop, hbase | 留下评论

linux找出已经删除但磁盘空间未释放的大文件并清空

1、找出已经删除但磁盘空间未释放的文件 如果文件已经删除,但实际的磁盘空间未释放 … 继续阅读

发表在 os/linux | 标签为 | 留下评论

hbase ExportSnapshot 和 CopyTable迁移数据

最近分别用ExportSnapshot和CopyTable方式迁移数据到新集群, … 继续阅读

发表在 hbase | 标签为 | 留下评论

kafka修改topic retention.ms参数执行异常

通过kafka-topic.sh脚本修改retention.ms参数后,发现磁盘 … 继续阅读

发表在 kafka | 标签为 , | 留下评论

hbase table中VERSIONS、MIN_VERSIONS和TTL参数关系

1、VERSIONS 1)作用范围在单个column family上, 2)定义 … 继续阅读

发表在 hbase | 标签为 , , | 留下评论

NameNode性能优化(1):RPC队列拆分

一、Service RPC port NameNode默认使用8020端口侦听所 … 继续阅读

发表在 Hadoop | 标签为 , | 留下评论

YARN NodeManager 动态更新资源配置参数

1、动态更新yarn nodemanager资源分配 在配置目录下,增加dyna … 继续阅读

发表在 Hadoop | 标签为 , , | 留下评论

HBase Direct Memory OutOfMemory

1、java.lang.OutOfMemoryError: Direct buf … 继续阅读

发表在 hbase | 标签为 | 留下评论

NodeManger重启时恢复killed job的container

直接上错误日志,日志中提示分配资源给container_e11_15316484 … 继续阅读

发表在 Hadoop | 标签为 | 留下评论

__consumer_offser大量提交写入导致broker负载不均匀

一、broker请求不均匀的异常现象 通过监控系统发现,broker总的mess … 继续阅读

发表在 kafka | 留下评论