@dailidong@
@dailidong@_个人页
@dailidong@
文章
370
问答
0
视频
0
个人介绍
专注架构 外功修行,内功修神 CSDN博客：http://blog.csdn.net/odalidong
擅长的技术
- Java
- 数据库
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
Hbase依赖的datanode日志中如果出现如下报错信息：DataXceiverjava.io.EOFException: INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Exception in receiveBlock for block 解决办法：Hbase侧配置的dfs.socket.timeout值过小，与DataNode侧配置的 dfs.socket.timeout的配置不一致，将hbase和datanode的该配置调成大并一致。
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
2014-08-25 15:35:05,691 ERROR org.apache.hadoop.hdfs.server.datanode.
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
Datanode的日志中看到: 10/12/14 20:10:31 INFO hdfs.DFSClient: Could not obtain block blk_XXXXXXXXXXXXXXXXXXXXXX_YYYYYYYY from any node: java.
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
最近在线上往hbase导数据，因为hbase写入能力比较强，没有太在意写的问题。让业务方进行历史数据的导入操作，中间发现一个问题，写入速度太快，并且业务数据集中到其中一个region，这个region无法split掉，处于不可用状态。
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
hbase从集群中有8台regionserver服务器，已稳定运行了5个多月，8月15号，发现集群中4个datanode进程死了，经查原因是内存 outofMemory了(因为这几台机器上部署了spark，给spark开的...
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
系统的升级涉及各个架构组件，细节很多。常年累月的修修补补使老系统积累了很多问题。 系统升级则意味着需要repair之前埋下的雷，那为何还要升级，可以考虑以下几个方面 成熟老系统常见问题： 1. 缺乏文档（这应该是大小公司都存在的问题。
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
总结和计划总是让人喜悦或镇痛，一方面以前一段时间没有荒废，能给现在的行动以信心，另一方面看到一年的时间并不能完成很多事情，需要抓紧时间。
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
ZooKeeper 保证了数据的强一致性， zk集群中任意节点（一个zkServer）上的相同znode下的数据一定是相同的。
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
线程的状态有：new、runnable、running、waiting、timed_waiting、blocked、dead 当执行new Thread(Runnabler)后，新创建出来的线程处于new状态，这种线程不可能执行 当执行thread.start()后，线程处于runnable状态，这种情况下只要得到CPU，就可以开始执行了。
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
使用MAT分析内存泄露 对于大型服务端应用程序来说，有些内存泄露问题很难在测试阶段发现，此时就需要分析JVM Heap Dump文件来找出问题。
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
fuser可用于查询文件、目录、socket端口和文件系统的使用进程 1.查询文件和目录使用者 fuser最基本的用法是查询某个文件或目录被哪个进程使用： # fuser -v .
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
异步通信 对于BS(Browser-Server 浏览器)架构，很多情景下server的处理时间较长。 如果浏览器发送请求后，保持跟server的连接，等待server响应，那么一方面会对用户的体验有负面影响； 另一方面，很有可能会由于超时，提示用户服务请求失败。
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
前段时间公司hadoop集群宕机，发现是namenode磁盘满了, 清理出部分空间后，重启集群时，重启失败。 又发现集群Secondary namenode 服务也恰恰坏掉，导致所有的操作log持续写入edits.new 文件，等集群宕机的时候文件大小已经达到了丧心病狂的70G+..重启集群报错 加载edits文件失败。
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
在运行一个group by的sql时，抛出以下错误信息： Task with the most failures(4): -----Task ID: task_201411191723_723592_m_000004URL: http://DDS0204.
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
目前实现的监控概览
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
1.尽可能地了解需求，系统层面适用开闭原则 2.模块化，低耦合，能快速响应变化，也可以避免一个子系统的问题波及整个大系统 3.
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
我们以前使用过的对hbase和hdfs进行健康检查，及剩余hdfs容量告警，简单易用 1.针对hadoop2的脚本： #/bin/bashbin=`dirname $0`bin=`cd $bin;pwd`STATE_OK=...
-
发表了文章 2019-06-01
<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont
TCP洪水攻击（SYN Flood）的诊断和处理 Posted by 海涛 on 2013 年 7 月 11 日 Tweet1 1. SYN Flood介绍 前段时间网站被攻击多次，其中最猛烈的就是TCP洪水攻击，即SYN Flood。
-
发表了文章 2019-06-01
mysql管理工具Maatkit介绍
Maatkit是不错的mysql管理工具，已经成为Percona的一部分。包含以下主要工具： 1、mk-table-checksum 检查主从表是否一致的有效工具 2、mk-table-sync 有效保证表一致的工具，不必重载从表而能够保证一致。
-
发表了文章 2019-06-01
HBase工具之监控Region的可用和读写延时状况
1、介绍HBase集群上region数目由于业务驱动而越来越多，由于服务器本身，网络以及hbase内部的一些不确定性bug等因素使得这些region可能面临着不可用或响应延时情况。
暂无更多信息
-
发表了文章
2019-06-13
分布式工作流任务调度系统EasyScheduler自定义任务插件开发
-
发表了文章
2019-06-13
开源分布式工作流任务调度系统EasyScheduler使用详解
-
发表了文章
2019-05-28
分布式工作流任务调度系统--Easy Scheduler 1.0.3 发布
-
发表了文章
2019-03-30
分布式工作流任务调度系统Easy Scheduler正式开源
-
发表了文章
2019-01-04
大数据分析的下一代架构--IOTA架构设计实践
-
发表了文章
2018-06-03
HBase之Rowkey设计总结及方舟实战篇
-
发表了文章
2018-05-26
以获客为目标 ，如何从0到1实现用户增长？
-
发表了文章
2018-05-22
那些100%被浪费的运营预算，其实本可以避免
-
发表了文章
2018-05-22
用户召回推送消息到达率低？用这4问推出最优解
-
发表了文章
2018-05-16
下一代大数据即时分析架构--IOTA架构
-
发表了文章
2018-04-22
大数据分析的下一代架构--IOTA
-
发表了文章
2018-04-22
mac下ll命令使用
-
发表了文章
2018-04-18
工作要做对，更要做到位
-
发表了文章
2018-03-31
class kafka.common.NotLeaderForPartitionException(kafka.server.ReplicaFetcherThread)异常处理
-
发表了文章
2018-03-27
Hive实现分组排序或者分页
-
发表了文章
2018-03-23
五种开源协议的比较(BSD，Apache，GPL，LGPL，MIT)
-
发表了文章
2018-03-22
永久关闭linux swap
-
发表了文章
2018-03-20
journalnode Can't scan a pre-transactional edit log异常处理
-
发表了文章
2018-03-19
该虚拟机的某个磁盘已经由虚拟机或者快照使用 问题解决
-
发表了文章
2018-03-19
np.linalg.norm(求范数)
滑动查看更多
暂无更多信息
暂无更多信息