HIVE高可用环境的搭建
引言
Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduce应用,十分适合数据仓库的统计分析。相对于用java代码编写mapreduce来说,Hive的优势明显:快...
如何快速学习一项新技术
引言
新技术层出不穷, 如何快速学习一项新技术, 跟上技术的节奏,同时让自己立于技术的不败之地,是每一个技术人需要关注的问题。对于一门新技术,我们可能没有那么多时间去深入学习每一门。对于大多数技术,我们只需要搞懂概念部分,从宏观上了解一下,决定我们要不要深入地去学习它。有了这些了解,就能轻松地与别人聊天了,也可以为以后技术选型做一些储备。当面对真正的需求时,或者你有足够的时间做技术储备时,才...
回首2019
引言
匆匆忙忙又是一年,回望过去一年,生活上,最重要的事,有了可爱的宝宝;工作上与伙伴们完成了项目版本上不断的迭代,可惜的
这个项目大家最初的期望还是蛮大,然而最后效果差强人意,最重要的是没有解决用户痛点,没有给用户带来价值。
目录
学习
做事
软实力
认知
站在更高的维度
商业心态
真正的富人思维
延迟的满足感
...
Selenium(ChromeDriver)的一次趟坑
引言
最近的项目有很多的画图的需求,前端资源不足,同时画图时间长,存在拿不到资源的情况,这个重任就落到了后端的身上,一开始使用JAVA G2D,画图,时间上可能会很久,又很繁琐,必须要一点一点的堆。在痛苦中挣扎着,想到能不能使用其他的方式方案替换,试过HTML2Image,验证失败;有位同事,脑洞大开,使用无头浏览器进行截图,这边文章记录一下在使用无头浏览器截图过程中所遇到的坑及教训(se...
浅谈mysql分区表
引言
在业务不断迭代,进化的过程,相关数据在数据库表中沉淀下来,少则千万,多级亿级,针对面向C端的业务数据,我们一般使用数据库中间件来解决大数据量的问题,比如360的Atlas, 及阿里的Mycat, Mycat现在开源自愿者在维护,Atlas文档方更全面一些。针对大表,Mysql提供一个解决方案,即分区表。
Mysql分区表使用限制
Mysql分区表的使用有一定的限制,在大型的互联网...
Hbase客户端API
引言
上一篇文章Hbase1.2.1 HA环境搭建我,介绍Hbase高可用环境的搭建,今天我们来看一下Hbase客户端的使用。
目录
单机环境搭建
Hbase客户端
附
单机环境搭建
使用的Hbase版本为1.2.1
首先配置hostname
donaldhan@ubuntu:/bdp/hbase/data/data/default$ cat /etc/hos...
Hbase1.2.1 HA环境搭建
引言
HBase 是一个分布式存储、数据库引擎,可以支持千万的QPS、PB级别的存储,这些都已经在生产环境验证,并且在广大的公司已经验证。在最近的一些版本中,引入了OffHeap降低gc影响,优化链路延迟,提供Replica等可以满足在线的需求。引入MOB,可以存储10M左右的对象,完全适应了对象存储。另外由于自身的并发能力、存储能力,可以说是具有最为竞争力的引擎。
目录
使用场景...
韩少周期论
引言
在年初股市站上3200点的时候,各种KOL,股票财经上,说2019年是改变命运的一年,为什么这么说呢,因为有周天的背书;周天王何须人也???2019???带着这样的疑问,买了周天王的经济周期决定人生命运:涛动周期论这本书。下面我们来看看周天王的神预言以及他的涛动周期论。
目录
周金涛简介
涛动周期论
韩少周期论
投资宝典
周金涛简介
周金涛:中国康德拉季耶夫周...
无名之辈
引言
看完中国新说唱第10期,l4wudu,vex,福克斯,给我留下了深刻的印象,不过这些人的当前已经被淘汰,尽管在有些人眼里看来,他们是棋子,但是他们已经活在了人们的心中。不记得是不是刘炫廷的一句话,敬那些无名之辈,让我甚是敬仰,有感而发,写在这篇无名之辈。
无名之辈
小菠萝诞生一月有余
其母于今年5月,开荒于河边湿地淤泥
种玉米、甘蔗、辣椒、西红柿,豆角于其中
浇水,施肥,各个生机勃...
使用adb排查Android 可疑的应用wifi万能钥匙
引言
最新android手机不知道被什么软件给霸屏了,使用杀毒也没用,非常的烦,最后使用adb工具,将具体流氓软件wifi万能钥匙的应用找出来,直接卸掉。
首先安装adb:
https://www.xda-developers.com/install-adb-windows-macos-linux/
adb的使用参考
https://developer.android.com/studi...