Hadoop,云计算,Java技术分享,追逐新技术,落地在项目 <( ̄︶ ̄)↗[GO!]

蚂蚁金服1/4员工“专工”风险管理业务

2016年3月30日 admin 没有评论

阿里赴美IPO之后,狂欢之际,更多人关注到,当初建立在淘宝电商之上,如今对阿里来说是最大“意外收获”的支付宝却并不在上市计划内。同样不在上市计划之内的是包括支付宝在内的阿里又一张王牌——阿里金融,全称:浙江蚂蚁小微金融服务集团,如今更多人愿意称其为蚂蚁金服。 在阿里上市之后一个月,阿里小微正式更名蚂蚁金服,旗下框架初步浮出水面,当时的主要业务板块还仅是包括支付宝、余额宝、招财宝、蚂蚁小贷,以及正在筹建的网商银行。 《第一财经日报》记者日前走访了蚂蚁金服,揭秘这一已经将业务板块拓展至支付宝、蚂蚁花呗、网商银行、芝麻信用、余额宝、招财宝、蚂蚁聚宝、蚂蚁达客、保险业务等,囊括了“存贷汇”业务的金融巨舰

分类: 云计算 标签:

hive中的文件格式

2016年3月30日 admin 没有评论

在hive中的文件格式主要如下几种: textfile:默认的文本方式 Sequencefile:二进制格式 rcfile:面向列的二进制格式 orc:rcfile的增强版本,列式存储 parquet:列式存储,对嵌套类型数据支持较好 hive文件支持压缩方式: 这个与底层的hadoop有关,hadoop支持的压缩,hive都支持,主要有:gzip,bizp,snappy,lzo

分类: Hadoop 标签:

HBase Log Splitting

2016年3月15日 admin 没有评论

http://dirlt.com/hbase-log-splitting.html http://blog.cloudera.com/blog/2012/07/hbase-log-splitting/ 需要log split的原因是,在一台region server上面可能serve多个region,而这些region的WAL都记录在同一个文件里面。如果一个region server挂掉的话,那么对应的region需要放在其他region server上面进行serve,而在serve之前需要做日志恢复,这个日志包括所有对于这个region的修改,所以这就牵扯到了log split。所以所谓的log split是将一个WAL文件,按照不同region拆分成为多个文件,每个文件里面只是包含一个region的内容。log split发生在启动一个region server之前。 这个过程会很长,应该想办法避免掉,影响线上服务。

分类: hbase 标签:

程序人生

2016年3月14日 admin 没有评论

个人简介 一个程序员,立志终身做好程序员!不相信“砖家”,不迷信“权威”,Talk is cheap, show me your code! 09年参加工作,做过网络营销、网站、开发运营平台(易成网),做过云计算(易成云)、虚拟化管理平台(山西移动云管理平台)、玩过敏捷开发,朱老大形容我为“打杂的”,O(∩_∩)O 哈哈。 乐土、神州数码思特奇、优酷都是老东家,现在北航读云计算硕士,目前就职优酷从事数据分析相关工作。 关注技术点:Hadoop、云计算、java、敏捷开发。 个人感觉技术的提升,就如同修炼“吸星大法”,需令丹田“常如深箱,恒似深谷”,但如果不能将内力“百川汇流”,反有内力反噬之险,谨记谨记! 欢迎志趣相投者一起讨论,共同进步!欢迎订

分类: 程序人生 标签:

开发工具集

2016年3月4日 admin 没有评论

查询谷歌网页: http://www.itechzero.com/google-mirror-sites-collect.html 直达谷歌搜索页面:https://www.iamgg.pw/ 查询代码:http://www.programcreek.com/java-api-examples/index.php 代码库:http://www.programcreek.com/ 谷歌浏览器插件下载:http://www.cnplugins.com/

分类: Java 标签: ,

java NaN很有料哦

2016年3月4日 admin 没有评论

为了了解NaN,发现了一个好的代码库:http://www.programcreek.com/ 下边是ibm上的文章,但是看完之后还是有点模糊 https://www.ibm.com/developerworks/cn/java/j-jtp0114/ 但是结论和明确,以后做数据统计不要用float或者是double了,尽量采用整数计数,这也是为什么人民币要换算成毫厘吧! Java 语言支持两种基本的浮点类型: float 和 double ,以及与它们对应的包装类 Float 和 Double 。它们都依据 IEEE 754 标准,该标准为 32 位浮点和 64 位双精度浮点二进制小数定义了二进制标准。 特殊数字 除了编码所允许的值的标准范围(对于 float ,从 1.4e-45 到 3.4028235e+38),还有一些表示无穷大、负无穷大、 -0 和 NaN(它代表“不是一个

分类: Java 标签:

谷歌搜索使用

2016年3月3日 admin 没有评论

收集可用谷歌搜索页面:http://www.itechzero.com/google-mirror-sites-collect.html 可用的谷歌搜索: https://www.iamgg.pw/ 这样的程序人生有点悲哀!

分类: 程序人生 标签:

每天5句话,成为顶尖专家

2016年1月12日 admin 没有评论

怎么才能成为某个领域的专家呢?有人说靠天赋,有人说靠经验。但最近,微信大V“李叫兽”说,都不是。决定伟大水平和一般水平的关键因素,是“刻意练习”。 刻意练习就是为了提高绩效被刻意“设计”出来的练习。如果你工作10年,但是大部分时间都在重复,真正刻意练习的时间可能10小时都不到。而有的人工作2年,但他刻意练习了1000小时,他就比你牛。更可怕的是,互联网时代,顶尖水平和二流水平的差距会被技术迅速放大,所以刻意练习非常重要。 那怎么进行刻意练习呢?你要每天提醒自己五句话。 第一,每天提醒自己,不要进入自动完成状态。比如最简单的,和客户电话沟通吧,每次拿起电话前,都想想怎么比上一次在沟通技巧上、在逻辑上、在流

分类: 程序人生 标签:

phoenix待解决的问题

2016年1月6日 admin 没有评论

在HBase Phoenix上建立的表,突然发现数据插入和查出来的条数不一致,变量就是“snappy”,需要看下Phoenix的源代码了。 土豆实时数据: create table if not exists TD.VVCOUNT_VIDEO_MINUTE ( MINUTE BIGINT not null, VID INTEGER not null, PW BIGINT, MA BIGINT, PI BIGINT constraint pk primary key (MINUTE,VID) )salt_buckets = 30,versions=1,compression='snappy'; 测试库,没加snappy create table if not exists TD.VVCOUNT_VIDEO_MINUTE_TEST ( MINUTE BIGINT not null, VID INTEGER not null, PW BIGINT, MA BIGINT, PI BIGINT constraint pk primary key (MINUTE,VID) )salt_buckets = 30,versions=1;

分类: hbase 标签: ,

如何写专利

2015年12月21日 admin 没有评论

什么可以申请专利? 专利既可以保护装置、结构等产品,也可以保护数据处理、程序控制等方法。专利,仅保护“技术方案”。只要我们所要解决的是技术问题,并且我们解决技术问题的办法采用的是技术手段,这样的提案就属于技术方案,就可以申请专利。 寻找技术问题大致有两个角度:一个角度是从自身找,去收集那些影响我们设计指标或者拖累我们研发进度的技术上的困难;另一个角度是从竞争对手那里找,去挖掘竞品在技术层面可被我们吐嘈的地方。 要满足什么基本条件的方案才能申请? 一项技术方案能否获得专利权,并不是看这个方案有多么复杂,也不是看这个方案是否独创,而是去考察这个方案与现有技术的区别是否显而易见。在撰写专利提案时不要过

分类: 程序人生 标签: