Hadoop,云计算,Java技术分享,追逐新技术,落地在项目 <( ̄︶ ̄)↗[GO!]

不想努力的我顿时被扇醒了,你凭什么不奋斗?

2013年4月4日 tianhl 没有评论

你学习一般,考上了现在的这个学校,成绩不算好,拿不到校奖国奖,自习不规律上课不常听,考试全靠突击,同学帮一把也能考到七八十分。 你家境一般,父母都是普通员工,在这个城市一个月生活费一千二,没事下下馆子,一个月添一件衣服,想买台相机要等几个月,经常要咬咬牙才能买双自己喜欢的鞋。 你特长一般,不会吉他不会钢琴不会跳舞不会画画,想学摄影却不会PS,想上台演出却没信心,学校晚会比赛的时候,你经常站在台下的人群里而不是台上的聚光灯下。 你长相一般,不算英俊或者不算美丽,身材不算臃肿但是也没什么肌肉或者没什么曲线,平时只是稍稍打扮一下,容貌看上去并不出众,只能算整洁,你开玩笑的称自己是千万屌丝之一。 你的生活

分类: 程序人生 标签:

云调度-腾讯云平台

2013年4月4日 tianhl 没有评论

云调度系统是云平台的管理核心,协调云平台中各种资源,保证整朵云的正常工作;本课程主要介绍了云调度主要功能,及运作原理。并结合具体案例,阐述腾讯云平台内部资源调度的种类及实现。 邹辉,高级工程师,现负责协调云平台中各种资源工作。

腾讯云平台基础架构

2013年4月3日 tianhl 没有评论

《腾讯云平台基础架构》主要通过讲解腾讯云平台的基础架构的设计与实现,演示资源虚拟化、负载均衡等核心功能的原理,帮助第三方用户更好地理解和使用腾讯云平台资源。 主讲人:黄炳琪,高级工程师,现负责腾讯开放云平台基础组件的开发工作。

分类: 云计算 标签:

爆笑体育2013年第三期20130401

2013年4月2日 tianhl 没有评论

爆笑体育2013年第三期20130401

分类: 程序人生 标签:

Java线程安全

2013年4月1日 tianhl 没有评论

线程安全,那么什么是线程不安全呢? 在单线程运行的情况下,如果 sum = 0,加1后,sum=1一定是对的,但在多线程的情况下,有两个线程同时对sum加1,那么结果可能有两种,一种是sum=1,一种是sum=2;原因就在于sum被定义为全局变量。 如果你的代码所在的进程中有多个线程在同时运行,而这些线程可能会同时运行这段代码。如果每次运行结果和单线程运行的结果是一样的,而且其他的变量的值也和预期的是一样的,就是线程安全的。 或者说:一个类或者程序所提供的接口对于线程来说是原子操作或者多个线程之间的切换不会导致该接口的执行结果存在二义性,也就是说我们不用考虑同步的问题。 线程安全问题都是由全局变量及静态变量引起的。 若每个线程中

分类: Java 标签: ,

MapR与Ubuntu携手推免费版Hadoop工具

2013年3月31日 tianhl 没有评论

MapR与Ubuntu Linux开发商Canonical合作,实现Ubuntu与Hadoop大数据平台无缝兼容。 据介绍,Ubuntu/MapR包括MapR M3版本的Hadoop,以支持Ubuntu 12.04 LTS和12.10版本。该软件目前可以通过Canonical的Ubuntu合作伙伴获得,时间从4月25日开始。 Canonical公司副总裁Kyle MacDonald表示,MapR M3是一款易于部署的企业级Hadoop解决方案,“我们为Ubuntu客户提供了高效执行大数据的新途径”。 MapR M3是一款捆绑有HBase数据库、Pig开发分析工具、Hive数据仓库系统、Sqoop数据传输软件和其他Hadoop相关组件的免费版软件。 MapR是什么: MapR是MapR Technologies, Inc的一个产品,号称下一代Hadoop,使Hadoop变为一个速度更快、可靠性更高、更易于管

分类: Hadoop 标签: ,

本地模式运行storm的demo

2013年3月30日 tianhl 11 条评论

本例实现的是本地模式运行storm的wordcount demo! 开发过程中,可以用本地模式来运行Storm,这样就能在本地开发,在进程中测试Topology。一切就绪后,以远程模式运行 Storm,提交用于在集群中运行的Topology。 创建工程:demo-storm 目录结构如下: demo-storm ——src/main/java ————com.youku.demo ————————bolts ————————spouts ——src/test/java ——src/main/resource ————words.txt [caption id="attachment_1359" align="aligncenter" width="194" caption="storm-demo工程目录"][/caption] WordCounter.java: package com.youku.demo.bolts; import java.util.HashMap; import java.util.Map; import ba

分类: Hadoop 标签: ,

渐进学习hadoop

2013年3月29日 tianhl 没有评论

渐进式的学习Hadoop: (1)先搭建一个单节点的 Hadoop平台,先将那些疑问放一边,先去学习如何搭建这个平台; (2)尝试用Hadoop管理各类文件,尝试将数据存放于其非关系型数据库中,尝试编写一个MapReduce程序,通过些步骤,能够大概的认识到Hadoop是一个海量的数据、文件的存放平台,上面提供了各种通用的工具以帮助用户更好的去分析、应用与处理这些数据与文件; (3)考虑一个问题:如果当前有一个任务交给你,去实现一个TB、乃至PB级数据的海量存取与快速查询,你最后如果实现了这一任务,其实就是实现了一个专用任务的Hadoop平台,考虑到未来有很多类似的任务,将你的专用Hadoop平台改造成通用性平台,以方便其他用户使用,那你可能

分类: Hadoop 标签:

Storm实时计算平台

2013年3月28日 tianhl 没有评论

Twitter将Storm正式开源了,这是一个分布式的、容错的实时计算系统,它被托管在GitHub上,遵循 Eclipse Public License 1.0。Storm是由BackType开发的实时处理系统,BackType现在已在Twitter麾下。GitHub上的最新版本是Storm 0.8.0,基本是用Clojure写的。 Storm为分布式实时计算提供了一组通用原语,可被用于“流处理”之中,实时处理消息并更新数据库。这是管理队列及工作者集群的另一种方式。 Storm也可被用于“连续计算”(continuous computation),对数据流做连续查询,在计算时就将结果以流的形式输出给用户。它还可被用于“分布式RPC”,以并行的方式运行昂贵的运算。 Storm的主工程师Nathan Marz表示: Storm可以方便地在一个计算机

分类: 云计算 标签: ,

体验云存储

2013年3月27日 tianhl 没有评论

体验“云存储” Dropbox据说在分享文件的时候是有每日20G流量限制的,超过会封号; 腾讯的微云,我问过客服,说是没有,分享人数,下载次数,流量控制等限制; QQ中转站有下载次数限制 百度网盘有版权问题,可能会分享失败 各种廉价及有吸引力的 云选择日益增多。但是通过3月19号公布一个Strategy Analytics调查显示,美国市场已被大公司开发的生态系统所霸占。研究发现Apple在硬件和服务上的融合已很大限度上成为这种生态系统的标杆,在该领域占主导地位;而Dropbox、Amazon和Google紧随其后。 Strategy Analytics调查了接近2300个连接终端后得出结论:Apple的iCloud和iTunes Match服务拥有了市场上27%的用户;其它取得了两位数成绩的公司有:

分类: 云计算 标签: