一个纯正程序员的啰嗦
在这里可以找得到这些工具的列表，虽然官网上免责声明为 “The tools described in this section are unsupported and experimental in nature and should be used with that in mind. They might not be available in future JDK versions.”，但实际上这些工具还是非常有用的，尤其可以站在 JVM 的角度来定位问题。我在此简单罗列一些常用的工具和命令，以及相应的执行结果示例。如果你经常和 JVM 打交道，最好对这些工具的常用命令熟记。
jst
[……]阅读全文
因为项目的需要，学习使用了 Hadoop，和所有过热的技术一样，“大数据”、“海量” 这类词语在互联网上满天乱飞。Hadoop 是一个非常优秀的分布式编程框架，设计精巧而且目前没有同级别同重量的替代品。另外也接触到一个内部使用的框架，对于 Hadoop 做了封装和定制，使得更满足业务需求。我最近也想写一些 Hadoop 的学习和使用心得，但是看到网上那么泛滥的文章，我觉得再写点笔记一样的东西实在是没有价值。倒不如在漫天颂歌的时候冷静下来看看，有哪些不适合 Hadoop 解决的难题呢？
这张图就是 Hadoop 的架构图，Map 和 Reduce 是两个最基本的处理阶段，之前有输入数据格式定义和数据分片，之后 [……]阅读全文
最近在工作中我需要把数据从公共的 Data Warehouse（数据仓库）导出来，放到属于我们 team 自己账号的云端存储资源中去，然后再在我们的应用中查询这样的资源。需要导出数据是因为直接从 Data Warehouse 查询数据是一个缓慢而且异步的过程，而我们的应用数据查询需要实时性。现在要解决这个问题有一些 AWS 的服务可供我们可以选择，基本上分成了两大类：
第一类是存储和内容分发（Storage & Content Delivery）：
[……]阅读全文
本文翻译自《Java 8 Explained: Applying Lambdas to Java Collections》。
Lambdas 表达式是 Java 8 的主题，在 Java 平台上我们期待了很久。但是，如果如果我们不在集合中使用它的话，就损失了很大价值。把现有接口迁移成为 lambda 风格接口的问题已经通过 default methods，也就是 defender methods 解决了。在这篇文章里面我们来看一看 Java 集合里面的批量数据操作（bulk operation）。
批量操作
最初的变更文档已经说了，批量操作是 “给 Java 集合框架添加的用以批量操作数据的功能，而它是基于 lam
[……]阅读全文
最近在看一本书，叫做 《思考的乐趣》，第 26 节 “我最爱的证明”，里面介绍了这样一则有趣的问题（文章链接在此）：
设想一个平面上布满间距为 1 的横纵直线，形成由一个个 1×1 正方形组成的网格。任意给一个面积小于 1 个单位的图形，证明这个图形总能放在网格中而不包含任何一个格点。
初看这个论断，觉得似乎是正确的，但又不知从何下手。文中指出证明的思路很巧妙，让人感到数学的美妙。我的感触是，文中的证明大大地换了个角度，很有峰回路转的感觉。正在读这篇文章的你，不妨先思考一下，别急着往下看答案。
如果陷入了拼命去构造各种各样的图形类别，去思考不同类别图形的情况下，怎么去摆放这样的图形，使得图形不覆
[……]阅读全文
今天是来武汉的第四天。有机会来华科招聘毕业生，是一件很有趣也很有价值的事情。有一些是很有意思的见闻，更多的是锻炼以及收获。大学里面有很多优秀的人才，有一些人的错过则颇为可惜。请那些勤奋、有天赋而且有抱负的学生保持热情，至少我可以明确地感受到，人才的价值。互联网公司为了招聘到优秀的人才，倾注了非常多的精力。以我们为例，这一次来华科的招聘团队 7、8 个人里面，大部分都折腾得非常疲惫，每天也没什么时间吃午饭，晚上还要讨论结果、审阅简历，回酒店倒头就睡。但是很多非常有潜质的工程师，往往还持有其他互联网企业的 offer，这其中对人才的竞争是非常激烈的。
一些有趣的现象
相对于沿海地区、北京上海 [……]阅读全文
在系统设计阶段考虑全面很难，有许多人倾向于把整个设计分成若干阶段，在迭代中完成整个设计，这本身是非常好的，但是，就如同 “先做出来，以后再优化” 这样的经典谎言一样，本身并无错，只是许多程序员都不习惯于真正的迭代设计和迭代优化。举例来说，有一个日益复杂的类，每个人都修改一点点，一直到最后都没有人愿意去做重构，大家的心态都是一样的：“我只修改了一点点，为什么要我去动那么大的刀，于我没有任何好处”。我不在这里谈论这一问题的解决办法，我倒是想说，在开始阶段考虑清楚问题在多数情况下还是很有好处的，设计考虑得越是清楚，在后续阶段代码可以承受越多的变更而不腐朽。
再做系统设计的时候，我们常常会这样说：“一般
[……]阅读全文
今天晚上在北京航空航天大学举行了亚马逊今年第一场校园招聘会，我也上去过了一把 speaker 的瘾，做了 20 分钟的 tech talk。工作 5 年多以后第一次得以回到大学学校（虽然不是自己毕业的大学），走上略显陈旧的教学楼，闻到楼道里厕所的味道，我一下就记起大学来了。每年到了这个时候，总是有很多学生要面临择业的问题。有一些怀念，也有不少新的感触，虽说都很微小，我简单地记录在这里。我一直觉得如果这件事情可以放在刚入大学就进行，会有很多大学生明白自己应该在人生最荒诞的四年甚至六年、七年里面，可以做一些什么，不让自己后悔。
很多非计算机相关专业的学生想投身软件行业，甚至相当程序员。不少学生在担心自己专业不对
[……]阅读全文
首先，Jeff Dean 是谁？
我想许多程序员都对这个名字如雷贯耳，如果你没有听说过，可以扫一眼他的个人履历，你会感到无比惊讶的：
但是，最著名的就是他设计和实现了 Map Reduce 和 Big Table，这两项改变世界的技术。
坊间流传着许多关于 Jeff Dean 有趣的说法，我挑了一些我觉得有趣的列在
[……]阅读全文
最初我是在公司内部的 broadcast 上面听到有 principal 介绍到它的，和 AspectJ 归在一起。看了几个例子之后觉得有点意思，就去 Lombok 的官网上扒了一下。我们已经知道向 AspectJ、CGLib 等等都可以做到对已有 Java 代码在字节码层级的改变，无论是编译时期静态织入还是运行时期动态代理，对于我们使用 AOP 来减少那些重复性编码的劳动、增加切面性质的逻辑颇有帮助。这里有几个概念：
[……]阅读全文
What’re the basic qualities to a software engineer? Hard skills such as coding, testing, business knowledge and algorithm, and soft skills as communication, passion, attitude, resposibility and so on. Posted an article talked about the over estimation of algrithm, I would like to raise a similar po[……]阅读全文
在说 3D 图表以前，首先要明确两个概念，一个是数据的维度，一个是呈现数据载体的维度。对于数据的维度，一维的数据呈现，但是呈现的载体是二维的平面图，比如饼图：
已经能够很清晰地观察到数据的分布情况。数据如果增加一个维度，变成二维，呈现载体依然是二维的平面图：
数据表达依然是清晰的。但是，倘若再增加一维，这个时候就面临了两个问题：
这两个问题中，第一个问题从本质上说，无法解决。数据的维度越大，理解起来理所当然地，也越来越困难。
但是第二个问题，我们至少有两种解决办法。一种
[……]阅读全文
我忽然很好奇，想知道其他软件工程师的生活是什么样的？人永远都没有活在别人心中的形象那么绚烂，生活中总有无数烂事烦事需要处理，但是每个人都有自己享受生活的方式。逛了逛了各式技术博客和论坛，我发现大家似乎都太严肃了，太谦逊了，太学术了。做软件本来是一件很有意思的事情，但是这些帖子和文章无非就包括这么几种：
[……]阅读全文
项目中有一个对实时响应性比较高的服务，引入了 Memcached 以减少延迟和减少数据库压力。但是期间遇到了一些问题，这里记录一些调优细节。
客户端选择
统计信息
可以通过 nc 命令向 Memcached 服务端发送消息来获取统计信息，例如：
echo "
[……]阅读全文
有时候对内存进行大对象的读写，会引起 JVM 长时间的停顿，有时候则是希望最大程度地提高 JVM 的效率，我们需要自己来管理内存（看起来很像是 Java 像 C++祖宗的妥协吧）。据我所知，很多缓存框架都会使用它，比如我以前使用过的 EhCache（给它包装了个酷一点的名字，叫 BigMemory），以及现在项目中的 Memcached。在 nio 以前，是没有光明正大的做法的，有一个 work around 的办法是直接访问 Unsafe 类。如果你使用 Eclipse，默认是不允许访问 sun.misc 下面的类的，你需要稍微修改一下，给 Type Access Rules 里面添加一条所有类都可以访问的规则：
在使用 Uns
[……]阅读全文
JDB
JDB 是基于文本和命令行的调试工具，Jikes 在 JDB 的基础上提供了 GUI。熟悉 JDB 还是有价值的，很多情况下需要我们在命令行下完成简单的 debug 问题定位。
jdb -classpath bin com.xx.Example jdb -connect com.sun.jdi.SocketAttach:hostname=myhost,port=8000 jdb -connect "com.sun.jdi.CommandLineLaunch:main=Hello 1 2 3"
我们可能更熟悉使用下面这样的方式来进行调试，但本质上就是在使用 JDB：
-agentlib:jdwp=tran
[……]阅读全文
We own a service supplying not-real-time data to the downstream clients. In order to reduce the average latency and the pressure on database, Memcached was imported as the cluster center cache, and our service consumed it. I encountered an issue when Memcached was firstly deployed on production envi
[……]阅读全文
经常要访问一些工具网站，根据页面上特定的取值。这些行为其实完全可以被视作重复劳动，有机会被脚本或者插件的自动行为取代。iMacro 或者 Greasemonkey 都是做这件事的好工具，今天下午有时间，要不干脆写一个 Chrome 插件吧。
没有必要去 Google 什么教程，官方的文档已经非常详细，足够指导整个过程了。文档的质量非常好，又有很多例子，是很不错的示例。本质上，用到的技术还是 HTML、JavaScript 和 CSS。我不在这里说太多，推荐大家去浏览一下，即便不做插件开发这件事情，过一下文档也是有收获的。如果你想尽快上手，解决重复劳动的问题而已，对这种好似路边花花草草的小东西没有钻研的兴趣，那么不
[……]阅读全文
这篇文章，算是理清和记录了一些我一直以来想说的话。在昨天的课程上，我们谈论目标、生活方式和工作，特别地，有一个具体问题——“ 五年后的你会是怎样的？” 其实我很好奇其他人的想法都是如何的，起码于我来说，这是一个很有趣的问题。