2011年年终工作作结

 

2011,注定是幸运的一年，重要的一年，彻底改变我的一年

这一年，我改变了方向--从以前的j2ee服务器端开发转向了云计算平台方向研究

这一年，我入职傲游，加入了我一直期望的云计算团队

这一年，有付出，也有收获。。。。

 

 

付出

 

几个月的时间里，我直接或间接的参与了许多项目，在项目中不断学习，不断积累，感觉自己每天都有提高，每天都有进步

 

1、全量同步服务（刚入职，从0开始快速的熟悉全量同步整个业务并完成对全量同步日志的统计与分析）

 

2、国内外数据分离（参与国内外数据分离方案讨论，一起定义通讯协议，并一同参与开发，根据业务编写相应的测试用例，提高了团队整体开发效率，更好的保障项目按时完成任务--昌平速8奋斗14天。哈哈）

 

3、在线历史（结合用户的在线查看历史需求进行相应整理，讨论设计方案并最终开发实施，按时完成任务)

 

4、消息服务器（在邮件服务器和在线历史项目基础上，积极思考，抽象出一套通用的消息处理框架，为以后的新业务处理提供了方便的扩展）

 

5、穿越太空服务器接口（快速的开发保证业务的进度）

 

6、UEIP数据统计（积极与产品沟通，并与开发协调发现并解决许多数据统计问题，规范数据统计流程，保证今后的UEIP数据统计工作顺利进行）

 

 

收获

 

开放的团队，集大家的智慧，打开了我的思维

 

在参与的这些项目中积累了不少经验，也碰到了许多问题，在解决问题的过程中学习，让我在今后开发项目的时候考虑得更全面，在功能的基础上更关注性能

 

这一年最主要的收获还是在基于hadoop平台的云计算方向上的经验积累，通过对这一平台的研究，让我熟悉了数据处理的整个流程，从数据收集，数据存储，数据处理，数据查询、数据展示

 

数据收集：基于chukaw的客户端，现在已经实现每天几十G数据的实时收集

 

数据存储：采用hadoop分布式文件系统和hbase分布式数据库，现已经存储上T的文件

 

数据处理：基于hadoop/mapreduce的hive进行日志数据的统计已经成功用于全量日志同步、数据推广等多种应用场景

 

数据查询：开源的solr服务器完美的解决了在线历史的实时查询需求

 

数据展示：bi平台让数据统计结果更加直观的让人们理解

 

 

改进

 

我一直以为人之所以长两个耳朵，一个嘴巴，是让我们多听少说，但是现在我有了不一样的理解，我们不仅应该多听并且也要多说，这是我必须改进的地方

 

来年我一定更多的思考，更多的发表自己的意见，更多的分享，更多的交流。。。

 

计划

 

2012年，不管我在云服务组还是在数据组，我会继续专注于基于hadoop平台的一切技术，争取能够达到深知其原理，熟悉并熟练的运用，为云计算团队（甚至其他团队）打造一个稳定高效的数据分析平台，提供更多的服务

 

总结

 

2011年结束了，生活和工作都有了质的改变，有付出，有收获，开心的工作，快乐的生活，相信明天会更好

 

希望在2012年能为团队做更多的工作。。

 

 

 

新年快乐

 

---------------------------------------------------------------------------------------------------------------------

 

要想走得快，一个人走，要想走得远，大家一起走

 

高度决定视野，角度改变观念，尺度把握人生

 

你我各有一个苹果，交换后还是一个苹果，但是你我各有一项技术，交换后大家都有了两项技术，希望有更多的技术分享，技术交流

 

改变自己比改变别人容易