ITeye博客

whilew

whilew · 共 32 篇文章

diamond专题(三)—— diamond架构

原文地址: http://rdc.taobao.com/team/jm/archives/1606 大家好,这次为大家带来的是diamond的架构,架构如下图所示: 对该图进行一些说明: 1、作为一个配置中心,diamond的功能分为发布和订阅两部分。因为diamond存放的是持久数据,这些数据的变化频率不会很高,甚至很低,所以发布采用手工的形式,通过diamond后台管理界面发布;订阅是diamond的核心功能,订阅通过diamond-client的API进行。 2、diamond服务端采用mysql加本地文件的形式存放配置数据。发布数据时,数据先写到mysql,再写到本地文件;订阅数据时…

2012-05-10 23:34 · 评论(0)

diamond专题(二)– 核心原理介绍

原文地址: http://rdc.taobao.com/team/jm/archives/1592 大家好,通过第一篇的快速使用,大家已经对diamond有了一个基本的了解。本次为大家带来的是diamond核心原理的介绍,主要包括server集群的数据同步、client获取server地址、client从server获取数据、client运行时感知server的数据变化,这四部分。 一、server集群数据同步 diamond-server将数据存储在mysql和本地文件中,mysql是一个中心,diamond认为存储在mysql中的数据绝对正确,除此之外,server会将数据存储在本地文件…

2012-05-10 23:33 · 评论(0)

diamond专题(一)– 简介和快速使用

大家好,今天开始为大家带来我们通用产品团队的产品 —— diamond的专题,本次为大家介绍diamond的概况和快速使用。 一、概况 diamond是淘宝内部使用的一个管理持久配置的系统,它的特点是简单、可靠、易用,目前淘宝内部绝大多数系统的配置,由diamond来进行统一管理。 diamond为应用系统提供了获取配置的服务,应用不仅可以在启动时从diamond获取相关的配置,而且可以在运行中对配置数据的变化进行感知并获取变化后的配置数据。 持久配置是指配置数据会持久化到磁盘和数据库中。 diamond的特点是简单、可靠、易用: 简单:整体结构非常简单,从而减少了出错的可能性。 可靠:应用…

2012-05-10 23:31 · 评论(0)

记一次在WAS7.0上面部署Spring3+Hibernate应用程序的排错之旅

这二天在对以前一个老的应用程序在向WAS7应用迁移调整过程中碰到了一些不常见的错误,在排错过程中尝试去寻找相似问题的解决方案却每次都无功而返,为了防止以后这类错误再次困扰大家特将排查过程与大家共同分享,具体内容如下: (一)应用程序技术架构 首先我们先来看一看此次迁移的应用程序的技术架构总体是由Flex进行应用前端构建,采用J2EE5.0构建服务器端,采用BlazeDS实现前后端的连接,详细的技术组成内容是: a.前端:Flex3.5+CG3 b.服务端:Spring3.0+Hibernate3+BalzeDS(基于Annotaion方式进行配置) c.数据库:Oracle10g d.应用环…

2012-04-18 22:39 · 评论(0)

对缓存的思考——提高命中率

开篇 编写高效的程序并不只在于算法的精巧,还应该考虑到计算机内部的组织结构,cpu微指令的执行,缓存的组织和工作原理等。 好的算法在实际中不见得有高效率,如果完全没有考虑缓存、微指令实现的话。 前两篇博文 局部性原理浅析 介绍了程序的局部性原理,如何写出局部性良好代码。 提高程序性能、何为缓存 讨论了存储器层次结构,计算机内部的存储结构、缓存的概念,简单的介绍了缓存的工作机制。 建议先阅读前两篇博文,虽然他们之间联系不大,在前面也有一些对本文的铺垫。而且,这是一个系列的文章。旨在优化程序性能。 这篇博文主要介绍的是缓存的组织、工作原理。拨开迷雾,让你更加清晰的认识缓存。 通用缓存结构 回顾 …

2012-04-12 16:32 · 评论(0)

创业团队成员的「挑战」以及「成长」的问题

原文网址: http://www.dbanotes.net/startup/Challenge_and_Grow_up.html 回想从最初开始负责 丁香园 技术团队到现在,团队规模已经增加了几倍,有人离职,也有更多的人加入。团队一大,自然有些问题会浮现出来。比如最近在和团队同事聊天或是面试面谈的时候,经常会听到类似的话「觉得现在的工作没什么挑战」或是「感觉学不到东西」,以前偶尔听到团队同事这样的反馈,还是挺让我着急的,我第一直觉是很惭愧,公司或是团队给同事提供的资源和机会太少了,于是,不停的争取资源或是尽量改进,但是最后我逐渐发现,这样还是不能完全解决问题,这并非是问题的根源,因为一方面有…

2012-04-01 13:19 · 评论(0)

Scrum开发之我见

众所周知,直至今日无论是互联网公司还是传统软件企业都还在找寻一条适合自身特点的系统开发生命周期管理方法之道,但关键是大家在“众里寻它千百度“之后,都有”暮然回首那人不在灯火斓栅处“的诸多感概与感悟!找寻之路不容易,前期大家都在”瀑布式“方法论的引导下,取得了一定的成效,有效地进行了系统开发过程管理,但随着竞争越来越激烈与系统越来越复杂,曾经的”法宝“瞬间失灵了,成本越来越高,过程越来越乱,于是老板坐不住了。便有了众多公司与企业在”穷则思,思则变,变则试“的永恒法则指导下,象打了兴奋剂一样热烈地开始去拥抱”洋玩意“-”CMM/CMMI“方法论,在培训与咨询公司的狂热吹捧下,无数正规地、不正规的…

2012-03-31 23:46 · 评论(0)

Scrum 之 product Backlog

Scrum 之 product Backlog 转载自 周金根 [ http://zhoujg.cnblogs.com/ ] Scrum的基本概念其实并不复杂,但是想做好并不容易,大家都知道product backlog的重要性,但是我们如何制定和展现它,如何评定优先级,如何进行初始评估?下面我将介绍和product backlog相关的一些问题。 在 Scrum之 流程和术语 介绍了流程,这里主要介绍第一个最重要的工件 Product Backlog。它是Scrum的核心,也是一切的起源。它是由Product Owner负责制定的一个按照重要性的级别排序了的故事列表。 什么是Prodcut…

2012-03-27 08:42 · 评论(0)

有故障,毋宁死—谈系统故障及软件质量

有故障,毋宁死 作者:Tim 源地址: http://timyang.net/tech/quality-or-death/ —谈系统故障及软件质量 如果你是一个7×24小时在线服务的整体(或模块)的技术或系统负责人,你的大部分生活会如游走钢丝。 程序会出bug、资源会出故障、发布会操作错误、测试会有疏漏、安全会出漏洞、网络会有波动、服务器会突然坏掉。当产品的需求日益增多,判随工程师团队会日益增大,一个软件项目或功能从开发到上线的完成,都不可能由一人或者几个核心工程师去做,需要由不同背景、不同能力及做事风格的的开发、测试、工程师配合完成。当任一环节问题(包括有不少并非你直接可控范围之内的问题)…

2012-03-26 15:26 · 评论(0)

hbase运维

原文地址: http://blog.bluedavy.com/?p=251 NoSQL现在风生水起,hbase的使用也越来越广,但目前几乎所有的NoSQL产品在运维上都没法和DB相提并论,在这篇blog中来总结下我们在运维hbase时的一些问题以及解决的方法,也希望得到更多hbase同行们的建议,:) 在运维hbase时,目前我们最为关注的主要是三大方面的状况: 1. Cluster load; 2. 读写; 3. 磁盘空间。 1. Cluster load 集群的load状况直接反映了集群的健康程度,load状况的获取非常容易,直接部署ganglia即可得到,由于hbase以优秀的可伸缩性…

2012-03-16 23:36 · 评论(0)

java应用运维

原文地址: http://blog.bluedavy.com/?p=363 对于互联网产品或长期运行的产品而言,运维工作非常重要,尤其是在产品复杂了以后,在这篇blog中就来说下Java应用的运维工作(ps:虽然看起来各种语言做的系统的运维工作都差不多,但细节上还是会有很多不同,so本文还是只讲Java的)。 苦逼的码农按照需求开发好了一个全新的Java Web应用,该发布上线给用户用了,要把一个Java Web应用发布上线,首先需要搭建运行的环境,运行的环境需要有JDK、APPServer,在已经装好了os的机器上装上JDK和APPServer,开发好的Java Web应用可以用maven…

2012-03-16 23:33 · 评论(0)

使用HTML5的十大原因

你难道还没有考虑使用HTML5? 当然我猜想你可能有自己的原因;它现在还没有被广泛的支持,在IE中不好使,或者你就是喜欢写比较严格的XHTML代码。HTML5是web开发世界的一次重大的改变,事实上不管你是否喜欢,它都是代表着未来趋势。其实HTML5并不难理解和使用。我们这里能列出许多原因为什么现在要开始使用HTML5。 目前有很多的文章介绍使用HTML5并且介绍了使用它的优势和好处,没错,我们这篇文章也类似。随着更多这样的文章,以及Apple的支持, Adobe围绕HTML5的产品开发,以及移动flash的死亡,如此多网站的支持,我想对那些仍旧没有或者不想接受它的人说一些话。我认为主要得原…

2012-03-14 13:26 · 评论(0)

需求管理-浅显与深奥并重

在软件开发过程中需求的重要性无需长篇累牍来描述,可以说在软件开发过程中所有的一切都将围绕需求展开。那么在软件开发过程有效地进行需求管理,将对软件最终的成功与否起到至关重要的作用。问题的关键是:我们如何做好需求管理? 首先,让我们一起来共同认识一下“需求”。“需求”-软件开发时应满足的功能与非功能性要求(维基百科中关于软件需求的定义)。就我个人而言,我所认为的需求就是人们为了满足某种目标而产生的某种欲望或希望,有了目标就产生了需要,有了需要就提出了诸多要求来实现目标,需求就这样不断丰满起来,宛如少女成长一般逐渐丰富起来。那么需求管理则是为了更好地对需求进行规范处理,通过有意识地梳理不同组织、人…

2012-03-12 23:53 · 评论(0)

SQL语句解析过程浅析

在一些系统中需要对SQL查询语句进行解析,并最终根据业务需求将其转换处理将其转换为真实的SQL语句,这一过程我把它简称为:逻辑SQL-物理SQL的转换。在这一过程其中的关键技术是逻辑SQL语法分析,语法分析实现采用例如树型语法分析模型等方式实现,它是以二叉树方式,针对SQL中的关键字(例如:Select,From,Where等)进行判断并作为节点形成树型基本结构,再以二叉树方式加载查询数据(例如:查询字段,表名,条件等),最后形成二叉树结构模型,为后续的逻辑模型转换为物理模型提供词元数据,最后借助元数据系统辅助实现SQL语句转换工作。 逻辑SQL语句的解析(LSQL Parse)在技术上主要…

2012-02-28 23:52 · 评论(0)

你真的准备好了吗?

这二天来到了繁华的上海,在思想与观念上受到了一些“洗脑”,谨用一篇随笔记录下来,以便在日后的工作、生活中能够不时挑望今天的思路,不断警醒自己,帮助自己修正方向与思路,强化观念以矢志不渝地推进相关事宜,强大自己的内心。 需要此次置身于上海的郊区集镇,但是依然能够感受到“上海节奏”给你带来的那种压迫感,这种快节奏,强压迫感让人情不自禁地积极起来,思维活跃起来,观念朝开放性方向发展起来,总之让你感觉很“hi”,喜上眉梢,心情随之蛮"happy"起来,让自己感觉仿彿回到了在北京的那个时侯。在短短地二天里接触了一些人,学习了一些系统的理论,接受了一些新的观点,感觉充实度比在长沙要强很多。很少失眠的人居…

2012-02-28 23:11 · 评论(0)