当前位置: 华闻网 - 要闻

赶集网首席架构师蔡峰:轻松解决异构数据同步

时间:2014-03-21 12:45    作者:兰心雪   来源:    阅读量:5562   
 “大而全”,信息“少而精”正是分类信息网站得以赢得用户认可的重要态度,精准、有用的信息永远是分类信息平台的生存之本。

对于网站潜在的客户来说,分类信息远远也比新闻娱乐实惠很多,因为它直接面对普通市民的需要,与传统的广告不同,客户不仅没有怨恨,而且公司还积极寻找,是提供潜在用户需要找到的广告。竟然是分类信息当然网站要有核心运营方向,地方信息那么多不可能完整全部都要涉及到,首先运营者没有那么多全面的资源,其次网站也不能有所专攻,最后涉及的范围大了,能做到的深度也就浅了。就像图王说的那样,要做少做精做专业。

赶集网是一个分类信息门户网站,业务主要涉及房屋租售、二手物品买卖、招聘求职、车辆买卖、宠物票务、教育培训、同城活动及交友、团购等众多本地生活及商务服务,遍及人们日常生活的各个领域,为人们提供免费的信息发布交换平台。赶集网不断优化用户体验,为网民提供“实时、海量、有效”的信息。

拥有超过10年的软件行业及互联网行业工作经验,积累了丰富的软件开发和项目管理经验的赶集网首席架构师蔡峰,在项目管理,系统架构,性能优化,NoSQL等领域有广泛涉猎。在赶集网主要负责新技术研究,系统架构优化,性能监控等方面的工作。

据蔡峰介绍,赶集网是标准的LAMP架构,后台数据库是MySQL。“但随着业务的发展,需求也不断变化。MySQL单一的存储机构已经无法满足数据多样性的需求,因此需要加入NoSQL数据库或者Hadoop系统。然而异构数据系统的数据同步问题在赶集网的应用环境下更加明显。赶集网曾在应用层和系统层解决同步问题,都未取得进展,因此赶集网在实践过程中开发一套基于Tungsten Replicator的通用的CDC(Change Data Capture)解决方案。”蔡峰如是说。

基于Tungsten Replicator的通用的CDC解决方案具备通用性,高可用,低延迟等特性,已经被广泛应用于赶集网的各个业务和核心数据处理流程, 大幅度简化了系统架构的复杂度,减少了开发的难度和工作量。该方案的核心功能目前已经开源。

赶集网首席架构师蔡峰:轻松解决异构数据同步

相关内容