支付宝现有的是数据量是280TB到年底将会达到450TB,每年至少三到五倍的数据增长,这些数据如何来处理?成千上万的数据如果没有一个可靠、稳定、高效的系统架构和平台,那么后果可想而之。 支付宝(中国)网络技术有限公司是国内领先的独立第三方支付平台,由阿里巴巴集团创办。支付宝致力于为中国电子商务提供“简单、安全、快速”的在线支付解决方案。 支付宝公司从2004年建立开始,始终以“信任”作为产品和服务的核心。不仅从产品上确保用户在线支付的安全,同时让用户通过支付宝在网络间建立起相互的信任,为建立纯净的互联网环境迈出了非常有意义的一步。 资料显示,支付宝在五年不到的时间内,用户覆盖了整个C2C、B2C及B2B领域。截止到2010年3月14日,支付宝注册用户突破3亿,截止到2009年12月,支付宝日交易额超过12亿,日交易笔数达到500万笔…… 这些诱人数字的背后,离不开系统的支持。面对每天旁大的数据,如何进行有效的管理,如何搭建数据的架构,这些数据又是如何转换成价值的? 记者日前在2010系统架构师大会上,现场采访了支付宝(中国)网络技术有限公司技术部BI首席架构师 蒋杰,就数据处理以及BI架构的部署分享了他的精彩观点。 支付宝BI首席架构师 蒋杰 (左)访谈 记者:商业智能(BI)在2010年企业特别关注,但从应用的角度来看,效果并不是很好。在您看来,BI应用效果不是很理想的原因是什么?作为支付宝的BI架构师,请您首先为我们什么简单的介绍一下支付宝的BI应用架构体系。 蒋杰:支付宝的BI架构是比较从原始一个存储加小机的模式到技术引进的PC架构+存储的阶段,我们采用了120台实现整个数据仓库的架构,来支撑我们这些分布式的数据处理和报表、日程处理,基本上这样实现的。 如果从技术的角度来看,它是没有多大的原因BI的发展是正常的。BI的应用效果不好很多问题在于我们没有对于系统的规划还有对于业务的了解非常透,造成了现在作BI越做赵没有信心,产生了不了太多的价值。但是随着更多的企业的数据产品出现和带来的价值, 而造成BI的这种信心和系统投资越来越往前走,这是一个趋势。 支付宝BI首席架构师 |