用户名*
邮箱*
密码*
确认密码*
验证码* 点击图片更换验证码
找回密码
忘记密码了?输入你的注册邮箱,并点击重置,稍后,你将会收到一封密码重置邮件。
大数据架构技术
我简单来说一下阿里集团的数据模型。
处理的数据主要来源与业务数据库和日志,通过数据同步中心和日志工具将源数据抽取到数据仓库的ods层,数据仓库主要由ods、dwd、dws和ads几个层级组成,采用odps对离线数据进行处理。将处理的结果采用数据同步中心存到数据库中在做其他数据应用。
模型差不多,采用TT抽取实时流,用storm+galaxy做流计算。
昵称*
E-Mail*
回复内容*
回复 ( 1 )
我简单来说一下阿里集团的数据模型。
处理的数据主要来源与业务数据库和日志,通过数据同步中心和日志工具将源数据抽取到数据仓库的ods层,数据仓库主要由ods、dwd、dws和ads几个层级组成,采用odps对离线数据进行处理。将处理的结果采用数据同步中心存到数据库中在做其他数据应用。
模型差不多,采用TT抽取实时流,用storm+galaxy做流计算。