大数据
阿里大数据之路 标签描述

第一章总述 阿里巴巴大数据系统体系架构图 阿里数据体系主要分为数据采集、数据计算、数据服务和数据应用四大层次。 一、数据采集层 阿里巴巴建立了一套标准的数据采集体系方案,致力全面、高性能、规范地完成海量数据的采集,并将其传输到大数据平台。 数据来源主要有两部分: 业务数据:主要存在数据库中 日志数据:主要来自于日志文件 日志采集技术: Aplus.JS:Web端日志采集技术方案 UserTrack:APP端日志采集技术方案 消息中间件(离线/实时): TimeTunnel(TT):既包括数据库的增量数据传输,也包括日志数据的传输 数据库同步工具(离线):直连异构数据库(备库)来抽...