SACC2014现场报道：友盟:如何在一天之内收集3亿条移动数据

4nianyici

2014年9月17日-19日，2014 中国系统架构师大会(SACC 2014)在北京五洲皇冠国际酒店盛大开幕。作为中国规模最大的架构师豪门盛会，本届中国系统架构师大会以“发现架构之美”为主题，探讨最具前瞻性的行业趋势与技术热点，分享架构在企业中的最佳实践，共同领略架构之美。

　　据了解，大会邀请了来自百度、腾讯、阿里巴巴、京东等知名互联网企业与传统行业的资深架构师，分享云架构实践与解析、大数据架构及应用、自动化运维、高性能高可用网络架构设计、互联网存储架构优化、构建全新数据中心、互联网金融及风险防范、移动平台架构设计、高效电商系统构建、全栈工程师实践等主题的最新技术实践。


▲友盟数据平台高级架构师章炎

　　友盟数据平台高级架构师章炎的演讲是《如何在一天之内收集3亿移动设备的数据》，友盟诞生于2010年4月，随着移动互联网的蓬勃发展，友盟也从一个只有几个人的小公司，成长成为中国移动互联网的一个知名品牌。

　　根据能否追踪到单个独立的设备, 可以将一个统计系统分为可区分统计(Discriminative Statistics)和不可区分统计(Non-Discriminative Statistics)。友盟提供的是可区分统计，也就是会利用一个身份标识符(Unique ID，以后简称 ID)长期追踪单个设备的数据。作为对比，早期的网站统计都是不可区分统计，例如页面访问次数，独立 IP 数等;现代的网站统计都是基于 Cookie 或硬件指纹的可区分统计。由于智能设备提供了足够多的硬件指纹和计算能力，友盟从第一天开始就专注于可区分统计。


本文详细报道，请进入>> http://server.it168.com/a2014/0919/1667/000001667840.shtml

rdcwayx

这个介绍里似乎在做一个新工具。不清楚演讲者是否知道logstash这个现成的工具。 看着很类似，但是好像缺 redis （queue server）和 elasticsearch

rdcwayx

回复 3# bun

或许是按照自己的需求做了些定制。