免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2661 | 回复: 0
打印 上一主题 下一主题

跪求日志分析map-reduce的分割合并策略 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2011-11-09 10:54 |只看该作者 |倒序浏览
大家好,我在单机情况下分析apache日志的做法是,
建立两级的红黑树,第一级来来统计ip,在每个ip的节点上挂一棵树来统计这个ip访问的url
现在我想把这个需求嵌入到map-reduce框架里面,我倒是有几个方案,但是我觉得都不是什么好方案,我想问下谁做过,是否可以给我教授一下啊,谢谢了

比如我怎么分割统计,怎么合并,谢谢啊,跪求答案啊
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP