| 网站首页 | 业界新闻 | 小组 | 威客 | 人才 | 下载频道 | 博客 | 代码贴 | 在线编程 | 编程论坛
欢迎加入我们,一同切磋技术
用户名:   
 
密 码:  
共有 393 人关注过本帖
标题:求大神指点数据方法!
只看楼主 加入收藏
xqf126
Rank: 1
等 级:新手上路
帖 子:6
专家分:0
注 册:2012-8-15
结帖率:50%
收藏
已结贴  问题点数:20 回复次数:4 
求大神指点数据方法!
现有日志文件记录的是用户上网记录,每条记录中都有访问时间和目标IP,现要做个IP访问量的统计,把每个IP的访问都给统计出来,日志中的记录字段已经被提取出来了,由于这种记录每分钟是上万条的,现在的问题是如何能快速地把IP的访问量给统计出来,普通的排序,查找,统计感觉效率不怎么样,IP的统计只需要统计到前三段即可,如在某段时间内有两条记录分别是1.2.3.1,另一条是1.2.3.2,这两个记录就都被统计为1.2.3的访问量,苦思无果,求大师指点指点

[ 本帖最后由 xqf126 于 2012-9-9 20:50 编辑 ]
搜索更多相关主题的帖子: 用户 如何 访问量 记录 
2012-09-09 20:44
pangding
Rank: 19Rank: 19Rank: 19Rank: 19Rank: 19Rank: 19
来 自:北京
等 级:贵宾
威 望:94
帖 子:6784
专家分:16751
注 册:2008-12-20
收藏
得分:7 
排序的效率是 nlog(n) 我觉得不算高了,几万条还是可以应付的。
用平衡树做关键字索引也是 nlog(n) 的,感觉没什么意思。
或者用哗然哈希表,较费空间。但复杂度是 n。感觉几万条的规模,也许没有用的必要吧。

不是很懂算法,也许有其它思路。
2012-09-09 23:10
xqf126
Rank: 1
等 级:新手上路
帖 子:6
专家分:0
注 册:2012-8-15
收藏
得分:0 
回复 2楼 pangding
现在的情况是打算按小时进行统计,一分钟记录大约有4万条,一个小时就是240万条,而且每天都要不停地进行统计,效率放第一,空间也要考虑,难为人啊
2012-09-10 10:20
uubird
Rank: 3Rank: 3
等 级:论坛游侠
帖 子:74
专家分:133
注 册:2009-7-2
收藏
得分:7 
导入到数据库,用sql去帮你查询分析
2012-09-10 14:17
netlin
Rank: 13Rank: 13Rank: 13Rank: 13
等 级:贵宾
威 望:24
帖 子:544
专家分:4308
注 册:2012-4-9
收藏
得分:7 
时间和空间都要考虑,有些难度!

做自己喜欢的事!
2012-09-15 12:38
快速回复:求大神指点数据方法!
数据加载中...
 
   



关于我们 | 广告合作 | 编程中国 | 清除Cookies | TOP | 手机版

编程中国 版权所有,并保留所有权利。
Powered by Discuz, Processed in 0.017903 second(s), 8 queries.
Copyright©2004-2024, BCCN.NET, All Rights Reserved