专利名称:一种分布式统计日志访问量的方法及装置专利类型:发明专利发明人:王嘉伟
申请号:CN201711475272.7申请日:20171229公开号:CN108363649A公开日:20180803
摘要:本发明实施例提供了一种分布式统计日志访问量的方法及装置,该方法包括:在分布式实时计算系统的服务器集群中,实时获取多个日志数据;将获取到的多个日志数据分割为第一预定数量的日志数据流;创建所述第一预定数量的工作单元,并将每一个日志数据流一一对应分配至每一个工作单元;在每一个工作单元中,对当前工作单元中已分配的日志数据流中的各个日志数据进行统计,并使用得到的日志统计数据实时更新统计数据库。通过本发明,极大地降低了每台机器的负载;同时,由于极大地减少了对日志文件的执行操作,因此,极大地提高了整个集群的数据处理响应速度;实现了快速、精确地实时统计每天的用户有效访问次数。
申请人:微梦创科网络科技(中国)有限公司
地址:100193 北京市海淀区东北旺西路中关村软件园二期(西扩)N-1、N-2地块新浪总部科研楼2层
国籍:CN
代理机构:北京卓岚智财知识产权代理事务所(特殊普通合伙)
代理人:任漱晨
更多信息请下载全文后查看
因篇幅问题不能全部显示,请点此查看更多更全内容