专利名称:一种基于Spark大数据处理平台的查询方法专利类型:发明专利发明人:万修远
申请号:CN201510930909.1申请日:20151215公开号:CN105550318A公开日:20160504
摘要:本发明公开了一种基于Spark大数据处理平台的查询方法,该查询方法是,若是排序查询时,判断当前计算任务的结果的排名序号是否是上一次输出序号的下一位,若是,则输出结果,然后按照排名序号判断紧挨其后是否有排名连续的已经存储的其它计算任务结果,有则一并输出这些结果;若不是,存储当前计算任务结果到相应的排名序号索引位置上。若是非排序查询时,每一个计算任务完成后立即输出结果。所有已经输出的结果不再存储或立即释放其占用内存。本发明的查询方法在执行常规的简单查询时,即使要处理的数据非常庞大,也能快速返回结果;执行复杂的查询时,能在原有基础上大大缩短用户响应时间,无论是执行哪种查询,没有任何延迟。
申请人:深圳市华讯方舟软件技术有限公司,深圳市华讯方舟科技有限公司
地址:518102 广东省深圳市宝安区西乡街道宝田一路臣田工业区第37栋3楼
国籍:CN
代理机构:北京律和信知识产权代理事务所(普通合伙)
更多信息请下载全文后查看
因篇幅问题不能全部显示,请点此查看更多更全内容