专利名称:数据分析系统及数据分析方法专利类型:发明专利
发明人:王锋,漆兴,赵国贤,王志强申请号:CN201210307198.9申请日:20120824公开号:CN102880503A公开日:20130116
摘要:本发明公开了一种数据分析系统及数据分析方法。所述系统包括:待调度任务生成模块,用于根据预先定义的任务参数将收集的数据生成待调度的任务;待调度任务存储模块,用于存储生成的待调度的任务;任务调度模块,用于加载待调度的任务,并根据任务类型调用相应的任务处理模块;任务处理模块,用于根据任务中的分析需求生成相应的Hive SQL语句向基于Hadoop的数据仓库服务器发送;在接收到服务器返回的数据后完成对任务的数据分析。由于在数据分析系统的底层利用Hadoop系统进行数据分析,而在数据分析系统的上层则以任务调度模块来实现对任务的统筹管理,从而既可以利用Hadoop系统简化了数据分析流程,又提供了更为方便地对任务进行调度、管理的系统。
申请人:新浪网技术(中国)有限公司
地址:100080 北京市海淀区北四环西路58号理想国际大厦20层
国籍:CN
代理机构:北京市京大律师事务所
更多信息请下载全文后查看
因篇幅问题不能全部显示,请点此查看更多更全内容
Copyright © 2019- haog.cn 版权所有 赣ICP备2024042798号-2
违法及侵权请联系:TEL:199 1889 7713 E-MAIL:2724546146@qq.com
本站由北京市万商天勤律师事务所王兴未律师提供法律服务