【摘要】 本发明涉及一种海量数据的处理方法，该方法将接口数据文件作为数据库的辅 助表，采用表分区处理的方式进行存储，存储过程导入相关需要的数据，采用进程 并行处理的机制，根据业务特点对不同的数据业务划分不同的主题，并对数据进行 预处理，生成轻量级面向主题的汇总，然后在轻量级的汇总基础上进行重量级汇总。 与现有技术相比，本发明采用进程并行处理得机制，使多个任务能异步执行，在存 储方式上，采用对表划分分区的方式，在执行时分区之间互不影响，提高了执行效 率。此设计方法有效的连接不同系统之间的数据接口，在各个不同的层面采用合适 的策略，并使数据的查询的深度得到加强，效率得以提高。 【专利类型】发明申请 【申请人】上海全成通信技术有限公司 【申请人类型】企业 【申请人地址】200050上海市延安西路726号(华敏翰尊国际)7楼J、K座 【申请人地区】中国 【申请人城市】上海市 【申请人区县】长宁区 【申请号】CN200810039891.6 【申请日】2008-06-30 【申请年份】2008 【公开公告号】CN101620600A 【公开公告日】2010-01-06 【公开公告年份】2010 【IPC分类号】G06F17/30 【发明人】冯谧 【主权项内容】1.一种海量数据的处理方法，其特征在于，该方法将接口数据文件作为数据 库的辅助表，采用表分区处理的方式进行存储，存储过程导入相关需要的数据，采 用进程并行处理的机制，根据业务特点对不同的数据业务划分不同的主题，并对数 据进行预处理，生成轻量级面向主题的汇总，然后在轻量级的汇总基础上进行重量 级汇总。 【当前权利人】上海全成通信技术有限公司 【当前专利权人地址】上海市延安西路726号(华敏翰尊国际)7楼J、K座 【专利权人类型】有限责任公司 【统一社会信用代码】913101051321878233 【被引证次数】11 【被他引次数】11.0 【家族被引证次数】11
