一种面向网络的多通道大数据采集系统及方法

发明专利有效专利

申请号：
CN201710142262.5
IPC分类号：G06F16/28
申请日期：
2017-03-10
申请人：
山东省科学院情报研究所

基础信息

权利要求

说明书

PDF全文

法律信息

引证文献

著录项信息

专利名称	一种面向网络的多通道大数据采集系统及方法
申请号	CN201710142262.5	申请日期	2017-03-10
法律状态	授权	申报国家	中国
公开/公告日	2017-06-13	公开/公告号	CN106844782A
优先权	暂无	优先权号	暂无
主分类号	G06F16/28	IPC分类号	G;0;6;F;1;6;/;2;8查看分类表>
申请人	山东省科学院情报研究所	申请人地址	山东省济南市历下区科院路19号变更专利地址、主体等相关变化，请及时变更，防止失效
权利人	山东省科学院情报研究所	当前权利人	山东省科学院情报研究所
发明人	朱世伟;杨子江;于俊凤;李源;冯海洲;魏墨济;王燕;李思思;张铭君;王彦
代理机构	济南圣达知识产权代理有限公司	代理人	黄海丽

摘要

本发明公开了面向网络的多通道大数据采集系统及方法，其中，面向网络的多通道大数据采集系统由论坛数据采集单元、博客数据采集单元、新闻数据采集单元及关系型数据库中数据采集单元构成的分布式定向采集体系架构组成；论坛数据采集单元，用于分别通过动态网页采集方法和网页信息抽取方法对在线论坛及离线论坛内的网络数据进行采集；博客数据采集单元，用于负责广度遍历博客站点，目的是获取博客Feed地址；对每个Feed地址对应的博客进行实时采集，跟踪更新的博客文章，以增量更新方式采集博客信息；新闻数据采集单元，用于采用基于行块分布函数的方法抽取新闻网页中的正文文本；关系型数据库中数据采集单元，用于采用数据转移工具来批量采集关系型数据库中数据。

序号	公开(公告)号	公开(公告)日	申请日	专利名称	申请人
该专利没有引用任何外部专利数据！

序号	公开(公告)号	公开(公告)日	申请日	专利名称	申请人
该专利没有被任何外部专利所引用！

我浏览过的专利

专利服务由北京酷爱智慧知识产权代理公司提供