一种网络爬虫实现方法和网络爬虫系统

1.一种网络爬虫实现方法，其中，该方法包括：
模拟用户对网页的访问操作发送网页访问请求；
根据网页访问请求对应的反馈内容获得相应的网页内容；
分析获得的网页内容，获得目标信息。
2.如权利要求1所述的方法，其中，所述模拟用户对网页的访问操作发送网页访问请求包括：
调用浏览器内核进行访问网页的操作，获得相应的网页内容。
3.如权利要求2所述的方法，其中，
该方法进一步包括：预先配置网址列表；
所述调用浏览器内核进行访问网页的操作，获得相应的网页内容包括：调用浏览器内核依次访问所述网址列表中的各网址对应的网页，获得相应的网页内容。
4.如权利要求2所述的方法，其中，
该方法进一步包括：预先配置IP地址列表；
所述调用浏览器内核进行访问网页的操作包括：从所述预设IP地址列表中选择一个IP地址，调用浏览器内核以所选择的IP地址作为访问者地址进行访问网页操作。
5.如权利要求4所述的方法，其中，该方法进一步包括：
当接收到拒绝访问网页的反馈消息时，从所述预设IP地址列表中重新选择一个IP地址，调用浏览器内核以重新选择的IP地址作为访问者地址进行访问网页操作。
6.如权利要求2所述的方法，其中，所述调用浏览器内核进行访问网页的操作，获得相应的网页内容包括：
调用浏览器内核根据本地的cookie进行访问网页的操作，获得相应的网页内容。
7.一种网络爬虫系统，其中，该系统包括：
网页访问处理单元，适于模拟用户对网页的访问操作发送网页访问请求；根据网页访问请求对应的反馈内容获得相应的网页内容；
分析单元，适于分析获得的网页内容，获得目标信息。
8.如权利要求7所述的系统，其中，所述网页访问处理单元包括：
调用单元，适于调用浏览器内核进行访问网页的操作，获得相应的网页内容；
浏览器内核，适于根据调用单元的指令进行访问网页的操作。
9.如权利要求8所述的系统，其中，
该系统进一步包括：网址配置单元，适于预先配置网址列表；
所述调用单元，适于调用浏览器内核依次访问所述网址列表中的各网址对应的网页，获得相应的网页内容。
10.如权利要求8所述的系统，其中，
该系统进一步包括：IP地址配置单元，适于预先配置IP地址列表；
所述调用单元，适于从所述预设IP地址列表中选择一个IP地址，调用浏览器内核以所选择的IP地址作为访问者地址进行访问网页操作。

暂无