基于Python的多线程网络爬虫的设计与实现

被引：15

作者：

孙冰

机构：

[1] 中国石油大学计算机与通信工程学院

来源：

关键词：

Python; 网络爬虫; 多线程;

D O I：

暂无

中图分类号：

TP391.3 [检索机]; TP393.092 [];

学科分类号：

摘要：

本文主要详细介绍如何应用Python语言实现一个多线程的网络爬虫程序,并在此基础上搭建特定的测试网站将串行爬虫程序和多线程爬虫程序的运行效率进行对比,进而给出提高网络爬虫性能的具体方法。

引用

页码：38 / 39

页数：2

共 5 条