python爬虫有什么用


python爬虫有什么用?让我们一起知道吧?!
python爬虫是网络爬虫,主要用于搜索引擎 。它阅读一个网站的所有内容和链接,并在数据库中建立相关的全文索引,然后跳到另一个网站 。
python爬虫有:
1、python爬虫可以按照规则抓取网站上有价值的信息;
2、可以使用python爬虫抓取信息并下载到本地 。
扩展:爬虫分类
从爬取对象来看,爬虫可以分为通用爬虫和聚焦爬虫两类 。
通用网络爬虫又称全网爬虫(Scalable Web Crawler),爬行对象来自一些种子URL 扩展到整个 Web,主要是搜索引擎和大 Web 服务提供商收集数据 。
聚焦网络爬虫(Focused Crawler),它是指与预定义的主题相关页面有选择地爬行的网络爬虫 。
这就是今天的分享 。我希望它能帮助你!
【python爬虫有什么用】