简单的介绍

Beanbun是一个简单的,可扩展的框架,爬行动物,它支持分布式,支持后台程序模式和普通模式,守护进程模式为主,根据下载 。

特征

  • 支持后台程序和普通模式(daemon模式只支持Linux服务器)
  • 默认狂饮爬行
  • 分布式支持
  • 支持多种方式的队列内存,Redis的,等。
  • 支持自定义过滤器URI
  • 支持广度优先和深度优先爬行两种途径
  • 按照PSR-4标准
  • 爬行页面被划分成多个步骤,每个步骤支持自定义动作(例如添加剂,修改用户代理等。)
  • 柔性延伸机构,框架可以容易地制造小部件:自定义队列中,定制的方式爬行。

安装

Beanbun可以通过耍大牌安装。



快速开始

创建文件启动。PHP,包括以下



执行命令行



然后,你可以看到爬网日志。

插头

beanbun分析器数据提取插头

转载请注明:> >>


本文链接:PHP多进程网络爬虫框架Beanbun

您可能也会喜欢

友情链接:

心经唱诵 大悲咒注音 经文