cn.wanghaomiao.seimi.annotation

注释类型 Crawler

@Target(value={TYPE,FIELD})
@Retention(value=RUNTIME)
@Documented
public @interface Crawler

用于定义一个类为爬虫规则文件

作者:

汪浩淼 [et.tw@163.com] Date: 2015/5/28.

可选元素概要

可选元素

限定符和类型	可选元素和说明
int	delay 抓取请求间隔延时，单位为秒
String	name 如果需要特殊指定爬虫规则的名字，那么就设置这个就好了，默认爬虫类名
String	proxy e.g.
Class<? extends SeimiQueue>	queue 用来指定消费队列的具体实现
boolean	useCookie 指定crawler是否启用cookie
boolean	useUnrepeated 是否启用系统级去重机制，默认启用

元素详细资料

name

public abstract String name

如果需要特殊指定爬虫规则的名字，那么就设置这个就好了，默认爬虫类名

默认值:

""

proxy

public abstract String proxy

e.g. http://user:passwd@host:port https://user:passwd@host:port socket://user:passwd@host:port

默认值:

""

useCookie

public abstract boolean useCookie

指定crawler是否启用cookie

默认值:

false

delay

public abstract int delay

抓取请求间隔延时，单位为秒

默认值:

0

queue

public abstract Class<? extends SeimiQueue> queue

用来指定消费队列的具体实现

默认值:

cn.wanghaomiao.seimi.def.DefaultLocalQueue.class

useUnrepeated

public abstract boolean useUnrepeated

是否启用系统级去重机制，默认启用

默认值:

true