cn.wanghaomiao.seimi.annotation

Annotation Type Crawler

@Target(value={TYPE,FIELD})
@Retention(value=RUNTIME)
@Documented
public @interface Crawler

用于定义一个类为爬虫规则文件

Author:

汪浩淼 [et.tw@163.com] Date: 2015/5/28.

Optional Element Summary

Optional Elements

Modifier and Type	Optional Element and Description
int	delay 抓取请求间隔延时，单位为秒
String	name 如果需要特殊指定爬虫规则的名字，那么就设置这个就好了，默认爬虫类名
String	proxy e.g.
Class<? extends SeimiQueue>	queue 用来指定消费队列的具体实现
boolean	useCookie 指定crawler是否启用cookie
boolean	useUnrepeated 是否启用系统级去重机制，默认启用

Element Detail

name

public abstract String name

如果需要特殊指定爬虫规则的名字，那么就设置这个就好了，默认爬虫类名

Default:

""

proxy

public abstract String proxy

e.g. http://user:passwd@host:port https://user:passwd@host:port socket://user:passwd@host:port

Default:

""

useCookie

public abstract boolean useCookie

指定crawler是否启用cookie

Default:

false

delay

public abstract int delay

抓取请求间隔延时，单位为秒

Default:

0

queue

public abstract Class<? extends SeimiQueue> queue

用来指定消费队列的具体实现

Default:

cn.wanghaomiao.seimi.def.DefaultLocalQueue.class

useUnrepeated

public abstract boolean useUnrepeated

是否启用系统级去重机制，默认启用

Default:

true