cn.wanghaomiao.seimi.core

接口 SeimiQueue

所有超级接口:

java.io.Serializable

所有已知实现类:

DefaultLocalQueue, DefaultRedisQueue

public interface SeimiQueue
extends java.io.Serializable

定义系统队列的基本接口，可自由选择实现，只要符合规范就行。

从以下版本开始:

2015/6/2.

作者:

SeimiMaster seimimaster@gmail.com

方法概要

限定符和类型	方法和说明
void	addProcessed(Request req) 记录一个处理过的请求
Request	bPop(java.lang.String crawlerName) 阻塞式出队一个请求
void	clearRecord(java.lang.String crawlerName) 清除抓取记录
boolean	isProcessed(Request req) 判断一个URL是否处理过了
long	len(java.lang.String crawlerName) 任务队列剩余长度
boolean	push(Request req) 入队一个请求
long	totalCrawled(java.lang.String crawlerName) 目前总共的抓取数量

方法详细资料

bPop

Request bPop(java.lang.String crawlerName)

阻塞式出队一个请求

参数:

crawlerName - --

返回:

--

push

boolean push(Request req)

入队一个请求

参数:

req - 请求

返回:

--

len

long len(java.lang.String crawlerName)

任务队列剩余长度

参数:

crawlerName - --

返回:

num

isProcessed

boolean isProcessed(Request req)

判断一个URL是否处理过了

参数:

req - --

返回:

--

addProcessed

void addProcessed(Request req)

记录一个处理过的请求

参数:

req - --

totalCrawled

long totalCrawled(java.lang.String crawlerName)

目前总共的抓取数量

参数:

crawlerName - --

返回:

num

clearRecord

void clearRecord(java.lang.String crawlerName)

清除抓取记录

参数:

crawlerName - --