cn.edu.hfut.dmic.webcollector.plugin.redis

类 RedisCrawler

java.lang.Object

cn.edu.hfut.dmic.webcollector.crawler.Crawler

cn.edu.hfut.dmic.webcollector.crawler.CommonCrawler

cn.edu.hfut.dmic.webcollector.plugin.redis.RedisCrawler

所有已实现的接口:

DbUpdaterFactory, RequestFactory, ParserFactory

public class RedisCrawler
extends CommonCrawler

基于Redis的广度遍历器

作者:

hu

字段概要

从类继承的字段 cn.edu.hfut.dmic.webcollector.crawler.Crawler

RUNNING, STOPED

构造器概要

构造器

构造器和说明
RedisCrawler(String tableName, String ip, int port) 构建一个基于redis的广度遍历器

方法概要

方法

限定符和类型	方法和说明
DbUpdater	createDbUpdater()
Generator	createGenerator()
Injector	createInjector()
String	getIp() 返回redis的IP
int	getPort() 返回redis的端口
String	getTableName() 返回任务名
void	setIp(String ip) 设置redis的IP
void	setPort(int port) 设置redis的端口
void	setTableName(String tableName) 设置任务名

从类继承的方法 cn.edu.hfut.dmic.webcollector.crawler.CommonCrawler

createFetcher, createParser, createRequest, getConconfig, getCookie, getIsContentStored, getProxy, getUseragent, setConconfig, setCookie, setIsContentStored, setProxy, setUseragent

从类继承的方法 cn.edu.hfut.dmic.webcollector.crawler.Crawler

addRegex, addSeed, createFetcherHandler, failed, getRegexs, getSeeds, getThreads, inject, isResumable, setRegexs, setResumable, setSeeds, setThreads, start, stop, updateFetcher, visit

从类继承的方法 java.lang.Object

clone, equals, finalize, getClass, hashCode, notify, notifyAll, toString, wait, wait, wait

构造器详细资料

RedisCrawler

public RedisCrawler(String tableName,
            String ip,
            int port)

构建一个基于redis的广度遍历器

参数:

tableName - 任务名

ip - redis的ip

port - redis的端口

方法详细资料

createGenerator

public Generator createGenerator()

指定者:

createGenerator 在类中 Crawler

createInjector

public Injector createInjector()

指定者:

createInjector 在类中 Crawler

createDbUpdater

public DbUpdater createDbUpdater()

getIp

public String getIp()

返回redis的IP

返回:

redis的IP

setIp

public void setIp(String ip)

设置redis的IP

参数:

ip - redis的IP

getPort

public int getPort()

返回redis的端口

返回:

redis的端口

setPort

public void setPort(int port)

设置redis的端口

参数:

port - redis的端口

getTableName

public String getTableName()

返回任务名

返回:

任务名

setTableName

public void setTableName(String tableName)

设置任务名

参数:

tableName - 任务名