cn.edu.hfut.dmic.webcollector.plugin.redis

类 RedisMergeBreadthCrawler

java.lang.Object

cn.edu.hfut.dmic.webcollector.crawler.Crawler

cn.edu.hfut.dmic.webcollector.crawler.CommonCrawler

cn.edu.hfut.dmic.webcollector.crawler.BreadthCrawler

cn.edu.hfut.dmic.webcollector.plugin.redis.RedisMergeBreadthCrawler

所有已实现的接口:

DbUpdaterFactory, RequestFactory, ParserFactory

直接已知子类:

RedisMergeDemo

public class RedisMergeBreadthCrawler
extends BreadthCrawler

作者:

hu

字段概要

从类继承的字段 cn.edu.hfut.dmic.webcollector.crawler.Crawler

RUNNING, STOPED

构造器概要

构造器

构造器和说明
RedisMergeBreadthCrawler(String redisIP, int redisPort)

方法概要

方法

限定符和类型	方法和说明
DbUpdater	createDbUpdater()
Fetcher	createFetcher() 生成Fetcher(抓取器)的方法，可以通过Override这个方法来完成自定义Fetcher

从类继承的方法 cn.edu.hfut.dmic.webcollector.crawler.BreadthCrawler

createGenerator, createInjector, getCrawlPath, getRoot, setCrawlPath, setRoot, visit

从类继承的方法 cn.edu.hfut.dmic.webcollector.crawler.CommonCrawler

createParser, createRequest, getConconfig, getCookie, getIsContentStored, getProxy, getUseragent, setConconfig, setCookie, setIsContentStored, setProxy, setUseragent

从类继承的方法 cn.edu.hfut.dmic.webcollector.crawler.Crawler

addRegex, addSeed, createFetcherHandler, failed, getRegexs, getSeeds, getThreads, inject, isResumable, setRegexs, setResumable, setSeeds, setThreads, start, stop, updateFetcher

从类继承的方法 java.lang.Object

clone, equals, finalize, getClass, hashCode, notify, notifyAll, toString, wait, wait, wait

构造器详细资料

RedisMergeBreadthCrawler

public RedisMergeBreadthCrawler(String redisIP,
                        int redisPort)

方法详细资料

createDbUpdater

public DbUpdater createDbUpdater()

指定者:

createDbUpdater 在接口中 DbUpdaterFactory

覆盖:

createDbUpdater 在类中 BreadthCrawler

createFetcher

public Fetcher createFetcher()

从类复制的说明: Crawler

生成Fetcher(抓取器)的方法，可以通过Override这个方法来完成自定义Fetcher

覆盖:

createFetcher 在类中 CommonCrawler

返回:

生成的抓取器