cn.edu.hfut.dmic.webcollector.plugin.redis

类 RedisMergeDemo

java.lang.Object

cn.edu.hfut.dmic.webcollector.crawler.Crawler

cn.edu.hfut.dmic.webcollector.crawler.CommonCrawler

cn.edu.hfut.dmic.webcollector.crawler.BreadthCrawler

cn.edu.hfut.dmic.webcollector.plugin.redis.RedisMergeBreadthCrawler

cn.edu.hfut.dmic.webcollector.plugin.redis.RedisMergeDemo

所有已实现的接口:

DbUpdaterFactory, RequestFactory, ParserFactory

public class RedisMergeDemo
extends RedisMergeBreadthCrawler

作者:

hu

字段概要

从类继承的字段 cn.edu.hfut.dmic.webcollector.crawler.Crawler

RUNNING, STOPED

构造器概要

构造器

构造器和说明
RedisMergeDemo(String redisIP, int redisPort)

方法概要

方法

限定符和类型	方法和说明
static void	main(String[] args)
void	visit(Page page) 爬取成功时执行的方法

从类继承的方法 cn.edu.hfut.dmic.webcollector.plugin.redis.RedisMergeBreadthCrawler

createDbUpdater, createFetcher

从类继承的方法 cn.edu.hfut.dmic.webcollector.crawler.BreadthCrawler

createGenerator, createInjector, getCrawlPath, getRoot, setCrawlPath, setRoot

从类继承的方法 cn.edu.hfut.dmic.webcollector.crawler.CommonCrawler

createParser, createRequest, getConconfig, getCookie, getIsContentStored, getProxy, getUseragent, setConconfig, setCookie, setIsContentStored, setProxy, setUseragent

从类继承的方法 cn.edu.hfut.dmic.webcollector.crawler.Crawler

addRegex, addSeed, createFetcherHandler, failed, getRegexs, getSeeds, getThreads, inject, isResumable, setRegexs, setResumable, setSeeds, setThreads, start, stop, updateFetcher

从类继承的方法 java.lang.Object

clone, equals, finalize, getClass, hashCode, notify, notifyAll, toString, wait, wait, wait

构造器详细资料

RedisMergeDemo

public RedisMergeDemo(String redisIP,
              int redisPort)

方法详细资料

visit

public void visit(Page page)

从类复制的说明: Crawler

爬取成功时执行的方法

覆盖:

visit 在类中 BreadthCrawler

参数:

page - 成功爬取的网页/文件

main

public static void main(String[] args)
                 throws Exception

抛出:

Exception