cn.edu.hfut.dmic.webcollector.fetcher

类 FSSegmentWriter

java.lang.Object

cn.edu.hfut.dmic.webcollector.fetcher.FSSegmentWriter

所有已实现的接口:

SegmentWriter

public class FSSegmentWriter
extends Object
implements SegmentWriter

基于文件系统的SegmentWriter

作者:

hu

构造器概要

构造器

构造器和说明
FSSegmentWriter(String crawlPath, String segmentPath) 构造一个在指定文件夹写爬取信息的Writer

方法概要

方法

限定符和类型	方法和说明
void	close() 关闭Writer
void	wrtieContent(Content content) 写入一条Content对象(存储网页/文件内容的对象)
void	wrtieFetch(CrawlDatum fetch) 写入一条爬取历史记录
void	wrtieParse(ParseResult parseresult) 写入一条网页解析结果

从类继承的方法 java.lang.Object

clone, equals, finalize, getClass, hashCode, notify, notifyAll, toString, wait, wait, wait

构造器详细资料

FSSegmentWriter

public FSSegmentWriter(String crawlPath,
               String segmentPath)

构造一个在指定文件夹写爬取信息的Writer

参数:

segmentPath - 指定的文件夹路径

方法详细资料

wrtieFetch

public void wrtieFetch(CrawlDatum fetch)
                throws IOException

写入一条爬取历史记录

指定者:

wrtieFetch 在接口中 SegmentWriter

参数:

fetch - 爬取历史记录（爬取任务)

抛出:

IOException

IOException

wrtieContent

public void wrtieContent(Content content)
                  throws IOException

写入一条Content对象(存储网页/文件内容的对象)

指定者:

wrtieContent 在接口中 SegmentWriter

参数:

content -

抛出:

IOException

IOException

wrtieParse

public void wrtieParse(ParseResult parseresult)
                throws IOException

写入一条网页解析结果

指定者:

wrtieParse 在接口中 SegmentWriter

参数:

parseresult - 网页解析结果

抛出:

IOException

IOException

close

public void close()
           throws IOException

关闭Writer

指定者:

close 在接口中 SegmentWriter

抛出:

IOException

IOException