///?@file?DomainLimit.cpp
///?@brief?實現#DomainLimit類
///?@author?閔衛
///?@date?2015年11月20日
///?@version?1.0.0.1

#include?“Precompile.h“
#include?“WebCrawler.h“
#include?“DomainLimit.h“
#include?“PluginMngr.h“
#include?“StrKit.h“

DomainLimit?g_pluginDomainLimit;?//?域名限制插件對象
WebCrawler*?g_app;???????????????//?應用程序對象

//?插件初始化
//?成功返回true，失敗返回false
//?根據域名限制插件的功能實現基類中的虛函數
bool?DomainLimit::init?（
	WebCrawler*?app?//?[輸入/輸出]?應用程序對象
	）?{
	//?以統一資源定位符插件的身份
	//?注冊到應用程序對象的插件管理器中
	（g_app?=?app）->m_pluginMngr.registerUrlPlugin?（this）;

	//?拆分配置器中的包含前綴字符串，以逗號為分隔符，不限拆分次數
	m_includePrefixes?=?StrKit::split?（
		g_app->m_cfg.m_includePrefixes?““?0）;
	//?拆分配置器中的排除前綴字符串，以逗號為分隔符，不限拆分次數
	m_excludePrefixes?=?StrKit::split?（
		g_app->m_cfg.m_excludePrefixes?““?0）;;

	//?返回成功
	return?true;
}

//?插件處理
//?成功返回true，失敗返回false
//?根據域名限制插件的功能實現基類中的虛函數
bool?DomainLimit::handler?（
	void*?arg?//?[輸入/輸出]?插件參數
	）?{
	//?原始統一資源定位符
	RawUrl*?rawUrl?=?static_cast?（arg）;

	//?若是種子鏈接（鏈接深度為0）或非超文本標記語言
	if?（!?rawUrl->m_depth?||?rawUrl->m_type?!=?RawUrl::ETYPE_HTML）
		//?返回成功，抓取該統一資源定位符
		return?true;

	//?字符串向量只讀迭代器
	vector::const_iterator?it;

	//?統一資源定位符字符串以哪個包含前綴開頭
	for?（it?=?m_includePrefixes.begin?（）;
		it?!=?m_includePrefixes.end?（）?&&
		rawUrl->m_strUrl.find?（*it?0）;?++it）;

	//?若沒有與統一資源定位符字符串匹配的包含前綴
	if?（!?m_includePrefixes.empty?（）?&&
		it?==?m_includePrefixes.end?（））?{
		//?記錄警告日志
		g_app->m_log.printf?（Log::LEVEL_WAR?__FILE__?__LINE__
			“不抓不在包含集\“%s\“中的統一資源定位符\“%s\““
			g_app->m_cfg.m_includePrefixes.c_str?（）
			rawUrl->m_strUrl.c_str?（））;
		//?返回失敗，不抓該統一資源定位符
		return?false;
	}

	//?統一資源定位符字符串以哪個排除前綴開頭
	for?（it?=?m_excludePrefixes.begin?（）;
		it?!=?m_excludePrefixes.end?（）?&&
		rawUrl->m_strUrl.find?（*it?0）;?++it）;

	//?若存在與統一資源定位符字符串匹配的排除前綴
	if?（it?!=?m_excludePrefixes.end?（））?{
		//?記錄警告日志
		g_app->m_log.printf?（Log::LEVEL_WAR?__FILE__?__LINE__
			“不抓排除集\“%s\“中的統一資源定位符\“%s\““
			g_app->m_cfg.m_excludePrefixes.c_str?（）
			rawUrl->m_strUrl.c_str?（））;
		//?返回失敗，不抓該統一資源定位符
		return?false;
	}

	//?返回成功，抓取該統一資源定位符
	return?true;
}

?屬性????????????大小?????日期????時間???名稱
-----------?---------??----------?-----??----

?????文件?????138568??2016-10-30?13:45??WebCrawler\bin\WebCrawler

?????文件????????598??2016-10-28?06:31??WebCrawler\bin\WebCrawler.cfg

?????文件????????886??2015-12-01?01:22??WebCrawler\bin\WebCrawler.scr

?????文件?????472251??2011-11-07?15:31??WebCrawler\docs\cpp_ref.chm

?????文件??????59508??2016-12-24?22:51??WebCrawler\docs\cpp_ref.chw

?????文件?????124881??2011-11-08?01:56??WebCrawler\docs\cpp_ref_ch.chm

?????文件?????467595??2016-10-29?22:23??WebCrawler\makefile.pdf

?????文件???????2908??2016-10-28?01:02??WebCrawler\plugins\DomainLimit.cpp

?????文件????????877??2016-10-27?10:51??WebCrawler\plugins\DomainLimit.h

?????文件????????246??2016-10-27?10:51??WebCrawler\plugins\DomainLimit.mak

?????文件??????55864??2016-10-30?13:45??WebCrawler\plugins\DomainLimit.o

?????文件??????43211??2016-10-30?13:45??WebCrawler\plugins\DomainLimit.so

?????文件???????2511??2016-10-28?01:15??WebCrawler\plugins\HeaderFilter.cpp

?????文件????????822??2016-10-27?10:51??WebCrawler\plugins\HeaderFilter.h

?????文件????????248??2016-10-27?10:51??WebCrawler\plugins\HeaderFilter.mak

?????文件??????16832??2016-10-30?13:45??WebCrawler\plugins\HeaderFilter.o

?????文件??????19791??2016-10-30?13:45??WebCrawler\plugins\HeaderFilter.so

?????文件???????1531??2016-10-28?01:21??WebCrawler\plugins\MaxDepth.cpp

?????文件????????708??2016-10-27?10:51??WebCrawler\plugins\MaxDepth.h

?????文件????????738??2016-10-27?10:51??WebCrawler\plugins\MaxDepth.mak

?????文件???????9056??2016-10-30?13:45??WebCrawler\plugins\MaxDepth.o

?????文件?????198653??2016-10-30?13:45??WebCrawler\plugins\MaxDepth.so

?????文件????????305??2016-10-27?10:53??WebCrawler\plugins\mkall

?????文件???????2443??2016-10-28?01:41??WebCrawler\plugins\SaveHTMLToFile.cpp

?????文件????????807??2016-10-27?10:51??WebCrawler\plugins\SaveHTMLToFile.h

?????文件????????252??2016-10-27?10:51??WebCrawler\plugins\SaveHTMLToFile.mak

?????文件??????12096??2016-10-30?13:45??WebCrawler\plugins\SaveHTMLToFile.o

?????文件??????19199??2016-10-30?13:45??WebCrawler\plugins\SaveHTMLToFile.so

?????文件???????5083??2016-10-29?12:05??WebCrawler\plugins\SaveImageToFile.cpp

?????文件????????768??2016-10-27?10:51??WebCrawler\plugins\SaveImageToFile.h

............此處省略66個文件信息