文件名称:crawler
介绍说明－－下载内容均来自于网络，请自行研究使用
(系统自动生成,下载前可以参看下载内容)
下载文件列表
vidageek-crawler-c32c907
........................\.gitignore
........................\pom.xml
........................\src
........................\...\docs
........................\...\....\010-crawler.afc
........................\...\....\020-project.afc
........................\...\....\030-visitor.afc
........................\...\....\040-configuration.afc
........................\...\main
........................\...\....\java
........................\...\....\....\net
........................\...\....\....\...\vidageek
........................\...\....\....\...\........\crawler
........................\...\....\....\...\........\.......\component
........................\...\....\....\...\........\.......\.........\DefaultLinkNormalizer.java
........................\...\....\....\...\........\.......\.........\Downloader.java
........................\...\....\....\...\........\.......\.........\ExecutorCounter.java
........................\...\....\....\...\........\.......\.........\LinkNormalizer.java
........................\...\....\....\...\........\.......\.........\PageCrawlerExecutor.java
........................\...\....\....\...\........\.......\.........\UrlUtils.java
........................\...\....\....\...\........\.......\.........\WebDownloader.java
........................\...\....\....\...\........\.......\config
........................\...\....\....\...\........\.......\......\CrawlerConfiguration.java
........................\...\....\....\...\........\.......\......\CrawlerConfigurationBuilder.java
........................\...\....\....\...\........\.......\......\http
........................\...\....\....\...\........\.......\......\....\Cookie.java
........................\...\....\....\...\........\.......\ContentVisitor.java
........................\...\....\....\...\........\.......\exception
........................\...\....\....\...\........\.......\.........\CrawlerException.java
........................\...\....\....\...\........\.......\link
........................\...\....\....\...\........\.......\LinksFinder.java
........................\...\....\....\...\........\.......\link\DefaultLinkFinder.java
........................\...\....\....\...\........\.......\....\FrameLinkFinder.java
........................\...\....\....\...\........\.......\....\IframeLinkFinder.java
........................\...\....\....\...\........\.......\page
........................\...\....\....\...\........\.......\Page.java
........................\...\....\....\...\........\.......\PageCrawler.java
........................\...\....\....\...\........\.......\PageVisitor.java
........................\...\....\....\...\........\.......\page\DefaultPageFactory.java
........................\...\....\....\...\........\.......\....\ErrorPage.java
........................\...\....\....\...\........\.......\....\OkPage.java
........................\...\....\....\...\........\.......\....\PageFactory.java
........................\...\....\....\...\........\.......\....\RejectedMimeTypePage.java
........................\...\....\....\...\........\.......\queue
........................\...\....\....\...\........\.......\.....\DelayedBlockingQueue.java
........................\...\....\....\...\........\.......\Status.java
........................\...\....\....\...\........\.......\Url.java
........................\...\....\....\...\........\.......\visitor
........................\...\....\....\...\........\.......\.......\DoesNotFollowVisitedUrlVisitor.java
........................\...\....\....\...\........\.......\.......\DomainVisitor.java
........................\...\....\....\...\........\.......\.......\RejectAtDepthVisitor.java
........................\...\test
........................\...\....\java
........................\...\....\....\net
........................\...\....\....\...\vidageek
........................\...\....\....\...\........\crawler
........................\...\....\....\...\........\.......\component
........................\...\....\....\...\........\.......\.........\UrlUtilsTest.j
........................\.gitignore
........................\pom.xml
........................\src
........................\...\docs
........................\...\....\010-crawler.afc
........................\...\....\020-project.afc
........................\...\....\030-visitor.afc
........................\...\....\040-configuration.afc
........................\...\main
........................\...\....\java
........................\...\....\....\net
........................\...\....\....\...\vidageek
........................\...\....\....\...\........\crawler
........................\...\....\....\...\........\.......\component
........................\...\....\....\...\........\.......\.........\DefaultLinkNormalizer.java
........................\...\....\....\...\........\.......\.........\Downloader.java
........................\...\....\....\...\........\.......\.........\ExecutorCounter.java
........................\...\....\....\...\........\.......\.........\LinkNormalizer.java
........................\...\....\....\...\........\.......\.........\PageCrawlerExecutor.java
........................\...\....\....\...\........\.......\.........\UrlUtils.java
........................\...\....\....\...\........\.......\.........\WebDownloader.java
........................\...\....\....\...\........\.......\config
........................\...\....\....\...\........\.......\......\CrawlerConfiguration.java
........................\...\....\....\...\........\.......\......\CrawlerConfigurationBuilder.java
........................\...\....\....\...\........\.......\......\http
........................\...\....\....\...\........\.......\......\....\Cookie.java
........................\...\....\....\...\........\.......\ContentVisitor.java
........................\...\....\....\...\........\.......\exception
........................\...\....\....\...\........\.......\.........\CrawlerException.java
........................\...\....\....\...\........\.......\link
........................\...\....\....\...\........\.......\LinksFinder.java
........................\...\....\....\...\........\.......\link\DefaultLinkFinder.java
........................\...\....\....\...\........\.......\....\FrameLinkFinder.java
........................\...\....\....\...\........\.......\....\IframeLinkFinder.java
........................\...\....\....\...\........\.......\page
........................\...\....\....\...\........\.......\Page.java
........................\...\....\....\...\........\.......\PageCrawler.java
........................\...\....\....\...\........\.......\PageVisitor.java
........................\...\....\....\...\........\.......\page\DefaultPageFactory.java
........................\...\....\....\...\........\.......\....\ErrorPage.java
........................\...\....\....\...\........\.......\....\OkPage.java
........................\...\....\....\...\........\.......\....\PageFactory.java
........................\...\....\....\...\........\.......\....\RejectedMimeTypePage.java
........................\...\....\....\...\........\.......\queue
........................\...\....\....\...\........\.......\.....\DelayedBlockingQueue.java
........................\...\....\....\...\........\.......\Status.java
........................\...\....\....\...\........\.......\Url.java
........................\...\....\....\...\........\.......\visitor
........................\...\....\....\...\........\.......\.......\DoesNotFollowVisitedUrlVisitor.java
........................\...\....\....\...\........\.......\.......\DomainVisitor.java
........................\...\....\....\...\........\.......\.......\RejectAtDepthVisitor.java
........................\...\test
........................\...\....\java
........................\...\....\....\net
........................\...\....\....\...\vidageek
........................\...\....\....\...\........\crawler
........................\...\....\....\...\........\.......\component
........................\...\....\....\...\........\.......\.........\UrlUtilsTest.j