本文整理匯總了Golang中github.com/PuerkitoBio/gocrawl.URLContext.SourceURL方法的典型用法代碼示例。如果您正苦於以下問題:Golang URLContext.SourceURL方法的具體用法?Golang URLContext.SourceURL怎麽用?Golang URLContext.SourceURL使用的例子?那麽, 這裏精選的方法代碼示例或許可以為您提供幫助。您也可以進一步了解該方法所在類github.com/PuerkitoBio/gocrawl.URLContext
的用法示例。
在下文中一共展示了URLContext.SourceURL方法的1個代碼示例,這些例子默認根據受歡迎程度排序。您可以為喜歡或者感覺有用的代碼點讚,您的評價將有助於係統推薦出更棒的Golang代碼示例。
示例1: Filter
func (this *ExampleExtender) Filter(ctx *gocrawl.URLContext, isVisited bool) bool {
// fmt.Println("filter url: ", ctx.URL(), "state: ", ctx.State, "isVisited: ", isVisited, "ctx.IsRobotsURL(): ", ctx.IsRobotsURL())
if ctx.SourceURL() == nil {
ctx.State = DEPTH
return !isVisited
}
if ctx.State != nil {
i, ok := ctx.State.(int)
if ok && i > 0 {
return !isVisited
}
} else {
fmt.Println("ctx.state nil, ctx.sourceURL: ", ctx.SourceURL())
}
return false
}