goのスクレイピングフレームワークColly - Qiita

goのスクレイピングフレームワークColly - Qiita

package main import ( "fmt" "github.com/gocolly/colly" ) func main() { c := colly.NewCollector() ...概要を表示 package main import ( "fmt" "github.com/gocolly/colly" ) func main() { c := colly.NewCollector() // リクエスト許可するドメインの設定 c.AllowedDomains = []string{"jp.leagueoflegends.com", "support.riotgames.com"} // HTMLもらった時に実行するコールバック c.OnHTML("a[href]", func(element *colly.HTMLElement) { link := element.Attr("href") fmt.Printf("見つけたリンク: %q -> %s\n", element.Text, link) // 見つけたリンクにリクエスト c.Visit(element.Request.A

• scraping