go語言實現抓取高清圖片
更新時間：2015年03月20日 10:17:56 投稿：hebedich
本文給大家分享的是使用go語言實現的抓取高清美女圖片的代碼，原理非常簡單，這里就不多廢話了，主要是看到很多小伙伴使用python實現的，心血來潮就用go寫了下，推薦給大家。
看到有很多python 的，然后寫了個go 的，可以抓取高清圖片
getp.go
復制代碼 代碼如下:
package main
import (
"io/ioutil"
"log"
"net/http"
"os"
"regexp"
"strconv"
"strings"
"sync"
)
var urlist [4]string
var album chan string
var w sync.WaitGroup
var dir string
func main() {
dir = "tmp/"
err := os.Mkdir(dir, 0777)
if err != nil {
isexist := os.IsExist(err)
log.Println(isexist)
}
album = make(chan string, 200)
urlist = [4]string{" for _, v := range urlist {
for i := 1; i <= 20; i++ {
url := v + strconv.Itoa(i)
w.Add(1)
go GetAlbum(url)
w.Wait()
}
}
}
func GetAlbum(url string) {
data := GetUrl(url)
body := string(data)
part := regexp.MustCompile(`<a class="img" href="(.*)">`)
match := part.FindAllStringSubmatch(body, -1)
for _, v := range match {
album <- v[1]
w.Add(1)
go GetItem()
}
w.Done()
}
func GetItem() {
url := <-album
defer func() {
ret := recover()
if ret != nil {
log.Println(ret)
w.Done()
} else {
w.Done()
}
}()
data := GetUrl(url)
if len(data) > 10 {
body := string(data)
part := regexp.MustCompile(`bigimgsrc="(.*)"`)
match := part.FindAllStringSubmatch(body, -1)
for _, v := range match {
str := strings.Split(v[1], "/")
length := len(str)
source := GetUrl(v[1])
name := str[length-1]
file, err := os.Create(dir + name)
if err != nil {
panic(err)
}
size, err := file.Write(source)
defer file.Close()
if err != nil {
panic(err)
}
log.Println(size)
}
}
}
func GetUrl(url string) []byte {
ret, err := http.Get(url)
if err != nil {
log.Println(url)
status := map[string]string{}
status["status"] = "400"
status["url"] = url
panic(status)
}
body := ret.Body
data, _ := ioutil.ReadAll(body)
return data
}
以上所述就是本文的全部內容了，希望對大家熟悉go語言能夠有所幫助。
相關文章
這篇文章主要介紹了golang中strconv.ParseInt函數用法,實例分析了strconv.ParseInt函數將字符串轉換為數字的簡單使用方法,需要的朋友可以參考下2016-07-07
這篇文章主要為大家詳細介紹了Go語言實現猜數字小游戲，文中示例代碼介紹的非常詳細，具有一定的參考價值，感興趣的小伙伴們可以參考一下2020-10-10
本文主要帶大家學習了Golang里面的四大類型的變量，十分的詳細，有需要的小伙伴可以參考下2018-10-10
這篇文章主要為大家介紹了golang?beego框架路由ORM增刪改查完整案例，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進步早日升職加薪2022-04-04
這篇文章主要介紹了Go中使用單調時鐘獲得準確的時間間隔,在go語言中，沒有直接調用時鐘的函數，可以通過?time.Now()?獲得帶單調時鐘的?Time?結構體，并通過Since和Until獲得相對準確的時間間隔，需要的朋友可以參考下2022-06-06
這篇文章主要介紹了golang遍歷時修改被遍歷對象的示例代碼，本文給大家介紹的非常詳細，對大家的學習或工作具有一定的參考借鑒價值，需要的朋友可以參考下2021-01-01
最多人犯迷糊的就是?slice、map、chan?等類型，都會認為是?“引用傳遞”，從而認為?Go?語言的?xxx?就是引用傳遞。正因為它們還引用類型（指針、map、slice、chan等這些），這樣就可以修改原內容數據，這篇文章主要介紹了Golang?值傳遞還是引用傳遞,需要的朋友可以參考下2023-01-01
go中map數據結構不是線程安全的，即多個goroutine同時操作一個map，則會報錯，因此go1.9之后誕生了sync.Map，sync.Map思路來自java的ConcurrentHashMap2022-12-12
當我們需要在?main?函數中做一些初始化的工作，比如初始化日志，初始化配置文件，都需要統一初始化入口函數，所以本文就來編寫一個統一加載資源的入口吧2023-05-05
這篇文章主要介紹了go語言實現猜數字小游戲的方法,實例分析了Go語言流程判斷與處理的技巧,需要的朋友可以參考下2015-03-03