package main
import (
"bufio"
"fmt"
"golang.org/x/net/html/charset"
"golang.org/x/text/transform"
"io"
"io/ioutil"
"net/http"
)
func DetermineEncoding(r io.Reader) []byte {
OldReader := bufio.NewReader(r)
bytes, err := OldReader.Peek(1024)
if err != nil {
panic(err)
}
e, _, _ := charset.DetermineEncoding(bytes, "")
reader := transform.NewReader(OldReader, e.NewDecoder())
all, err := ioutil.ReadAll(reader)
if err != nil {
panic(err)
}
return all
}
func main() {
resp, err := http.Get(`http://www.chinanews.com`)
if err != nil {
panic(err)
}
defer resp.Body.Close()
fmt.Printf(`%s`, DetermineEncoding(resp.Body))
}
golang學習筆記之-采集gbk亂碼的問題?
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。