การใช้งาน web scraping ในภาษา Golang แบบง่ายๆ พร้อมตัวอย่าง

 

# การใช้งาน Web Scraping ด้วยภาษา Golang ง่ายนิดเดียว!

การรวบรวมข้อมูลจากเว็บไซต์ต่างๆ หรือ Web Scraping เป็นทักษะที่สำคัญสำหรับคนทำงานด้านไอทีในยุคนี้ ไม่ว่าจะเป็นการวิเคราะห์ข้อมูล, ปรับปรุงผลิตภัณฑ์, หรือสร้างข้อมูลฐานเพื่อการเรียนรู้ของเครื่อง (Machine Learning) และในบทความนี้ ผมจะพาทุกคนไปพบกับเทคนิคการใช้ภาษา Golang ที่แสนเรียบง่ายในการ Scraping ข้อมูลจากเว็บไซต์ พร้อมด้วยตัวอย่าง Code ที่คุณสามารถประยุกต์ใช้ได้จริง!

 

ทำไมถึงต้องใช้ Golang ในการ Web Scraping?

Golang หรือที่รู้จักกันในชื่อ Go เป็นภาษาโปรแกรมที่มีประสิทธิภาพสูง รองรับการทำงานแบบ Concurrent ได้อย่างดีเยี่ยม ซึ่งเหมาะมากเมื่อพูดถึงงานที่ต้องจัดการกับข้อมูลจำนวนมากและการประมวลผลพร้อมกันหลายๆ อย่าง และหากคุณเป็นส่วนหนึ่งขององค์กรที่กำลังมองหาวิธีการง่ายๆ ในการเก็บข้อมูลจากอินเทอร์เน็ต Go อาจจะเป็นคำตอบสุดเจ๋งที่คุณตามหา!

 

ตัวอย่าง Code สำหรับ Web Scraping ด้วย Golang

ตัวอย่างที่ 1: รับข้อมูล HTML

ความเริ่มต้นที่ดีที่สุดคือการรู้วิธีรับ HTML จากเว็บไซต์ ตัวอย่างด้านล่างจะแสดงวิธีการทำงาน:

 package main

import (
	"fmt"
	"io/ioutil"
	"net/http"
)

func main() {
	resp, err := http.Get("http://example.com")
	if err != nil {
		panic(err)
	}
	defer resp.Body.Close()

	html, err := ioutil.ReadAll(resp.Body)
	if err != nil {
		panic(err)
	}

	fmt.Println(string(html))
}

ในตัวอย่างนี้ เราใช้ package ที่ชื่อ `net/http` ในการร้องขอข้อมูลจากเว็บไซต์ และ `io/ioutil` ในการอ่านข้างใน responseBody แล้วแปลงเป็น string เพื่อพิมพ์ออกมาดู

ตัวอย่างที่ 2: ค้นหาข้อมูลภายใน HTML

หลังจากรับ HTML มาแล้ว ขั้นตอนต่อไปคือการค้นหาข้อมูลที่ต้องการ ตัวอย่างด้านล่างใช้ package `github.com/PuerkitoBio/goquery` ซึ่งทำงานคล้ายกับ jQuery ใน JavaScript:

 package main

import (
	"fmt"
	"log"
	"net/http"

	"github.com/PuerkitoBio/goquery"
)

func main() {
	// ร้องขอข้อมูลเหมือนตัวอย่างที่ 1
	resp, err := http.Get("http://example.com")
	if err != nil {
		log.Fatal(err)
	}
	defer resp.Body.Close()

	// สร้าง goquery document จาก HTML
	doc, err := goquery.NewDocumentFromReader(resp.Body)
	if err != nil {
		log.Fatal(err)
	}

	// ค้นหา elements ที่มี tag <title>
	title := doc.Find("title").Text()

	fmt.Println("Title of the webpage is:", title)
}

ในตัวอย่างนี้ เราใช้ `goquery` เพื่อค้นหาและสกัดข้อมูลที่เราต้องการออกมาจาก HTML

ตัวอย่างที่ 3: การเก็บข้อมูลมาเป็นอาเรย์หรือแผนที่

เมื่อเราค้นหาข้อมูลได้แล้ว อาจจะต้องการเก็บข้อมูลไว้เป็นแบบข้อมูลอาเรย์หรือแผนที่ (Array or Map) เพื่อการใช้งานที่สะดวกขึ้น

 package main

import (
	"fmt"
	"log"
	"net/http"

	"github.com/PuerkitoBio/goquery"
)

func main() {
	// ... (ข้อความจากตัวอย่างที่ 2) ...

	// สร้างอาเรย์เพื่อเก็บข้อมูลหัวข้อข่าว
	var headlines []string
	doc.Find(".news-headline").Each(func(i int, s *goquery.Selection) {
		headline := s.Text()
		headlines = append(headlines, headline)
	})

	fmt.Println("Headlines found:", headlines)
}

ในโค้ดนี้ เราใช้เมธอด `.Each()` เพื่อวนซ้ำผ่านแต่ละ `.news-headline` แล้วเก็บข้อความจากแต่ละหัวข้อเข้าไปในอาเรย์ `headlines`

 

Usecase ของ Web Scraping ในโลกจริง

กลยุทธ์ Web Scraping สามารถนำไปใช้ได้ในหลายโอกาส เช่น:

- การวิเคราะห์ราคาตลาด: สามารถรวบรวมข้อมูลราคาจากเว็บไซต์ต่างๆ เพื่อเปรียบเทียบและวิเคราะห์ราคาตลาด - การเฝ้าดูเว็บไซต์คู่แข่ง: รวบรวมข้อมูลเช่น สินค้าใหม่, โปรโมชั่น ฯลฯ จากเว็บไซต์ของคู่แข่ง - การสร้างฐานข้อมูลสำหรับการวิจัย: รวบรวมข้อมูลจำนวนมากสำหรับโปรเจกต์วิจัยหรือการเรียนรู้ของเครื่อง

 

สรุป

Web Scraping ด้วย Golang เป็นวิธีที่ทรงพลังและคล่องตัวสำหรับการรวบรวมข้อมูลในยุคดิจิทัล และถ้าคุณสนใจที่จะเรียนรู้และประยุกต์ใช้มันในงานของคุณ อย่าลืมว่าที่ Expert-Programming-Tutor (EPT) เรามีหลักสูตรและการสอนที่จะช่วยให้คุณก้าวไปสู่การเป็นแมสเตอร์ของ Web Scraping!

ว่าแล้ว อย่ารอช้า มาเริ่มเรียนรู้การเขียนโค้ด และอ่านข้อมูลจากโลกออนไลน์ด้วย Golang กันที่ EPT สถานที่ที่จะทำให้คุณเป็นผู้เชี่ยวชาญการเขียนโปรแกรมและ Web Scraping ในไม่ช้า!

 

 

หมายเหตุ: ข้อมูลในบทความนี้อาจจะผิด โปรดตรวจสอบความถูกต้องของบทความอีกครั้งหนึ่ง บทความนี้ไม่สามารถนำไปใช้อ้างอิงใด ๆ ได้ ทาง EPT ไม่ขอยืนยันความถูกต้อง และไม่ขอรับผิดชอบต่อความเสียหายใดที่เกิดจากบทความชุดนี้ทั้งทางทรัพย์สิน ร่างกาย หรือจิตใจของผู้อ่านและผู้เกี่ยวข้อง