Huginn คืออะไร และวิธีติดตั้งบน Cloud Server

ทดสอบบน Ubuntu Server 24.04 LTS ที่ติดตั้ง Docker แล้ว

1. 1

   รัน Huginn

   คัดลอก

   docker run -d --name huginn \
     -p 127.0.0.1:3000:3000 \
     -v /srv/huginn:/var/lib/mysql \
     -e POSTFIX_SMTP_SERVER=smtp.example.com \
     -e [email protected] \
     --restart unless-stopped \
     huginn/huginn

2. 2

   ตั้ง Nginx และ HTTPS

   คัดลอก

   sudo certbot --nginx -d agents.example.com

3. 3

   เข้าสู่ระบบและเปลี่ยนรหัสผ่าน

   เข้าด้วยบัญชีเริ่มต้นแล้วเปลี่ยนรหัสผ่านทันที จากนั้นปิดการสมัครสมาชิกเอง

4. 4

   สร้างตัวแทนงานสำหรับดึงข้อมูล

   สร้างตัวแทนที่ดึงข้อมูลจากหน้าเว็บที่ต้องการ โดยระบุตำแหน่งของข้อมูลในหน้า และตั้งความถี่ในการตรวจ

   คัดลอก

   {
     "url": "https://example.com/products",
     "type": "html",
     "mode": "on_change",
     "extract": {
       "title": { "css": ".product-name", "value": "string(.)" },
       "price": { "css": ".price", "value": "string(.)" }
     }
   }

5. 5

   ต่อกับตัวแทนแจ้งเตือน

   สร้างตัวแทนที่รับผลจากตัวแรกแล้วส่งอีเมลหรือเรียก API เมื่อพบเงื่อนไขที่สนใจ

6. 6

   ตั้งความถี่ให้เหมาะสม

   อย่าตั้งให้ดึงข้อมูลถี่เกินจำเป็น เพราะเป็นภาระต่อเว็บปลายทางและอาจถูกบล็อก ควรตั้งตามความถี่ที่ข้อมูลเปลี่ยนจริง

ตรวจเงื่อนไขการใช้งานของเว็บที่ต้องการดึงข้อมูลก่อนเสมอ เพราะบางเว็บห้ามดึงข้อมูลอัตโนมัติ และการดึงถี่เกินไปอาจถือเป็นการรบกวนระบบ