Grafana Loki คืออะไร และวิธีติดตั้งบน Cloud Server

ทดสอบบน Ubuntu Server 24.04 LTS ที่ติดตั้ง Docker แล้ว

1. 1

   สร้างไฟล์ตั้งค่าของ Loki

   คัดลอก

   auth_enabled: false
   
   server:
     http_listen_port: 3100
   
   common:
     ring:
       kvstore:
         store: inmemory
     replication_factor: 1
     path_prefix: /loki
   
   schema_config:
     configs:
       - from: 2024-01-01
         store: tsdb
         object_store: filesystem
         schema: v13
         index:
           prefix: index_
           period: 24h
   
   limits_config:
     retention_period: 720h

2. 2

   สร้างไฟล์ docker-compose.yml

   คัดลอก

   services:
     loki:
       image: grafana/loki:3.0.0
       command: -config.file=/etc/loki/config.yml
       volumes:
         - ./config.yml:/etc/loki/config.yml
         - ./loki-data:/loki
       ports:
         - "10.10.0.85:3100:3100"
       restart: unless-stopped
   
     grafana:
       image: grafana/grafana:latest
       ports:
         - "127.0.0.1:3000:3000"
       volumes:
         - ./grafana-data:/var/lib/grafana
       restart: unless-stopped

3. 3

   สั่งรัน

   คัดลอก

   docker compose up -d

4. 4

   ติดตั้งตัวส่ง Log บนเครื่องปลายทาง

   ติดตั้งตัวส่งบนทุกเครื่องที่ต้องการเก็บ Log แล้วตั้งให้ส่งมาที่เซิร์ฟเวอร์นี้ พร้อมกำหนดป้ายกำกับให้ชัดเจน เพราะป้ายกำกับคือสิ่งที่ใช้ค้นหาภายหลัง

   คัดลอก

   clients:
     - url: http://10.10.0.85:3100/loki/api/v1/push
   
   scrape_configs:
     - job_name: system
       static_configs:
         - targets: [localhost]
           labels:
             job: varlogs
             host: web01
             __path__: /var/log/*.log

5. 5

   เพิ่ม Loki เป็นแหล่งข้อมูลใน Grafana

   ตั้งที่อยู่เป็นพอร์ตของ Loki แล้วทดลองค้นหาด้วยป้ายกำกับ เพื่อยืนยันว่าข้อมูลเข้ามาแล้ว

6. 6

   ตั้งนโยบายเก็บข้อมูลและย้ายไป Object Storage

   กำหนดระยะเวลาเก็บให้ตรงกับนโยบายขององค์กร และตั้งให้ข้อมูลเก่าไปอยู่บน Object Storage เพื่อลดค่าใช้จ่ายดิสก์

ออกแบบป้ายกำกับให้ดีตั้งแต่ต้นและอย่าใช้ค่าที่เปลี่ยนบ่อยอย่างรหัสคำขอเป็นป้ายกำกับ เพราะจะทำให้จำนวนชุดข้อมูลระเบิดและระบบช้าลงมาก