Data Cuaca yang Dikumpulkan Otomatis dengan Github Action

4 minute read

Pada 2021 lalu, saya sempat menuliskan bagaimana cara mendapatkan data cuaca real time dari situs openweathermap. Beberapa bulan lalu, saya juga menuliskan bagaimana cara membuat Github bisa melakukan web scrape secara otomatis.

Nah, kali ini saya akan mengawinkan kedua teknik tersebut agar Github bisa web scrape data cuaca real time per dua jam sekali.

Workflow github action-nya saya buat seperti ini:

on:
  #push:
    #branches: main
  schedule:
    - cron: "0 */2 * * *"  # run every 3 hrs
    
jobs:
  import-data:
    runs-on: ubuntu-latest
    steps:
      - name: Set up R
        uses: r-lib/actions/setup-r@v2

      - name: Install packages
        uses: r-lib/actions/setup-r-dependencies@v2
        with:
          packages: |
            any::dplyr 
            any::jsonlite

      - name: Check out repository
        uses: actions/checkout@v3

      - name: Import data
        run: Rscript -e 'source("real feel.R")'

      - name: Commit results
        run: |
          git config --local user.email "xxx@gmail.com"
          git config --local user.name "xx"
          git add .
          git commit -m 'Data updated' 
          git push 

Sementara skrip algoritma web scrape-nya saya simpan sebagai real feel.R (silakan lihat postingan saya sebelumnya).

Apa saja data yang saya dapatkan? Berikut adalah variables-nya:

 [1] "kota"           "kondisi"        "detail_kondisi" "suhu"          
 [5] "suhu_min"       "suhu_max"       "feel_like"      "humidity"      
 [9] "lon"            "lat"            "waktu"          "pressure"      
[13] "wind_spd"      

Kenapa mengambil data cuaca dari situs Open Weather Map? Alasannya:

BMKG:
- API dari situs BMKG tidak reliable dan sulit digunakan.
- Tidak ada data real feel di situs BMKG.
Open Weather Map:
- API dari Open Weather Map cukup reliable untuk diambil datanya per dua jam.
- Ada data real feel.
- Cakupan kota lumayan.
- Proses scrape bisa dilakukan otomatis tanpa supervisi sama sekali.

DATA YANG DIAMBIL

Pada bagian ini, saya akan tunjukkan beberapa data cuaca di kota Semarang, Jakarta, dan Surabaya. Namun saya akan menggunakan data cuaca pada waktu jam kerja saja, yakni pukul 08.00 - 18.00.