# Izinkan Googlebot
User-agent: Googlebot
Disallow: 

# Izinkan Googlebot Image
User-agent: googlebot-image
Disallow: 

# Izinkan Googlebot Mobile
User-agent: googlebot-mobile
Disallow: 

# Blokir Lumendatabase
User-agent: Lumendatabase
Disallow: /


# Aturan umum untuk semua bot
User-agent: *
Disallow: /cgi-bin/

# Sitemap utama
Sitemap: https://divlearn.undipa.ac.id/sitemap.xml