Monitoring SEO: Crawl Terjadwal, Peringatan, dan Deteksi Perubahan
Sebagian besar kerusakan SEO bukan ulah algoritma. Kerusakan itu datang dari sebuah rilis: noindex yang sampai ke production, aturan robots.txt yang memblokir satu folder terlalu banyak, template yang kehilangan canonical-nya. Monitoring SEO adalah kebiasaan memeriksa ulang secara terjadwal, sehingga perubahan seperti itu terlihat dalam sehari, bukan di laporan traffic kuartal berikutnya.
Apa Saja yang Dicakup Monitoring SEO
Monitoring bukan audit kedua. Audit bertanya apa yang salah; monitoring bertanya apa yang berubah sejak terakhir kali. Itu membuatnya lebih murah dijalankan dan lebih cepat dibaca. Empat sumber mencakup sebagian besarnya:
| Yang dipantau | Sumber | Seberapa sering |
|---|---|---|
| Status code, noindex, canonical | Crawl | Mingguan |
| robots.txt dan XML Sitemap | Crawl | Setiap crawl |
| Hanya halaman penting | Daftar URL | Harian |
| Klik dan posisi | Search Console | Harian |
| Core Web Vitals | Chrome UX Report | Mingguan |
| Error bot | Log server | Harian |
| Update algoritma | Halaman status Google | Saat diumumkan |
Google memublikasikan update peringkat dan insiden yang sudah dikonfirmasi di Search Status Dashboard. SEO ProCheck menjelaskan cara mencocokkannya dengan data Anda sendiri di cara memantau update algoritma.
Crawl terjadwal
Crawl pada hari dan jam tetap, dengan pengaturan yang sama setiap kali, adalah tulang punggung monitoring SEO. Pengaturan yang sama itu penting: crawl dengan batas URL atau kecepatan berbeda akan menunjukkan perbedaan yang sebenarnya tidak ada. Tentukan ritmenya dari seberapa sering situs berubah:
| Situs | Crawl penuh | Halaman penting |
|---|---|---|
| Situs company profile, di bawah 500 halaman | Bulanan | Mingguan |
| Situs blog atau berita | Mingguan | Harian |
| Toko dengan perubahan stok harian | Mingguan | Harian |
| Situs dengan rilis mingguan | Setelah setiap rilis | Harian |
| Selama migrasi | Harian | Harian |
Hitung biayanya sebelum menambah jadwal. Crawl mingguan 750 URL berarti sekitar 4 kali jalan dan 3.000 URL sebulan. Jalankan di jam sepi server, dan jaga kecepatan crawler tetap sopan: panduan Google tentang mengelola crawl budget mengingatkan bahwa server yang terbebani memperlambat setiap crawler, termasuk Googlebot. Panduan crawl budget membahasnya lebih dalam.
Deteksi Perubahan: Perubahan yang Penting
Setiap crawl sedikit berbeda dari yang sebelumnya. Keahliannya adalah tahu perbedaan mana yang layak membangunkan seseorang:
| Perubahan | Urgensi | Mengapa |
|---|---|---|
| Aturan robots.txt berubah | Sekarang | Bisa memblokir seluruh folder |
| noindex ditambahkan ke halaman yang dapat diindeks | Sekarang | Halaman keluar dari indeks |
| Halaman 200 turun tajam | Sekarang | Bagian hilang atau diblokir |
| Canonical berubah | Hari ini | Google mungkin memilih URL lain |
| URL 4xx atau 5xx baru | Hari ini | Link rusak, halaman hilang |
| Rantai redirect baru | Minggu ini | Lompatan tambahan di setiap kunjungan |
| Title atau H1 berubah | Minggu ini | Snippet dan relevansi berubah |
| Meta description berubah | Perlu dicek | Hanya snippet |
Simpan setiap crawl, bukan hanya yang terbaru. Saat klik turun di bulan Maret, crawl bulan Februari adalah satu-satunya bukti apa isi halaman sebelumnya.
Apa yang Ditangkap Monitoring di Situs Kami Sendiri
Kami menemukan ini di situs kami sendiri. Pemeriksaan SEO kami atas neova.app pada 20 November 2026 menemukan dua aturan robots.txt yang memblokir lebih banyak dari yang kami maksudkan, dan beberapa hal lain yang akan ditandai crawl mingguan di minggu pertama:
| Found | Halaman | Dampak | diperbaiki |
|---|---|---|---|
| robots.txt memblokir skrip email /cdn-cgi/ | 1.320 | Skrip yang tidak bisa diambil Google | ✓ |
| File favicon di balik Disallow: / | Setiap hasil pencarian | Yang tampil huruf, bukan logo kami | ✓ |
| http:// menjawab 200 | Setiap halaman | Dua salinan setiap halaman | ✓ |
| URL tak dikenal menjawab 503 | Setiap URL yang salah ketik | Terlihat seperti situs down | ✓ |
| Description lebih dari 160 karakter | 1.354 diperbaiki | Terpotong di hasil pencarian | ✓ |
Tidak satu pun terlihat di browser. Semuanya terlihat di crawl. Itulah alasan monitoring dalam satu tabel. Panduan penguji robots.txt menceritakan kisah lengkap dua aturan robots.txt itu.
Peringatan dengan Ambang yang Jelas
Peringatan yang berbunyi setiap hari akan dibisukan. Tetapkan ambang yang bermakna, dan sebutkan di peringatan apa yang melewati batas:
| Beri peringatan saat | Ambang | Sumber |
|---|---|---|
| Nilai Core Web Vitals berubah | Batas good dan poor dari Google | Chrome UX Report |
| Klik turun | 20% atau lebih, 7 hari terakhir | Search Console |
| Pencarian yang dilacak keluar dari 10 besar | Melewati posisi 10 | Search Console |
| Pencarian yang dilacak merosot | 3 posisi atau lebih | Search Console |
| Tanda baru setelah crawl | Tanda baru apa pun | Crawl |
| Jumlah halaman 200 berayun | Lebih dari 25% | Crawl |
| Error bot naik | Porsinya berlipat dua, di atas 1% | Log server |
Search Console menyimpan 16 bulan data performa. Ekspor atau arsipkan jika Anda ingin membandingkan peringatan tahun ini dengan minggu yang sama dua tahun lalu.
Snapshot Core Web Vitals
Core Web Vitals di Search berasal dari data lapangan: Chrome UX Report, rata-rata bergulir 28 hari dari pengguna Chrome sungguhan. Itu sebabnya snapshot harian bergerak lambat dan snapshot mingguan sudah cukup. Ambangnya, diukur pada persentil ke-75, dijelaskan di web.dev:
| Metrik | Good | Perlu peningkatan | Poor |
|---|---|---|---|
| LCP | 2,5 detik atau kurang | Hingga 4 detik | Lebih dari 4 detik |
| INP | 200 ms atau kurang | Hingga 500 ms | Lebih dari 500 ms |
| CLS | 0,1 atau kurang | Hingga 0,25 | Lebih dari 0,25 |
CrUX History API mengembalikan 25 periode mingguan secara default dan hingga 40, diperbarui setiap Senin, sehingga Anda bisa menggambar tren sejak hari pertama. Snapshot yang Anda simpan sendiri menjangkau lebih jauh ke belakang. Tool lab seperti Lighthouse membantu menemukan penyebabnya, tetapi angka lapangan itulah yang perlu dipantau. Halaman SEO ProCheck tentang data lapangan vs data lab menjelaskan perbedaannya, dan panduan pengecek Core Web Vitals membahas perbaikannya.
Ke Mana Peringatan Seharusnya Dikirim
Peringatan hanya berguna jika ada yang melihatnya di hari yang sama. Kirim setiap jenis ke tempat yang sudah dilihat oleh orang yang akan menindaklanjutinya:
| Channel | Paling cocok untuk |
|---|---|
| Notifikasi sistem | Crawl selesai, di komputer Anda |
| Bilah menu | Progres dan peringatan terbaru |
| Halaman di ponsel | Melihat sekilas saat jauh dari meja |
| Channel Slack | Tim, per klien |
| Channel Microsoft Teams | Tim, per klien |
| Link crawl bersama | Klien yang mengikuti satu crawl |
Untuk agensi, satu channel per klien mencegah peringatan saling tenggelam. Panduan audit SEO untuk agensi membahas sisa setup tersebut.
Monitoring SEO dengan Neova

Di aplikasi desktop Neova:
- Crawl terjadwal menjalankan Crawl situs penuh secara Harian, Mingguan, Setiap N minggu, atau Bulanan dengan pengaturan properti, dengan jendela tertutup. Neova menyebutkan biaya sebuah jadwal sebelum Anda menambahkannya, memberi peringatan 15 menit sebelum crawl berjalan, dan memungkinkan Anda Menunda atau Melewati satu kali jalan.
- Crawl Pantau hanya mengambil daftar halaman, tanpa penemuan URL, dan memunculkan peringatan halaman untuk perubahan status, target redirect, title, canonical, noindex, H1, dan ukuran.
- Perubahan Menyala Selama Crawl menampilkan nilai lama yang dicoret di samping nilai baru saat setiap URL diambil, dan Bandingkan crawl mencantumkan URL baru, yang dihapus, dan yang berubah, serta tanda yang baru dan yang sudah selesai.
- Aturan Peringatan memunculkan peringatan untuk perubahan nilai Core Web Vitals, klik 7 hari terakhir yang turun 20% atau lebih, pencarian yang dilacak masuk atau keluar dari 10 besar atau turun 3 posisi, dan tanda baru. Daftar Peringatan menyimpan 300 yang terbaru.
- Jadwal Snapshot Core Web Vitals membaca Chrome UX Report tanpa crawl, disarankan mingguan, dan menyimpan setiap snapshot. Dengan kunci Chrome UX Report Anda sendiri, tren dimulai dengan sekitar 40 minggu di hari pertama.
- Neova Go menjaga Neova tetap di menu bar Mac saat jendelanya ditutup, dan menampilkan crawl terbaru, Core Web Vitals, klik, dan jadwal berikutnya setiap properti di ponsel Anda; Mac memperbaruinya setiap 2 menit selama crawl berjalan. Peringatan juga dikirim ke Slack dan Microsoft Teams, per portofolio atau properti.

Pemeriksaan yang dibuat untuk monitoring:
- Aturan robots.txt berubah sejak crawl sebelumnya
- Jumlah URL yang dapat di-crawl berubah tajam sejak crawl sebelumnya
- Pangsa respons 3xx, 4xx, atau 5xx untuk bot pencarian meningkat
- HTML lebih dari 2 MB atau Core Web Vitals tidak mencapai rentang baik dan CLS lebih dari 0,1 di data lab atau data lapangan
- Waktu Respons Server Lambat di Data Lab atau Lapangan
- Favicon tidak ada, rusak, atau diblokir, pemeriksaan yang menangkap masalah logo kami
- Direktif noindex ada
Neova Go tersedia di paket Desktop ke atas. Halaman bantuan Jadwal dan Pemantauan memandu setup-nya langkah demi langkah.
Pertanyaan
Apa itu monitoring SEO?
Memeriksa ulang situs secara terjadwal dan membandingkannya dengan pemeriksaan terakhir: status code, direktif indexing, robots.txt, klik, posisi, dan Core Web Vitals, dengan peringatan saat sesuatu melewati batas yang ditetapkan.
Seberapa sering saya harus meng-crawl situs untuk monitoring SEO?
Mingguan cocok untuk kebanyakan situs. Crawl setelah setiap rilis jika situs sering merilis, harian selama migrasi, dan bulanan untuk situs kecil yang jarang berubah. Pantau halaman terpenting setiap hari.
Apa bedanya audit SEO dan monitoring SEO?
Audit adalah tinjauan penuh yang bertanya apa yang salah. Monitoring mengulang pemeriksaan yang lebih ringan secara terjadwal dan bertanya apa yang berubah sejak terakhir kali, sehingga masalah baru tertangkap dalam beberapa hari.
Seberapa sering saya harus mengecek Core Web Vitals?
Mingguan. Chrome UX Report adalah rata-rata bergulir 28 hari, jadi pembacaan harian nyaris tidak bergerak. Lihat persentil ke-75 terhadap batas Google: LCP 2,5 detik, INP 200 ms, dan CLS 0,1.
Apa yang seharusnya memicu peringatan SEO?
Perubahan yang bisa cepat menggerus traffic: aturan robots.txt yang berubah, noindex di halaman yang dapat diindeks, penurunan tajam halaman 200, URL 4xx atau 5xx baru, klik turun 20% atau lebih dalam seminggu, dan nilai Core Web Vitals yang memburuk.