robots.txt tokoRobots & Sitemap

Aturan robots.txt untuk toko online: halaman filter, pencarian, dan keranjang

Biasanya selesai dalam 15 menitTermasuk revisiPemeriksaan kualitas
Paket
Perlindungan pembayaranSelengkapnya
  • Revisi dalam batas paket tidak dikenai biaya.
  • Jika Anda tidak merespons dalam 3 hari setelah penyerahan hasil, hasil kerja diterima secara otomatis.

Uang ditahan saat Anda membayar dan diteruskan hanya setelah Anda menerima hasil kerja.

Aturan robots.txt untuk toko online: halaman filter, pencarian, dan keranjang

Contoh hasil

Contoh untuk paket Standar

robots.txt dan sitemap: toko pakaian online

Klien: toko pakaian online dengan filter dan pencarian situs. Tugas: mencegah mesin pencari merayapi ribuan halaman filter dan keranjang, lalu mengarahkannya ke sitemap.

User-agent: *
Disallow: /cart
Disallow: /checkout
Disallow: /account
Disallow: /search
Disallow: /*?sort=
Disallow: /*?color=
Disallow: /*&size=
Allow: /collections/

Sitemap: https://example.com/sitemap.xml

Rencana sitemap:

FileIsiHalaman
sitemap.xmlindeks file di bawah
sitemap-collections.xmlkategori64
sitemap-products-1.xmlproduk1–5.000
sitemap-products-2.xmlproduk5.001–8.300
sitemap-pages.xmltentang kami, pengiriman, retur, blog41

Alasannya: halaman filter mengulang isi kategori dan membuang kuota perayapan. Produk yang habis lebih dari 90 hari dikeluarkan dari sitemap, tetapi halamannya tetap ada.

Klien dan semua datanya fiktif.

Tentang layanan ini

Toko online menghasilkan URL yang bisa di-crawl tanpa batas: kombinasi filter, urutan sortir, hasil pencarian internal, halaman keranjang, checkout, akun, dan perbandingan, dan setiap platform menamainya secara berbeda. Memblokir terlalu sedikit membuang anggaran crawl untuk halaman sampah, memblokir terlalu banyak menyembunyikan produk atau CSS yang menampilkannya. Kami membaca robots.txt Anda saat ini dan pola URL di toko Anda, lalu menulis file baru dengan aturan berkomentar untuk setiap pola, ditambah catatan tentang apa yang seharusnya ditangani dengan noindex atau canonical.

Yang termasuk

  • Yang Anda dapatkanFile robots.txt siap pakai untuk toko Anda dengan aturan berkomentar untuk setiap pola URL, daftar contoh URL yang diblokir dan diizinkan oleh aturan tersebut, serta catatan tentang pola yang memerlukan noindex atau canonical alih-alih pemblokiran.
  • Pola URLFilter, sortir, pencarian, keranjang, dan akun
  • File berkomentarSetiap aturan dijelaskan di dalam file
  • Tetap terbukaProduk, CSS, JS, dan halaman filter pilihan
  • Blokir atau noindexKapan pemblokiran bukan cara yang tepat
  • Contoh ujiURL untuk dicek di robots.txt tester

Cara kerja

  1. 1
    PolaAnda mengirim toko dan contoh URL
  2. 2
    AturanKami menulis file dan komentarnya
  3. 3
    PengecekanAnda menerima file dan URL uji

Yang kami butuhkan dari Anda

Tautan ke toko, platform Anda, contoh URL filter, sortir, dan pencarian dari toko Anda, serta halaman filter yang ingin tetap dapat diindeks, seperti halaman merek atau warna.

Kami akan menanyakan:

  • Toko berjalan di platform apa?
  • Halaman filter mana yang harus tetap ada di pencarian?
  • Tempelkan beberapa URL filter, sortir, dan pencarian dari toko Anda

Bandingkan paket

PaketDasarRp 170.000StandarRp 340.000PremiumRp 663.000
Yang termasukAturan intiAturan toko lengkapAturan multi-toko
Tenggat1 hari2 hari4 hari
Revisi122
Pola URL yang dicakuphingga 8hingga 20hingga 40
robots.txt berkomentarYaYaYa
Daftar URL ujiYaYaYa
Pesan DasarPesan StandarPesan Premium

Perlindungan pembayaran

Anda membayar saat memesan, tetapi uangnya diteruskan hanya untuk hasil kerja yang diterima.

  • Harga pastiHarga paket tidak berubah setelah Anda membayar.
  • Uang ditahanSaat Anda membayar, jumlahnya hanya ditahan. Dana diteruskan ke Dleex setelah Anda menerima hasil kerja.
  • Diperiksa sebelum penyerahanSetiap hasil melewati pemeriksaan kualitas sebelum sampai kepada Anda, dan Anda dapat melihatnya di halaman pesanan sebelum menerimanya.
  • Revisi gratisMinta revisi sesuai brief Anda sebanyak yang diizinkan paket.
  • Diterima setelah 3 hariJika dalam 3 hari setelah penyerahan hasil Anda tidak menerima hasil kerja maupun meminta revisi, hasil kerja diterima secara otomatis. Jika Anda menulis di chat pesanan setelah penyerahan hasil, pesanan akan menunggu; setelah kami menjawab, kami dapat memulai ulang hitungan 3 hari dan akan memberitahukannya di chat.
  • Dikerjakan ulang atau pengembalian dana penuhJika hasilnya tidak sesuai brief Anda dan revisi tidak memperbaikinya, atau pengerjaan memakan waktu lebih dari dua kali tenggatnya, tulis di chat pesanan: kami akan mengerjakan ulang atau mengembalikan pembayaran secara penuh.
Cara kerjanya →

Tanya jawab

Bisakah saya mengedit robots.txt di Shopify?

Ya, melalui template robots.txt.liquid. Kami menulis aturannya dalam bentuk itu jika toko Anda menggunakan Shopify.

Apakah memblokir halaman akan menghapusnya dari Google?

Tidak. URL yang diblokir masih bisa muncul di hasil pencarian jika halaman lain menautkannya. Halaman yang harus hilang memerlukan noindex dan harus tetap bisa di-crawl sampai keluar dari indeks.

Apakah Anda akan mengunggah filenya?

Tidak, kami tidak login ke toko atau server Anda. Anda atau developer Anda yang mengganti file dan mengujinya.

Tidak menemukan jawabannya?

Paket