Google & Bing tidak merekomendasikan halaman penurunan harga terpisah untuk LLM

Perwakilan dari tim Pencarian Google dan Pencarian Bing merekomendasikan untuk tidak membuat halaman penurunan harga (.md) terpisah untuk tujuan LLM. Tujuannya adalah untuk menyajikan satu konten ke LLM dan konten lainnya kepada pengguna Anda, yang secara teknis dapat dianggap sebagai bentuk penyelubungan dan melanggar kebijakan Google.

Pertanyaannya. Lily Ray bertanya di Bluesky:

• “Tidak yakin apakah Anda dapat menjawabnya, tetapi Anda mulai mendengar banyak tentang membuat halaman penurunan harga/JSON terpisah untuk LLM dan menyajikan URL tersebut ke bot.”

tanggapan Google. John Mueller dari Google menjawab dengan mengatakan:

• “Saya tidak mengetahui apa pun mengenai hal itu. Dalam POV saya, LLM telah berlatih – membaca & mengurai – halaman web normal sejak awal, tampaknya mereka tidak memiliki masalah dalam berurusan dengan HTML. Mengapa mereka ingin melihat halaman yang tidak dilihat pengguna? Dan, jika mereka memeriksa kesetaraan, mengapa tidak menggunakan HTML?”

Baru-baru ini, John Mueller juga menyebut gagasan itu bodoh, dengan mengatakan:

• “Mengonversi halaman menjadi penurunan harga adalah ide yang sangat bodoh. Tahukah Anda bahwa LLM bisa membaca gambar? MENGAPA TIDAK MENGUBAH SELURUH SITUS ANDA MENJADI GAMBAR?” Tentu saja, mengonversi seluruh situs Anda menjadi file MD, yang setidaknya agak ekstrem.

Saya mengumpulkan banyak komentar John Mueller mengenai topik ini, di sini.

Tanggapan Bing. Fabrice Canel dari Microsoft Bing menjawab dengan mengatakan:

• “Lily: benar-benar ingin menggandakan beban perayapan? Kami akan tetap melakukan perayapan untuk memeriksa kesamaan. Versi non-pengguna (AJAX yang dapat dirayapi dan sejenisnya) sering diabaikan, rusak. Mata manusia membantu memperbaiki orang dan konten yang dilihat bot. Kami menyukai Skema di halaman. AI membuat kami hebat dalam memahami halaman web. Lebih sedikit lebih baik dalam SEO!”

Mengapa kami peduli. Beberapa dari kita suka mencari jalan pintas untuk bekerja dengan baik di mesin pencari dan sekarang mesin pencari AI dan LLM baru. Umumnya, pintasan, jika berfungsi, hanya berfungsi dalam waktu terbatas. Ditambah lagi, jalan pintas ini dapat menimbulkan efek negatif yang tidak terduga.

Seperti yang ditulis Lily Ray di LinkedIn:

• “Saya selalu mempunyai kekhawatiran mengenai pengelolaan konten duplikat dan menyajikan konten yang berbeda kepada crawler dibandingkan manusia, yang menurut saya mungkin berguna untuk penelusuran AI, namun secara langsung melanggar kebijakan lama mesin telusur mengenai hal ini (pada dasarnya penyelubungan).”