Cara Memahami Apa Yang Dilakukan Mesin Pencari

Pada bentuk yang paling sederhana, mesin pencari adalah mekanisme untuk memberikan jawaban (hasil pencarian) untuk sebuah pertanyaan (permintaan pencarian).

Namun, sebelum mesin pencari dapat memberikan hasil pencarian untuk permintaan pencarian Anda, terlebih dahulu harus membuat daftar master dari setiap jawaban yang mungkin (untuk pertanyaan yang belum diketahuinya). Proses pembuatan daftar induk jawaban ini disebut merangkak.

Merangkak situs web

Anda mungkin pernah mendengar tentang bagaimana mesin pencari dapat “merangkak” situs Anda. Perayap (juga disebut spider atau bot) adalah skrip otomatis yang mengunjungi halaman di situs web Anda, memindai semuanya, termasuk konten, gambar, video, atau media lain, dan membuat cache dari situs itu. Perayap mesin pencari modern juga dapat melihat situs Anda seperti Anda, sebagai pengguna internet, akan melihatnya di peramban web Anda (dengan beberapa pengecualian kecil). Selain itu, biasanya akan mengikuti tautan di seluruh situs Anda untuk mengunjungi halaman lain di situs Anda dan bahkan situs web lain yang telah Anda tautkan. Bahkan, mungkin perayap menemukan situs web Anda dengan tautan dari situs web lain.

Meskipun mungkin untuk memblokir mesin pencari dari merayapi situs Anda, itu biasanya tidak disarankan, kecuali dalam kasus di mana Anda mungkin masih bekerja di situs web baru Anda, atau ingin halaman tertentu tidak lagi diindeks dan dapat dicari. Ini dapat memiliki efek negatif karena perayap dapat menyerah dan berhenti mencoba merayapi situs Anda, atau mungkin mencoba sangat jarang sehingga konten dalam indeks tidak terkini.

Indeks pencarian

Setelah perayap mengunjungi situs dan mengunduh semua informasi yang relevan yang bisa, perayap menyimpan data situs itu ke dalam indeks pencarian. Indeks adalah basis data khusus (atau, lebih akurat, banyak basis data terkait untuk berbagai bagian dan tipe data dari situs Anda). Basis data ini berisi informasi dari setiap situs yang dapat diakses oleh perayap mesin pencari.

Menurut klaim terbaru, Google sendiri mengindeks sekitar "ratusan miliar halaman web" dengan ukuran indeks lebih dari 100 miliar gigabyte, tetapi memiliki pengetahuan sekitar 130 triliun situs web.

Algoritma pencarian, peringkat, dan Halaman Hasil Mesin Pencari (SERP)

Saat Anda mengetik sesuatu ke mesin pencari, dalam beberapa detik, Anda akan diteruskan ke halaman yang disebut halaman hasil mesin pencari (SERP, singkatnya). Dalam beberapa detik antara mengklik "Cari", dan ketika Anda melihat hasilnya, adalah tempat keajaiban yang sebenarnya terjadi.

Mesin pencari akan mengambil apa yang Anda ketikkan, disebut kueri, dan membedahnya menjadi sejumlah permutasi. Misalnya, permintaan pencarian "tacos vegetarian terbaik" berisi sejumlah frasa potensial yang dapat digunakan untuk memberikan hasil pencarian. Untuk maksud terbaiknya, mesin pencari akan menentukan niat Anda dengan permintaan Anda, memberi peringkat satu set halaman (dari ratusan miliar yang diindeks), dan memberikan daftar hasil teratas.

Berdasarkan permintaan Anda, dan niat yang ditentukan dari permintaan pencarian Anda (bersama dengan lebih dari 200 faktor lain untuk halaman situs itu sendiri), hasil yang dikirim ke browser Anda diberi peringkat. Pemeringkatan adalah proses di mana halaman situs web tertentu yang ditampilkan dalam hasil pencarian diurutkan berdasarkan “kepentingan” algoritma yang dirasakan dari hasil tersebut terhadap permintaan.

Dalam pencarian "taco vegetarian terbaik" kami, kami akan berpura-pura sejenak bahwa Anda telah melakukan pencarian ini dari perangkat seluler Anda saat berada di jaringan penyedia layanan seluler Anda. Mesin pencari mungkin berpikir bahwa karena Anda mencari dari perangkat seluler, dan bukan pada wifi, Anda mungkin mencari restoran. Ini menentukan niat Anda agar hasil pencarian menunjukkan restoran terdekat. Permintaan Anda meminta taco vegetarian, sehingga algoritma pencarian akan mencoba membatasi hasilnya ke restoran yang taco vegetarian terdaftar di menu online mereka, dan telah dirujuk dengan kata "terbaik" di situs lain (seperti yang mungkin memiliki jumlah besar) ulasan restoran online).

Jika Anda tinggal di kota yang lebih besar, bahkan keterbatasan ini mungkin memiliki banyak hasil yang mungkin. Karena Anda menggunakan perangkat seluler, bahkan jika Anda tidak mengaktifkan GPS, lokasi kasar Anda dapat ditentukan oleh menara seluler tempat Anda terhubung, sehingga algoritma pencarian selanjutnya akan membatasi hasil tersebut ke tempat-tempat yang ada dalam radius tertentu dari Anda, sementara biasanya menyoroti lokasi-lokasi tersebut pada hasil pencarian berbasis peta.

Lihat juga Jasa Maket

Produk akhir yang Anda lihat adalah halaman hasil SERP, atau mesin pencari. Selaras dengan contoh kami, Anda akan melihat hasil peta yang menunjukkan beberapa restoran yang semoga menyajikan gaya taco yang Anda minta. Anda juga mungkin melihat tautan ke banyak profil restoran itu di situs lain yang berbasis ulasan, dan mungkin juga tautan ke restoran itu sendiri. Pada kesempatan langka, di mana maksudnya mungkin tidak jelas, sangat mungkin untuk melihat hasil wildcard. Untuk contoh ini, resep taco vegetarian dapat dimasukkan. Jika Anda segera mengklik hasil wildcard itu, mesin pencari akan menggunakan pengetahuan itu untuk mengubah pengirimannya untuk permintaan yang identik atau sangat mirip di masa mendatang.

Cuplikan Unggulan

Anda mungkin pernah mendengar tentang (atau setidaknya melihat) cuplikan fitur dalam kaitannya dengan hasil pencarian Google. Sebagai perkembangan yang agak baru, Google memutuskan bahwa dalam jenis permintaan pencarian tertentu, mereka akan menampilkan teks yang relevan dari hasil terbaik langsung di halaman hasil pencarian. Biasanya, ini hanya teks tetapi bisa berupa video, audio, objek interaktif (seperti kalkulator), atau lebih. "Kotak-kotak jawaban" ini diekstraksi dari konten di situs Anda.

Sementara cuplikan unggulan sangat bagus untuk pencari, banyak webmaster membenci mereka, karena mereka "mencuri" lalu lintas dari situs karena seorang pencari tidak lagi perlu mengunjungi situs Anda untuk mendapatkan jawaban. Karena itu, mungkin untuk memblokir Google agar tidak menampilkannya untuk situs Anda, tetapi sama seperti pemblokiran bot pencarian lainnya, tidak disarankan.