Postingan

Menampilkan postingan dengan label Crawling

Search Engine, Apa yang Dapat “Dilihat” olehnya di halaman Web

Gambar
Search Engine, Apa yang Dapat “Dilihat” olehnya di halaman Web Perayap mesin pencari (search engine crawler) dan program pengindeksan pada dasarnya adalah program perangkat lunak. Program-program ini luar biasa kuat. Mereka merayapi (crawling ratusan triliunan halaman web, untuk menganalisis konten semua halaman ini, dan menganalisis cara semua halaman ini terhubung satu sama lain. Kemudian mereka mengaturnya menjadi serangkaian database yang dapat merespons kueri penelusuran pengguna dengan rangkaian hasil yang sangat disesuaikan dalam sepersepuluh detik. Ini adalah pencapaian yang luar biasa, tetapi memiliki keterbatasan. Perangkat lunak sangat mekanis, dan hanya dapat memahami sebagian dari sebagian besar halaman web. Crawler mesin pencari (search engine crawler) menganalisis bentuk kode HTML mentah dari halaman web. Jika Anda ingin melihat seperti apa?, Anda dapat melakukannya dengan menggunakan browser Anda untuk melihat sumbernya. Menggunakan Browser Chrome Buka...

Ranking Berbasis Algoritma: Crawling, Indexing, dan Ranking

Gambar
Ranking Berbasis Algoritma: Crawling, Indexing, dan Ranking Sistem ranking berbasis algoritma adalah sistem yang digunakan oleh mesin pencari seperti Google untuk menentukan urutan kemunculan hasil pencarian berdasarkan pertimbangan yang ditetapkan oleh algoritma yang digunakan. Proses ini terdiri dari tiga tahap utama: crawling, indexing, dan ranking. Crawling adalah proses dimana mesin pencari menjelajahi internet menggunakan software khusus yang disebut "crawler" atau "spider". Crawler ini mengikuti tautan dari satu halaman web ke halaman web lainnya, mengumpulkan informasi tentang setiap halaman yang ditemukannya. Indexing adalah proses dimana informasi yang dikumpulkan oleh crawler disimpan dalam database yang disebut "indeks". Indeks ini kemudian digunakan oleh mesin pencari untuk mencari dan menampilkan hasil pencarian yang sesuai dengan permintaan pengguna. Ranking adalah proses dimana mesin pencari menentukan urutan kemunculan has...