Talaan ng mga Nilalaman:
Kahulugan - Ano ang ibig sabihin ng Spider?
Sa konteksto ng Internet, ang isang spider ay isang dalubhasang software na idinisenyo upang sistematikong mag-crawl at mag-browse sa karaniwang World Wide Web para sa layunin ng pag-index ng mga web page upang mabigyan sila ng mga resulta ng paghahanap para sa mga query sa paghahanap ng gumagamit. Ang pinakatanyag sa naturang mga spider ay ang Googlebot, ang pangunahing crawler ng Google, na tumutulong upang matiyak na ang mga nauugnay na resulta ay ibabalik para sa mga query sa paghahanap.
Ang mga spider ay kilala rin bilang mga Web crawler, mga bot sa paghahanap o simpleng mga bot.
Ipinaliwanag ng Techopedia ang Spider
Ang isang spider ay mahalagang isang programa na ginagamit upang mag-ani ng impormasyon mula sa World Wide Web. Gumapang ito sa mga pahina ng mga website ng pagkuha ng impormasyon at pag-index nito para magamit sa ibang pagkakataon, karaniwang para sa mga resulta ng search engine. Ang spider ay bumibisita sa mga website at ang kanilang mga pahina sa pamamagitan ng iba't ibang mga link papunta at mula sa mga pahina, kaya ang isang pahina na walang isang link na papunta dito ay magiging mahirap i-index at maaaring mababa ang ranggo sa pahina ng mga resulta ng paghahanap. At kung maraming mga link na tumuturo sa isang pahina, nangangahulugan ito na sikat ang pahina at lalabas ito nang mas mataas sa mga resulta ng paghahanap.
Mga hakbang na kasangkot sa pag-crawl sa Web:
- Ang spider ay nakahanap ng isang site at nagsimulang pag-crawl ng mga pahina nito.
- Ang spider ay nag-index ng mga salita at nilalaman ng site.
- Ang spider ay bumibisita sa mga link na matatagpuan sa site.
Ang mga spider o webcrawler ay mga programa lamang, at dahil dito, sinusunod nila ang sistematikong mga panuntunan na itinakda ng mga programmer. Ang mga nagmamay-ari ng mga website ay maaari ring makapasok sa pamamagitan ng pagsasabi sa spider kung aling mga bahagi ng site ang mag-index at kung saan hindi dapat. Ginagawa ito sa pamamagitan ng paglikha ng isang "robots.txt" na file na naglalaman ng mga tagubilin para sa spider patungkol sa kung aling mga bahagi sa index at mga link na dapat sundin at alin ang dapat itong huwag pansinin. Ang pinakamahalagang spider out doon ay ang mga pagmamay-ari ng mga pangunahing search engine tulad ng Google, Bing at Yahoo, at ang mga nilalayon para sa pagmimina at pananaliksik ng data, ngunit mayroon ding ilang mga nakakahamak na spider na nakasulat upang hanapin at mangolekta ng mga email para ibenta ang gumagamit sa mga kumpanya o upang makahanap ng mga kahinaan sa seguridad sa Web.
