Как работают поисковые роботы и зачем они требуются