Noem een aantal problemen die kunnen ontstaan bij het ontwikkelen van Webcrawlers?

    1. Je moet ervoor zorgen dat webcrawlers de servers niet overbelasten bij zijn activiteiten. 
    2. De Webcrawlers moeten linken kunnen onthouden die nog aan de beurt moeten komen. Hij volgt er maar 1 tegelijk. 
    3. Webcrawlers worden toch overvol of missen links. 

    Rapporteer Plaats commentaar