Crawler4j 3.3

Crawler4j är en öppen källkod Java sökrobot som har ett enkelt gränssnitt för webben krypande. Du kan ställa in en multi-trådad sökrobot på 5 minuter. Du kan skapa en sökrobot klass som utökar WebCrawler och det bestämmer vilka webbadresser ska genomsökas...