Robots.txt Editor

Kuvaus

Robots.txt on visuaalinen editori robottien poissulkemistiedostoille ja loki-analysaattoriohjelmisto. Sen avulla käyttäjä voi nopeasti ja helposti luoda robots.txt-tiedostoja, joita tarvitaan ohjaamaan hakukoneiden robotteja, jotka ovat Web-sivuston osia, joita ei saa indeksoida ja tehdä haettavaksi yleisessä Webissä, ja sitten tunnistaa hämähäkit, jotka eivät noudata näitä ohjeita. Ohjelma tarjoaa käyttäjälle tavan kirjautua FTP- tai paikallisverkkopalvelimelleen ja valita sitten asiakirjat ja hakemistot, joita ei tehdä haettavaksi. Tämän ohjelman avulla pystyt visuaalisesti luomaan alan standardeja robots.txt-tiedostoja; tunnista haitalliset ja ei-toivotut hämähäkit ja estä ne sivustostasi; ohjaa hakukoneiden indeksointirobotit monikielisten sivustojen sopiville sivuille; pidä hämähäkit poissa Web-sivustosi herkiltä ja yksityisiltä alueilta; seurata hämähäkkivierailuja ja paljon muuta. Ilmaiset ohjelman päivitykset ja päivitykset ajallisesti rajoittamattomat; rajaton määrä web-sivustoja työskentelyyn.