Robots.txt Editor

Опис

Robots.txt е визуелен уредник за датотеки со исклучување на роботи и софтвер за анализатор на дневници. Тоа му овозможува на корисникот брзо и лесно да ги креира датотеките robots.txt потребни за да им наложи на пајаците на пребарувачот, кои се делови од веб-страницата да не се индексираат и да се пребаруваат од пошироката веб-јавност, а потоа да ги идентификува пајаците, кои не придржувајте се до тие упатства. Програмата му овозможува на корисникот начин да се најави на неговиот FTP или локален мрежен сервер и потоа да ги избере документите и директориумите кои не треба да се пребаруваат. Со помош на оваа програма ќе можете визуелно да генерирате индустриски стандардни датотеки robots.txt; идентификувајте малициозни и несакани пајаци и забранете ги од вашата страница; директни роботи на пребарувачите до соодветните страници за повеќејазични сајтови; чувајте ги пајаците надвор од чувствителните и приватни области на вашата веб-страница; следете ги посетите на пајакот и многу повеќе. Ажурирањата и надградбите на бесплатната програма неограничени на време; неограничен број на веб-страници за работа.