Robots.txt Editor

Beskrivning

Robots.txt är en visuell redigerare för Robot Exclusion Files och ett logganalysprogram. Det gör det möjligt för en användare att snabbt och enkelt skapa de robots.txt-filer som krävs för att instruera sökmotorspindlar, som är delar av en webbplats som inte ska indexeras och göras sökbara av allmänheten och sedan identifiera spindlar, som inte håll dig till dessa instruktioner. Programmet ger användaren ett sätt att logga in på sin FTP eller lokala nätverksserver och sedan välja de dokument och kataloger som inte ska göras sökbara. Med hjälp av detta program kommer du att visuellt generera industristandard robots.txt-filer; identifiera skadliga och oönskade spindlar och förbjuda dem från din webbplats; dirigera sökmotorernas sökrobotar till lämpliga sidor för flerspråkiga webbplatser; hålla spindlar borta från känsliga och privata områden på din webbplats; spåra spindelbesök och mer. Gratis programuppdateringar och uppgraderingar obegränsade i tid; obegränsat antal webbplatser att arbeta med.