Robots.txt Editor

Deskrizzjoni

Robots.txt huwa editur viżwali għal Robot Exclusion Files u softwer tal-analizzatur tal-ġurnali. Jippermetti utent li joħloq malajr u faċilment il-fajls robots.txt meħtieġa biex jagħti struzzjonijiet lill-brimb tal-magni tat-tiftix, li huma partijiet minn sit tal-Web m'għandhomx jiġu indiċjati u jsiru tiftix mill-pubbliku ġenerali tal-Web u mbagħad jidentifika brimb, li ma jagħmilx żomm dawk l-istruzzjonijiet. Il-programm jipprovdi lill-utent mod biex jidħol fis-server tal-FTP jew tan-netwerk lokali tiegħu u mbagħad jagħżel id-dokumenti u d-direttorji li ma għandhomx isiru tiftix. Permezz ta' dan il-programm tkun tista' tiġġenera viżwalment fajls robots.txt standard tal-industrija; identifika brimb malizzjużi u mhux mixtieqa u tipprojbixxihom mis-sit tiegħek; dirett crawlers tal-magni tat-tiftix lejn il-paġni xierqa għal siti multilingwi; żomm il-brimb barra minn żoni sensittivi u privati ​​tas-sit Web tiegħek; track żjarat brimba u aktar. Aġġornamenti u titjib tal-programm b'xejn mingħajr restrizzjonijiet fil-ħin; numru illimitat ta 'siti Web biex taħdem magħhom.