, hvorfor skal robots.txt fil?og, selvfølgelig, det er skønt, når søgemaskiner ofte gå til dit sted og indeks dine sider, men også i vil altid finde nogle områder, at de ikke ønsker søgemaskiner til indeks.også, hvis de ønsker at redde nogle båndbredde, ved at udelukke billeder, stil plader og java manuskript fra indeksering, kræver de også, at søgemaskiner, hold dig væk fra dem.hvis de har følsomme eller private data i dit sted, du kan bare ' ikke ønsker at se, det øjeblik du vil foretrække, at søgemaskiner ikke indeks disse sider. så få det gjort?robots.txt fil er dit bedste valg, som kan fortælle søgemaskiner, filer og foldere i din hjemmeside for at undgå.hvad er robots.txt fil?det er faktisk en tekstfil, der fortæller søgemaskine edderkopper eller robotter, som dele af deres websted, de kan komme ind, og hvilke dele de ikke. ja, der er et punkt, som vi bør vide, er den robots.txt dossier skal være placeret i deres rod adresseregister ligesom denne stikprøve: http: //////////////////////www.yourwebsite. robotter. txt.,, hvordan man får en robots.txt fil?, for den letteste robots.txt fil, er der to regler.man bruger agent: den robot, gælder følgende regel.og den anden er paa: url, du har brug for at blokere.begge disse linjer, betragtes som en indgang i filen.og du kan tilføje så mange, som du gerne ville.du kan også omfatte flere og flere bruger stoffer paa linjer i en enkelt indgang.,, hvert afsnit i robots.txt fil er adskilt og kan ' t bygge på de foregående afsnit.her er en prøve -, bruger -: *, annullere: /folder1 /, bruger agent: googlebot, annullere: /folder2 /, men der er også en bedre måde at skabe en robots.txt fil.det er at finde en gratis redskab til at hjælpe dem, der vil redde dig lang tid.måske kan du prøve sitemap x, at jeg har brugt for lang tid, og det er fremragende. med dette redskab, du kan ikke kun få robots.txt fil let, men også skabe sitemap effektivt.som en webmaster, skal du vide sitemap.en sitemap, også kendt som et websted, kort, er den særlige hjemmeside i et websted, der ofte indeholder en oversigt over alle de hjemmesider, der definerer hjemmeside.det anvendes, fordi de ganske enkelt indre indretning af hyperlinks, der vil sætte dem i stand til at få de særlige hjemmeside, du har brug for at finde.det er også godt for søgemaskiner indeks dine sider.