Guida per principianti a robots.txt


Noi tutti vogliamo che i nostri siti web e le pagine web per essere indicizzati dai motori di ricerca siti. Lo facciamo attraverso vari metodi di ottimizzazione dei motori di ricerca. Tuttavia, ci sono alcune pagine web sul nostro sito web, non vogliono che i robot dei motori di ricerca di eseguire la scansione. Possiamo farlo utilizzando la direttiva noindex nel file robots.txt.

Quando un bot dei motori di ricerca o robot strisciare sul vostro sito web, prima cercare un file robots.txt. Questo file contiene le informazioni su quali pagine devono essere acquisiti e quelli che precludere sul tuo sito web. In altre parole, il file robots.txt che permette come webmaster per controllare i robot dei motori di ricerca, il che significa anche è possibile dettare i termini del tuo motore di ricerca.




Utilizza il file robots.txt per includere nella directory pagine noindex, in modo che quando i robot dei motori di ricerca a scansione del tuo sito web, i siti web elencati in qualsiasi indice di directory non strisciare. Tuttavia, questo non significa che le pagine della directory non indicizza il file robots.txt non rango per parole chiave.

File Robots.txt è stata la prima volta Martin Koster quasi 17 anni fa. Per cominciare, è stato popolare in quanto il motore di ricerca AltaVista. In pochissimo tempo, gli altri motori di ricerca hanno iniziato ad usarlo. Nel mondo di oggi, non si può costruire un sito web senza un file robots.txt perché uno degli aspetti più importanti di ottimizzazione dei motori di ricerca. Anche se non si desidera che le pagine del tuo sito da non perdere dai robot, è necessario includere il file di botots.txt nella sua forma più elementare. Tuttavia, non vi è alcuna limitazione all'utilizzo di robots.txt.

Anche se il meta tag robots può anche essere utilizzato per limitare l'indicizzazione delle pagine dei motori di ricerca, il metodo robots.txt offre molte più funzionalità. Utilizzando questo metodo, è possibile limitare completamente l'indicizzazione del tuo sito web o addirittura fare parte. Inoltre, è anche possibile controllare che cercare i robot dei motori in grado di indicizzare il tuo sito web e che il bot non può.

Il file robots.txt è un semplice file di testo con codice minimo, ma ha abbastanza informazioni in modo che il bot capire le loro istruzioni. Le due parole chiave principali in questo file sono user agent e Disallow. Dopo il robots.txt file codificato necessario caricare alla radice della sezione web server.

Metodo Robots.txt è uno dei più raccomandati dei motori di ricerca metodi di ottimizzazione, perché dà ai webmaster controllo completo sui robot dei motori di ricerca. Se il vostro sito ha un sacco di contenuti grafici sotto forma di file di immagini, file flash, ecc E 'difficile per i robot di eseguire la scansione all'interno del vostro sito web. In questo caso, è possibile scrivere il codice nel file robots.txt per escludere questi file di grafica, e concentrarsi di più su parole chiave e contenuti.
E 'utile anche in situazioni in cui si desidera solo per testare le prestazioni del tuo sito web dopo la progettazione e la codifica, ma non vuole essere indicizzati dai motori di ricerca. Oltre a questo, aiuta anche a proteggere il vostro sito da malware web crawler, che non sono affatto utili per l'ottimizzazione dei motori di ricerca, ma mal influenzano il tempo di caricamento del tuo sito web.

(0)
(0)

Commenti - 0

Non ci sono commenti

Aggiungi un commento

smile smile smile smile smile smile smile smile
smile smile smile smile smile smile smile smile
smile smile smile smile smile smile smile smile
smile smile smile smile
Caratteri rimanenti: 3000
captcha