Posts Tagged "buscadores"

Palabras mas buscadas en la internet en 2009

Top Words 2009 es un ranking de palabras en inglés que The Global Language Monitor acaba de publicar y que realiza gracias a su algoritmo “Predictive Quantities Indicator” tras compilar información de palabras y frases, en webs y blogs de Internet y medios de comunicación tradicionales.

En el ranking de este año, Twitter, la herramienta de mensajes en 140 caracteres ha sido la que ocupa la primera posición, adjudicándose el título de palabras más popular durante 2009.

Interesados pueden acceder a Top Words 2009 desde www.languagemonitor.com.

  • Palabras más usadas

1  Twitter
2  Obama
3. H1N1
4. Stimulus
5. Vampire
6. 2.0

  • Frases más usadas

1. King of Pop
2. Obama-mania
3. Climate Change
4. Swine Flu
5. Too Large to Fail
6. Cloud Computing

read more

Palabras más buscadas en dos de los buscadores más importantes de Internet en 2009

Como cada año los buscadores más importantes dan a conocer una serie de estadísticas con las que establecer un ranking de palabras claves más buscadas.

Esta clasificación puede resultar interesante para conocer cuales son las temáticas que más interés despiertan y servirnos de referencia en este sentido.

En este breve os traemos los más buscado por Bing, el nuevo buscador de Microsoft y por Yahoo, estamos preparando el ranking de palabras más buscadas en Google, que próximamente publicaremos.

  • Lo más buscado en Yahoo el 2009

1. Michael Jackson
2. Twilight (Crepúsculo)
3. WWE
4. Megan Fox
5. Britney Spears
6. Naruto
7. American Idol
8. Kim Kardashian
9. NASCAR
10. Runescape

  • Lo más buscado en Bing el 2009

1. Michael Jackson
2. Twitter
3. Gripe porcina
4. Mercado de valores
5. Farrah Fawcett
6. Patrick Swayze
7. Cash for Clunkers (Dinero por chatarra)
8. Jon y Kate Gosselin
9. Billy Mays
10. Jaycee Dugard

read more

Configurar el archivo Robots.txt

Explicamos el porqué del archivo robots.txt y como se construye dicho archivo.

Para comenzar tenemos que comentar lo que son los robots y qué función cumplen dentro de la red de redes.
Un robot es un programa más o menos complicado que se dedica a rastrear nuestras páginas webs y guardar su contenido en una base de datos y seguir los enlaces que tengamos a otras páginas web. Esto nos beneficia pero también nos puede perjudicar, ya que a veces no nos conviene indexar ciertas páginas de nuestras webs.

Actualmente los robots actúan de tal forma que lo primero que hacen es buscar en la raíz de nuestra página si tenemos un archivo llamado robots.txt, si lo encuentra lo lee y sigue las directrices que en él se encuentran, si no lo encuentra empieza a rastrear toda la web.

Por este tema es importante crear bien este archivo y pensar que páginas queremos que sean rastreadas y cuáles no, ya que las que no sean rastreadas no serán indexadas en los navegadores.

Este archivo es muy fácil de construir tan solo tienes que saber ciertas pautas y podrás hacerlo sin problema.

El archivo robots.txt puede construirse para que se aplique solo a los robots de determinados buscadores.

Pasamos a escribir un ejemplo para ir explicando las posibilidades:

User-agent: * # aplicable a todos los robots
Disallow: / # impide la indexacion de todas las paginas

En este ejemplo los robots no podrían indexar ninguna pagina del dominio.
User-agent lo que nos dice es a que robots se les aplica las características que le siguen debajo. Si usamos el * estamos diciendo que esas reglas son aplicables para todos los robots. Pero también podemos hacerlo para determinados robots, como ves en el siguiente ejemplo:

User-agent: lycra
User-agent: BadBot
Disallow: /

En este ejemplo los robots lucra y BadBot tendría prohibida la indexación de cualquier pagina del dominio.

El disallow nos dice los archivos o carpetas que queremos que no sean indexadas. De esta forma podríamos hacer un archivo como este:

User-agent: *
Disallow: /tmp/prueba.html
Disallow: /logs

Este ejemplo lo que haría sería prohibir la indexación de la carpeta logs y el archive prueba.html a todos los robots.

Con esto ya podríamos realizar un archivo robots.txt perfectamente válido, pero también existen términos para determinar en qué horas queremos que esos robots rastreen nuestras páginas. La forma de construirlo es la siguiente:

Visit-time: 0300-0400 #esta opción obligaría a rastrear las paginas solo de 3 am a 4 am

Recuerda que las horas siempre se colocan en Greenwitch

Por otro lado podemos decirle que indexe una página o varias cada equis tiempo, para ello se utiliza la siguiente sintaxis:

Request-rate: 1/30

Siendo el 1 el número de documentos a rastrear y el 30 el tiempo que transcurre entre un rastreo y el siguiente.

Es importante saber que no puedes dejar líneas en blanco ya que no funcionaria, el robots dejaría de leer en el momento que encuentra la línea en blanco.

Otro aspecto que no he comentado antes pero que habréis notado es que los comentarios ser realizan utilizando la #.

Un ejemplo completo seria el siguiente:

User-agent: *
Disallow: /tmp/prueba.html
Disallow: /logs
Visit-time: 0300-0400

Esto permitirá a todos los robots rastrear todas las paginas menos prueba.html y la carpeta logs, además solo podrían indexar de 3 de la mañana a 4.

read more