User-agent: * # todos os spiders Disallow: /*? # ignorar urls com parametros