Existe um código de status HTTP para dizer ao Google (e outros) para ir embora e me indexar novamente mais tarde ?
Basicamente, um que diga semanticamente aos clientes que o site está em manutenção?
Os que eu considerei são
304 => Not modified
307 => Temporary redirect
410 => Gone
503 => Service Unavailable
Estou inclinado para o último, mas estava curioso para saber qual era a escolha certa .
Respostas:
HTTP 503 - Serviço indisponível seria o mais apropriado.
O servidor da Web (executando o site da Web) atualmente não consegue lidar com a solicitação de HTTP devido a uma sobrecarga temporária ou manutenção do servidor. A implicação é que esta é uma condição temporária que será aliviada após algum atraso.
Esta postagem no Fórum da Central do webmaster do Google também é relevante:
Sim - 503 é a resposta correta do servidor para "Estamos fechados". Se você substituir uma página HTML normal dizendo "Estamos fechados" e servir 200, é muito provável que seja indexado pelo Google.
Se você der ao Googlebot um 503, ele simplesmente irá embora e voltará mais tarde, sem indexar o que você forneceu.
ATUALIZAR:
Quanto à implementação do php, você pode estar interessado em verificar o seguinte artigo:
Observe também o retry-aftercabeçalho, onde você pode especificar após quantos segundos outra solicitação deve ser tentada novamente.
De http://www.google.com/support/webmasters/bin/answer.py?hl=en&answer=40132
503 (Serviço indisponível) O servidor está indisponível no momento (porque está sobrecarregado ou fora do ar para manutenção). Geralmente, este é um estado temporário.