O Google acaba de lançar o Indexifembedde, robots tag que permite que você controle se o buscador deve indexar uma página com conteúdo incorporado. Dessa forma, é possível indexar o conteúdo de uma página que estiver incorporada em outra página por meio de iframes ou tags HTML semelhantes, mesmo quando a página de conteúdo tem a tag “noindex”.

Anúncio oficial do Google

“A indexifembedde resolve um problema comum que afeta especialmente os editores de mídia: embora eles possam querer que seu conteúdo seja indexado quando incorporado em páginas de terceiros, eles não querem necessariamente que suas páginas de mídia sejam indexadas por conta própria. Atualmente, eles usam uma tag ‘noindex’ nessas páginas. No entanto, a tag noindex também impede a incorporação do conteúdo em outras páginas durante a indexação.”

Exemplo de aplicação

Para permitir que seu conteúdo seja indexado somente quando estiver incorporado em outras páginas, certifique-se de adicionar “indexifembedded” em combinação com a tag “noindex”. Por exemplo:

meta name=”googlebot” content=”noindex” />

<meta name=”googlebot” content=”indexifembedded” />

<!– OR –>

<meta name=”googlebot” content=”noindex,indexifembedded” />

Como alternativa, você pode especificar a tag no cabeçalho HTTP:

X-Robots-Tag: googlebot:noindex

X-Robots-Tag: googlebot:indexifembedded

ou

X-Robots-Tag: googlebot:noindex,indexifembedded

Fonte: Agência Mestre