Contenido duplicado Miles de referencias

[Sunriver]

Hola

Tengo una tienda online  1.6.1.4 con miles de productos y un buen lio de categorías y subcategorías.  Me podéis decir si tengo que poner en robots.txt ( o en otro lado ) algún parámetro para evitar tanto contenido duplicado ?

Como extra tengo miles de categorías antigguas con error. Tengo el listado en un csv Como las podría elimnar?

Saludos y gracias

[Nedned]

Buenas, 

lo de eliminar las urls de contenido duplicado, lo puedes ver aquí, en la última parte

https://www.codifica.me/como-eliminar-el-contenido-duplicado-de-tu-web/

Asegúrate antes de hacerlo que has bloqueado la indexación, para que no se vuelvan a indexar una y otra vez.

 

[Sunriver]

Hola Gracias por la respuesta

On 6/7/2020 at 4:57 PM, Nedned said:

Buenas, 

lo de eliminar las urls de contenido duplicado, lo puedes ver aquí, en la última parte

https://www.codifica.me/como-eliminar-el-contenido-duplicado-de-tu-web/

Asegúrate antes de hacerlo que has bloqueado la indexación, para que no se vuelvan a indexar una y otra vez.

 

Hola Gracias por la respouesta. LA cuestión es que son miles de páginas por lo que por ejemplo poner una url canónica es complicado.. y en el htacces tambpo se muy bien como hacerlo , si hay que poner que no indexe una a una cada url duplicada. No hay alguna forma de que se elmine de golpe todo el contenido duplicado?