Готовый robots.txt для сайта

User-agent: *

# системные страницы WordPress
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /xmlrpc.php
Allow: /wp-admin/admin-ajax.php

# системные каталоги
Disallow: /cgi-bin/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/

# личный кабинет и корзина
Disallow: /cart/
Disallow: /checkout/
Disallow: /my-account/

# поиск
Disallow: /?s=
Disallow: /search/

# RSS
Disallow: */feed/

# WooCommerce фильтры (очень важно)
Disallow: /*?min_price=
Disallow: /*?max_price=
Disallow: /*?filter_
Disallow: /*?orderby=
Disallow: /*?per_page=
Disallow: /*?per_row=
Disallow: /*?shop_view=

# параметры WooCommerce
Disallow: /*?add-to-cart=
Disallow: /*?rating_filter=
Disallow: /*?product-page=

# дубли страниц
Disallow: */page/

# Sitemap
Sitemap: https://ваш сайт/sitemap_index.xml