robots.txt — закриємо від Google непотрібні сторінки
Відгуків: 8Налаштую robots.txt: закриття admin/cart/параметрів, crawl budget, sitemap. Google Tester перевірка. Від 600 грн.
Послуга
Правильний robots.txt захищає від дублів та економить crawl budget
Налаштую robots.txt для вашого сайту: закрию службові сторінки, параметри, дублі від індексації Google — збережемо crawl budget для важливих сторінок.
Що роблю:
- Аудит поточного robots.txt на помилки
- Закриття: /admin/, /cart/, /checkout/, параметри сортування
- Allow для важливих ресурсів (CSS, JS потрібні для рендерингу)
- Disallow для дублів та утилітарних сторінок
- Sitemap вказівка в robots.txt
- Перевірка через Google robots.txt Tester
Перевірити, що robots.txt і карта сайту не суперечать одне одному, можна онлайн-аудитом.
До і після
- Робот витрачає crawl budget на службові сторінки, параметри сортування й дублі
- CSS і JS закриті від Google — він не може коректно відрендерити сторінку
- У robots.txt помилки, а карту сайту в ньому не вказано
- Закрито /admin/, /cart/, /checkout/ і параметри сортування; Disallow для дублів
- Allow для CSS і JS, потрібних для рендерингу; Sitemap вказано в robots.txt
- Crawl budget іде на важливі сторінки; перевірка в Google robots.txt Tester
Відгуки (8)
5.0Брала «Оптимізація robots.txt» для свого проєкту. Роботи сканували сміттєві URL. Все протестували перед тим як віддати.
Робили нам «Оптимізація robots.txt» — роботи сканували сміттєві URL. Зробили бекап перед роботами — приємно, що подбали. Звернусь ще раз із наступними задачами.
Залишаю відгук про «Оптимізація robots.txt». Боявся випадково закрити сайт у robots. Після здачі ще тиждень відповідали на дрібні питання. Тепер сплю спокійно за свій сайт.
Потрібна була послуга «Оптимізація robots.txt», і боявся випадково закрити сайт у robots. Видно, що людина глибоко розуміється на OpenCart. Буду рекомендувати колегам.
Звернувся за послугою «Оптимізація robots.txt». Були закриті CSS/JS для Google. Роботу здали з документацією і поясненнями. Зробили бекап перед роботами — приємно, що подбали. Буду рекомендувати колегам.
Написати відгук
Схожі послуги
Послуга
Консультація DevOps / Linux (1 год)
Послуга
Оптимізація Core Web Vitals
Послуга