Quản trị viên web phải đối mặt với nhiệm vụ xóa các trang riêng lẻ hoặc toàn bộ trang web khỏi công cụ tìm kiếm khi thay đổi thông tin, thay đổi miền, kết hợp một số tài nguyên và một số lý do khác. Có một số cách để giải quyết vấn đề, tùy thuộc vào kết quả mong muốn.
Hướng dẫn
Bước 1
Xóa trang được lập chỉ mục để máy chủ trả về thông báo lỗi khi nó cố gắng điều hướng đến trang web đã chọn HTTP / 1.1 404 Không tìm thấy. Để áp dụng các thay đổi đã chọn, bạn phải đợi rô bốt truy cập lại trang được yêu cầu.
Bước 2
Sử dụng tệp gốc robots.txt của rô bốt để loại trừ các phần hoặc trang đã chọn khỏi lập chỉ mục của công cụ tìm kiếm. Để ngăn việc hiển thị bảng quản trị trong công cụ tìm kiếm, hãy sử dụng lệnh: User-Agent: * Diaallow: / admin / Hoặc, để loại trừ trang đã chọn khỏi lập chỉ mục, hãy nhập giá trị: User-Agent: * Disallow: / select_page.html # Để áp dụng các thay đổi, rô bốt phải truy cập lại trang đã chọn.
Bước 3
Sử dụng phương pháp gắn thẻ meta để thêm quy tắc được chỉ định trong mã HTML vào tất cả các trang được yêu cầu: Điều này là cần thiết để loại trừ các trang không mong muốn khỏi công cụ tìm kiếm.
Bước 4
Chọn một phương pháp để tạo X-Robots-Tag để đưa các lệnh vào tiêu đề http không được hiển thị trong mã trang: X-Robots-Tag: noindex, nofollow Phương pháp này hữu ích nhất để loại trừ các trang hoặc phần đã chọn khỏi lập chỉ mục của các công cụ tìm kiếm nước ngoài.
Bước 5
Sử dụng trang kiểm soát quản trị viên web đặc biệt trong Yandex: https://webmaster.yandex.ru/deluri.xml hoặc trong Google: https://www.google.com/webmasters/tools. Điều này được thực hiện để cấm hiển thị trang, phần hoặc toàn bộ trang web trong công cụ tìm kiếm đã chọn.
