Управлявам уебсайт, но за няколко дни го спрях и сложих страницата в процес на изграждане, защото индексът на администраторската страница се вижда от външния свят чрез търсенето с Google. Един от моя приятел ми каза, че индексът на вашите уебсайтове е видим и е на една крачка от него за достъп до файла с парола и той ми го показва много просто, използвайки търсенето с Google.

Как мога да предотвратя това и аз хоствам сайта си с хостинг компания и им докладвам за това, но те просто ми отговориха, че все още е сигурно, така че няма нужда да се притеснявате ...

наистина ли не трябва да се притеснявам и да продължа сайта си с видимия индекс на администраторска страница?

  • Фактът, че страницата ви е „видима“, е само защото Google кешира информацията. Моят приятел има „в процес на изграждане“ на страницата си, преди да е настроен. И каза, че 2 месеца по-късно страницата му се появява в google като „в процес на изграждане“, което наистина го дразни.

Инструментите на Google за уеб администратори ви позволяват да премахвате страници от техния индекс за търсене на сайтове, които притежавате.

След това можете да използвате robots.txt, за да помолите повечето големи търсачки да не индексират части от вашия сайт. Google покрива как да създадете файл с роботи в някои подробности, а инструментите за уеб администратори имат полезен генератор. Примерен код тук

Блокиране на страница: -

Disallow: /private_file.html 

Блокиране на директория

Disallow: /directory/ 
  • какво, ако нямам такъв вид настройка ... вместо файл се справям с администраторския панел чрез url. Мога ли да блокирам URL адреса ??

Има няколко начина да блокирате вашия администратор. Най-лесният начин би бил да се използва htaccess за изпращане на HTTP заглавка, за да се каже на търсачките да не индексират нито една от тези страници. Поставете следния код във файл htaccess във вашата администраторска директория:

Header: 'X-robots-tag: noindex' 

Това ще приложи тази заглавка към всяка страница в тази директория и поддиректория под нея и ще предотврати индексирането на тези страници.

Можете да прочетете повече за това в блога на Google за уеб администратори.

  • аз съм на конфигуриране, ще кажа резултата за това, благодаря за вашия отговор
  • Това е най-добрият отговор. Освен досадно ръчно премахване на страници с помощта на Google Webmaster Tools. След като бъде индексиран, това ще го премахне. За защитен ресурс бих направил X-Robots-Tag: noindex, nofollow. Вижте документите за разработка

Google и други търсачки могат лесно да обхождат и индексират вашите WordPress теми и скриптове на теми. Това може да намали ранга на вашата страница и стойността на SEO. За да поправите това, създайте или отворете a robots.txt файл в корена на WordPress и добавете следния код:

User-agent: * Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /wp-content/themes/ Diasllow: /wp-content/plugins/ 
  • Предполагате, че сайтът е WordPress, което не звучи като.
  • @AndrewLott Този отговор може лесно да бъде приет на всеки друг сайт. Просто променете връзките и поставете robots.txt в главната директория.

robots.txt не блокира Google или други да индексират URL адреси, той просто иска, моля, не обхождайте тези URL адреси, докато сте тук http://www.mattcutts.com/blog/robots-txt-remove-url/, ако те блокирани страници са свързани към други страници в мрежата Google все още ще индексира страницата, трябва да се използва noindex, както и блокиране с robots.txt

robots.txt е много опасен. Когато хакерите намерят вашия robots.txt, те ще видят всички забранени файлове и директории и ще намерят начин за достъп до тях. Използвайте .htaccess във всяка папка и посочете Опции -Индекси.

е работил за вас: Charles Robertson | Искате ли да се свържете с нас?