Digidol
Показано с 1 по 2 из 2

 

 

Как скрыть внешние ссылки с помощью .htaccess и robots.txt

 

 

  1. Профессионал
    Аватар для Дыхание жизни

    Регистрация
    02.05.2013
    Сообщений
    289

    Как скрыть внешние ссылки с помощью .htaccess и robots.txt

    Большое количество внешних ссылок на страницах сайта вызывает подозрение у поисковых систем. Такие сайты ассоциируются у них с каталогами ссылок и другой "нечистью" с которой они пытаются бороться, что проявляется в понижении таких страниц в выдаче поисковых систем, а то и вовсе исключением из поисковой базы. Что бы подобное не случилось с вашим сайтом рекомендую ознакомится со статьей

    Наличие лишних внешних ссылок сильно снижает значимость других, более важных ссылок на странице. В частности передаваемый Google Page Rank (PR) делится поровну на все ссылки присутствующие на странице независимо от атрибутов rel="nofollow" в ссылке.

    Не только поисковики, но и многие другие роботы различных сервисов, таких как: биржи статей, ссылок, и т.д. учитывают количество внешних ссылок, естественно чем меньше этот показатель, тем ценнее страницы и сайт в целом, тем больше рекламодателей захотят купить ссылки именно у Вас. Поэтому если Вы используете такие сервисы, то Вам необходимо снижать этот показатель.

    Как в основном решают такие проблемы: данную проблему решают в основном двумя способами:

    1) добавление атрибута rel="nofollow" в тег ссылки
    (анкор)

    2) передача ссылки специальной странице в качестве параметра
    (http://мой_сайт/redirect.php?url=внешняя_ссылка).

    Страница перенаправляет пользователя (делает редирект) на переданный в параметре адрес.

    1) Способ полноценно работает только в Яндекс. Google учитывает такие ссылки при распределении PR, деля PR поровну между всеми, однако, не передает PR на ссылки с параметром nofollow, и не переданная таким образом часть PR просто пропадает в никуда. Так же такие ссылки пагубно влияют на показатели в биржах ссылок.

    2) Способе ссылки будут считаться внутренними, что избавляет от описанных выше проблем. Однако, обрабатывающая ссылки страница дает нагрузку на сервер. Пусть маленькую, но все же ощутимую, если ссылок, обрабатываемых ей, слишком много.

    Вот другой способ решения данной проблемы : Скрытие внешних ссылок с помощью .htaccess и robots.txt

    Столкнувшись с проблемой скрытия внешних ссылок я решил пойти немного по иному пути, нежели перенаправление со страницы (вариант с nofollow даже не рассматривался).

    Решение было найдено с помощью htaccess и robots.txt.

    В .htaccess я добавил правило:

    RedirectMatch 302 /linker/(.*)$ $1


    Следуя этому правилу сервер будет перенаправлять пользователей по ссылкам, указанным после linker/, например, при запросе http://мой_сайт/linker/http://google.ru сервер перенаправит пользователя на сайт поисковой системы Google. Передав функцию паромщика серверу я разгрузил PHP, который теперь сможет больше времени уделить более важной работе.

    Установка запрета поисковым системам индексировать ссылки на , которые идет redirect (перенаправление ) нужно добавить в robots.txt следующий код:

    User-agent: *
    Disallow: /linker/

    Так сообщаем поисковым системам о том, чтобы не переходили по спрятанным ссылкам.
    Яндекс воспринимает внешние ссылки за страницы сайта

    После индексации сайта Яндексом обнаружилась очень любопытная вещь. Яндекс воспринял все внешние ссылки, скрытые таким способом, за страницы моего сайта и учел их в статистике общего количества страниц сайта. Таких псевдостраниц оказалось даже больше, чем реальных на самом деле. Google ни как не отреагировал на эти ссылки чего, собственно, я ожидал от обоих поисковиков.

    Автор: Игорь Сокольский

    Источник : 2i2s ru
    Digitabs

  2. Специалист
    Аватар для Игорь Мельников

    Регистрация
    12.04.2017
    Сообщений
    311

    Re: Как скрыть внешние ссылки с помощью .htaccess и robots.txt

    Никогда не думал о таком варианте. Спасибо за статью. Интересно а такое проделать невозможно с редиректом? Скажем добавить в роботс текст запрет на индексацию файла?
    qcomment

Похожие темы

  1. Полезные хаки и сниппеты для .htaccess
    от Владимир Кочалов в разделе Форум Вебмастеров
    Ответов: 0
    Последнее сообщение: 07.06.2019, 06:02
  2. Как скрыть внешние ссылки с помощью .htaccess и robots.txt
    от Владимир Кочалов в разделе Форум Вебмастеров
    Ответов: 0
    Последнее сообщение: 07.06.2019, 06:02
  3. Создание и настройка правильного robots. txt и sitemap. xml для сайта
    от Владимир Кочалов в разделе Поисковое продвижение
    Ответов: 0
    Последнее сообщение: 03.12.2018, 21:27
  4. Создание карты сайта, robots. txt
    от Владимир Кочалов в разделе Поисковое продвижение
    Ответов: 0
    Последнее сообщение: 03.12.2018, 21:26
  5. Полезные хаки и сниппеты для .htaccess
    от Владимир Кочалов в разделе Форум Вебмастеров
    Ответов: 1
    Последнее сообщение: 14.05.2017, 07:21

Ваши права

  • Вы не можете создавать новые темы
  • Вы не можете отвечать в темах
  • Вы не можете прикреплять вложения
  • Вы не можете редактировать свои сообщения
  •