info navigation page administrator

phpbb-belk.ru

темы, связанные с форумом phpbb 3.0.x



Новая тема  [ Сообщений: 39 ]  1 2 3 4

Автор Сообщение
Не в сети
(Андрей)  
2020-01-12 
Администратор
Аватара пользователя

Стаж: 4 года 4 месяца 27 дней
Сообщения: 1009
Откуда: здешние мы


Стиль: subsilver2


Репутация: 6


Russia

Тиц и PR

перейти на сайт пользователя
Найти темы пользователя


наверное "срезает", так как у меня нет проблем со страницами с sid=****


трёхголовый белк семейства рептилоидов:
"три головы - хорошо, на как же трудно придти к согласию..."
robots.txt
Не в сети
(Дмитрий)  
2020-01-14 Re:
Аватара пользователя

Стаж: 3 года 1 месяц 4 дня
Сообщения: 659


Стиль: prosilver


Репутация: 15




Тиц и PR

перейти на сайт пользователя
Найти темы пользователя


Я вот чего подумал, Андрей.
Мы поставили мини хак на канонические страницы и это хорошо. Но плохо то, что поставив этот хак мы присвоили этот атрибут canonical абсолютно всем страницам и это не правильно.
Соответсвенно, запретами в роботс, мы отсекаем канонические дубли, а если не ставим запреты, то алгоритм думает, что бывшие дубли и индексируемые страницы теперь все стали каноническими, и что считать первоисточником он не знает, поэтому выкидывает их из поиска.

Этот вопрос снаскоку и в лоб не решается! :( Тут надо подходить более грамотно и взвешано. ;)

Т.е. надо определиться каким страницам и с каким префиксом указывать этот атрибут. Затем только этим страницам добавлять эту каноничность, а дубли либо запрещать в роботсе, либо не трогать, робот сам их отсечет.

Короче говоря, я убираю данный хак, он не улучшает нашу оптимизацию, а скорее даже наоборот...

Добавлено спустя 15 минут 42 секунды:
Обрати внимание как сделано на другом форуме, который пользуется популярностью:

Код: Выделить всё

<link rel="canonical" href="https://forum.awd.ru/viewtopic.php?f=40&t=38483" /><link rel="next" href="https://forum.awd.ru/viewtopic.php?f=40&amp;t=38483&amp;sid=218078548c7c3ef5dd2caa28969d2c28&amp;start=20" />

Короче чем дальше в лес, тем больше дров. Но что то мы явно делаем не правильно :?

Добавлено спустя 3 минуты 49 секунд:
+ смущает еще то, что в вебмастере яндекса я не вижу не одной добавленной страницы к которой бы яндекс написал каноническая.
Он добавляет и пишет - не каноническая? У тебя также? :?


Не в сети
(Андрей)  
2020-01-14 
Администратор
Аватара пользователя

Стаж: 4 года 4 месяца 27 дней
Сообщения: 1009
Откуда: здешние мы


Стиль: subsilver2


Репутация: 6


Russia

Тиц и PR

перейти на сайт пользователя
Найти темы пользователя


Код: Выделить всё

<link rel="next"


я прочитал в сети, что эта штука была реализована для Googlе и уже не используется.

с каноническими страницами я тоже ничего не понимаю.

у меня сейчас на портале стоит хак, в коде страницы он есть, а робот пишет, что страница portal.php не каноническая.

Dmitry писал(а):

Он добавляет и пишет - не каноническая? У тебя также?


да.

и ещё по вашему примеру. смотрите, что интересно:
написано, что каноническая - это адрес другого вида, но в вашем примере ссылка стандартная с форума и она является канонической. у меня, кстати, тоже были добавления страниц до установки хака с тэгом "каноническая".

смотрите, вот ваш пример:

Код: Выделить всё

<link rel="canonical" href="https://forum.awd.ru/viewtopic.php?f=40&t=38483" />


а вот ссылка с моего трекера (после установки хака):

Код: Выделить всё

<link rel="canonical" href="https://anibelka.ru/viewtopic.php?f=32&amp;t=377" />


а вот та же ссылка в браузере:

Код: Выделить всё

https://anibelka.ru/viewtopic.php?f=32&t=377


то есть получается, что у них на сайте в качестве ссылки для канонической используется стандартный вариант...

кстати, уберу запрет на "портальные ссылки". смысла нет. тем более, что оно теперь портала вообще не видит. (точнее видит, но игнорирует).


трёхголовый белк семейства рептилоидов:
"три головы - хорошо, на как же трудно придти к согласию..."
Не в сети
(Дмитрий)  
2020-01-14 Re:
Аватара пользователя

Стаж: 3 года 1 месяц 4 дня
Сообщения: 659


Стиль: prosilver


Репутация: 15




Тиц и PR

перейти на сайт пользователя
Найти темы пользователя


Андрей, кажись до меня доперло! :)
И все приведенные запреты были верными, в первом посте (вероятнее всего).
У меня на форуме 78000 сообщений, но! Я не учел тот факт, что количество сообщений и количество страниц разное!
Соответственно, если на странице 10 ответов, то это значит останется 7800 страниц!
Если отдельно посты не индексируются, то тогда примерно все стыкуется.
Или отдельно посты все же индексируются?


Не в сети
(Андрей)  
2020-01-14 
Администратор
Аватара пользователя

Стаж: 4 года 4 месяца 27 дней
Сообщения: 1009
Откуда: здешние мы


Стиль: subsilver2


Репутация: 6


Russia

Тиц и PR

перейти на сайт пользователя
Найти темы пользователя


я думаю, что не должны. ведь сканируется и определяется именно страница.

у меня сейчас тоже после "убирания дубликатов" количество страниц стало приближаться к количеству тем...

Добавлено спустя 1 час 13 минут 41 секунду:
Сейчас посмотрел на этом сайте - происходит добавление канонических страниц. правда тоже странно:


Изображение


трёхголовый белк семейства рептилоидов:
"три головы - хорошо, на как же трудно придти к согласию..."
Не в сети
(Дмитрий)  
2020-01-14 
Аватара пользователя

Стаж: 3 года 1 месяц 4 дня
Сообщения: 659


Стиль: prosilver


Репутация: 15




Тиц и PR

перейти на сайт пользователя
Найти темы пользователя


Пробую продолжать экспериментировать, на этот раз оставлю такой роботс на пару месяцев, а там видно будет:

Код: Выделить всё

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-login.php 
Disallow: /wp-register.php
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: */feed
Disallow: */comments
Disallow: /*?replytocom
Disallow: /forum/faq.php
Disallow: /forum/mcp.php
Disallow: /forum/memberlist.php
Disallow: /forum/posting.php
Disallow: /forum/report.php
Disallow: /forum/search.php
Disallow: /forum/style.php
Disallow: /forum/ucp.php
Disallow: /forum/*&hilit=*
Disallow: /forum/viewtopic.php?f=*&t=*&start=0$
Disallow: /forum/viewtopic.php?f=*&t=*&view=next
Disallow: /forum/viewtopic.php?f=*&t=*&view=previous
Disallow: /forum/viewtopic.php*p=*
Disallow: /forum/viewtopic.php?t=*
Disallow: /forum/view*&start=0$

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-login.php 
Disallow: /wp-register.php
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: */feed
Disallow: */comments
Disallow: /*?replytocom
Disallow: /forum/faq.php
Disallow: /forum/mcp.php
Disallow: /forum/memberlist.php
Disallow: /forum/posting.php
Disallow: /forum/report.php
Disallow: /forum/search.php
Disallow: /forum/style.php
Disallow: /forum/ucp.php
Disallow: /forum/*&hilit=*
Disallow: /forum/viewtopic.php?f=*&t=*&start=0$
Disallow: /forum/viewtopic.php?f=*&t=*&view=next
Disallow: /forum/viewtopic.php?f=*&t=*&view=previous
Disallow: /forum/viewtopic.php?p=*
Disallow: /forum/viewtopic.php?t=*
Disallow: /forum/view*&start=0$

Clean-param: sid /forum/index.php
Clean-param: sid /forum/viewforum.php
Clean-param: sid /forum/viewtopic.php

Host: https://crimea-your.ru/

Sitemap: https://crimea-your.ru/sitemap.xml.gz
Sitemap: https://crimea-your.ru/sitemap.xml
Sitemap: https://crimea-your.ru/forum/sitemap.php

user-agent: AhrefsBot
Disallow: /

user-agent: dotbot
Disallow: /


Добавлено спустя 1 минуту 43 секунды:
Belk писал(а):

у меня сейчас тоже после "убирания дубликатов" количество страниц стало приближаться к количеству тем...


А должно быть по количеству страниц, мне так кажется ... :?
P.S. У тебя сейчас какой роботс, Андрей?


Не в сети
(Андрей)  
2020-01-14 
Администратор
Аватара пользователя

Стаж: 4 года 4 месяца 27 дней
Сообщения: 1009
Откуда: здешние мы


Стиль: subsilver2


Репутация: 6


Russia

Тиц и PR

перейти на сайт пользователя
Найти темы пользователя


у меня здесь сейчас такой:

Код: Выделить всё

User-agent: *
Disallow: /adm/
Disallow: /download/
Disallow: /styles/
Disallow: /faq.php
Disallow: /feed.php
Disallow: /mcp.php
Disallow: /index.php?
Disallow: /memberlist.php
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /viewonline.php
Disallow: /*&st=*
Disallow: /*&sk=*
Disallow: /*&sd=*
Disallow: /*&hilit=*
Disallow: /*&view=*
Disallow: /viewtopic.php?f=*&t=*&view=previous
Disallow: /viewtopic.php?p=*
Disallow: /viewtopic.php?f=*&p=*
Disallow: /viewtopic.php?f=*&t=*&hilit=*
Disallow: /viewtopic.php?f=*&t=*&p=*&hilit=*
Disallow: /viewtopic.php?t=*&p=*
Disallow: /viewtopic.php?f=*&t=*&view=print
Disallow: /viewtopic.php?f=*&t=*&start=*&view=print
Disallow: /ltopic*
Disallow: /ftopic*-.html
Disallow: /ftopic*-0.html
Disallow: /ftopic*.html]*
Disallow: /ftopic*.html%3E*
Disallow: /ftopic*.html%22*
Disallow: /ftopic*.html/ftopic*
Disallow: /ftopic*.html/download/*
Disallow: /forum*-.html
Disallow: /forum*-*.html
Disallow: /ftopic*/
Disallow: /ftopic*.html&*
Disallow: /ftopic*.htmlM*
Disallow: /ftopic*.html:*
Disallow: /ftopic*.html1*
Disallow: /ftopic*.htmlw*
Disallow: /ftopic*.htmle*
Disallow: /ftopic*.html)*
Disallow: /ftopic*-*1.html*
Disallow: /ftopic*-*2.html*
Disallow: /ftopic*-*3.html*
Disallow: /ftopic*-*4.html*
Disallow: /ftopic*-*5.html*
Disallow: /ftopic*-*6.html*
Disallow: /ftopic*-*7.html*
Disallow: /ftopic*-*8.html*
Disallow: /ftopic*-*9.html*
Disallow: /topic*-*1.html*
Disallow: /topic*-*2.html*
Disallow: /topic*-*3.html*
Disallow: /topic*-*4.html*
Disallow: /topic*-*5.html*
Disallow: /topic*-*6.html*
Disallow: /topic*-*7.html*
Disallow: /topic*-*8.html*
Disallow: /topic*-*9.html*
Disallow: /1_t*.html
Disallow: /post*
Disallow: /spost*
Disallow: /away.html
Disallow: /navigate/navigate.html
Disallow: /guest/settings.html


User-agent: Yandex
Disallow: /adm/
Disallow: /faq.php
Disallow: /feed.php
Disallow: /mcp.php
Disallow: /index.php?
Disallow: /memberlist.php
Disallow: /posting.php
Disallow: /report.php
Disallow: /search.php
Disallow: /style.php
Disallow: /ucp.php
Disallow: /viewonline.php
Disallow: /viewtopic.php*p=*
Disallow: /viewtopic.php?t=*
Disallow: /viewtopic.php?f=*&t=*&hilit=*
Disallow: /viewtopic.php?f=*&t=*&p=*&hilit=*
Disallow: /viewtopic.php?t=*&p=*
Disallow: /viewtopic.php?f=*&t=*&view=print
Disallow: /viewtopic.php?f=*&t=*&start=*&view=print
Disallow: /view*&start=0$
Disallow: /viewtopic.php?p=*
Disallow: /viewtopic.php?f=*&t=*&start=0$
Disallow: /viewtopic.php?f=*&t=*&view=next
Disallow: /viewtopic.php?f=*&t=*&view=previous
Disallow: /away.html
Disallow: /navigate/navigate.html
Disallow: /guest/settings.html

Clean-param: sid /index.php
Clean-param: sid /viewforum.php
Clean-param: sid /viewtopic.php

Host: phpbb-belk.ru

Sitemap: https://phpbb-belk.ru/sitemap.php



но статистика очень странная. хотя и всё стабилизировалось и добавление происходит в "зелёном" цвете с "каноническим" уклоном...

Статистика форума:
Тем: 302
Сообщений: 1831 (по 10 на страницу)

По данным поисковика:
Страниц загружено: 584
В поиске: 489

а до начала наших экспериментов по убиранию дубликатов страниц

страниц в поиске было 2012

то есть тут вообще что-либо понять сложно...

я тоже пока делать нечего не буду. хотя и хак убирать тоже не планирую.


трёхголовый белк семейства рептилоидов:
"три головы - хорошо, на как же трудно придти к согласию..."
Не в сети
(Дмитрий)  
2020-01-14 
Аватара пользователя

Стаж: 3 года 1 месяц 4 дня
Сообщения: 659


Стиль: prosilver


Репутация: 15




Тиц и PR

перейти на сайт пользователя
Найти темы пользователя


Да, думаю, не надо делать таких резких движений. Надо посмотреть что будет происходить и уже потом анализировать.


Не в сети
(Андрей)  
2020-01-14 
Администратор
Аватара пользователя

Стаж: 4 года 4 месяца 27 дней
Сообщения: 1009
Откуда: здешние мы


Стиль: subsilver2


Репутация: 6


Russia

Тиц и PR

перейти на сайт пользователя
Найти темы пользователя


:)


трёхголовый белк семейства рептилоидов:
"три головы - хорошо, на как же трудно придти к согласию..."
Показать сообщения за:  Поле сортировки  
Ответить на тему  [ Сообщений: 39 ]  1 2 3 4

Кто сейчас на сайте:

Всего посетителей: 1, из них зарегистрированных: 0, скрытых: 0 и гостей: 1 (основано на активности пользователей за последние 5 минут)
Больше всего посетителей (17) здесь было 23 янв 2017, 17:20

Сейчас этот раздел просматривают: нет зарегистрированных пользователей и гости: 1

Часовой пояс: UTC + 2 часа



Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения
Вы не можете защищать свои темы паролем

Найти:
Перейти:  

cron

Текущее время: 19 фев 2020, 00:57

Создано на основе phpBB® Forum Software © phpBB Group
Яндекс.Метрика

Полная версия Мобильный вид