Не знаю, как тут лучше изложить.
Короче, есть странийца, в ней - новости.
Новости формируются скриптом (Кут-ньюс), ставится новость на главную сайта инклюдом.
Все прекрасно, за одним НО.
Робот-поисковик лазает по моей странице и натыкается на код инклюда. Конечно, он туда не лезет. В итоге, мои новости не принимают участия в формировании рейтинга. Ну да, каким-то абсолютно непонятным для меня образом что-то вскакивает в Яндекс и потом не обновляется месяц.
Короче, нужно что-то менять.
Что - не знаю.
Или я туплю с этим поиском?

Как он определит что это инлюд?
Для него есть просто Html-код.

Возможно что новости у тебя держатся на главной столько времени, сколько Яндексу не хватает времени на индексацию. Поэтому не видишь его при поиске в Яндексе, а те которые случайно всё же попадают поподают потому что Яндекс успел проиндексировать обновление на странице.

Можно ускорить время индексации давая внешние ссылки на главную страницу...

Ещё есть файл robots.txt им можно управлять процессом...
А код само сабой нужно делать "приятным" для поисковиков, причём все они по-разному реагируют.

Alone
Я ж и говорю, что робот натыкается на код - но контента то нет в коде страницы!

Как это нету?
Ты же не Джаве инклюдишь а на PHP. И не во фрейме я думаю...
Должен быть контент...

а как вы так проверяете есть ли сдвиги в поисковиках что они видять что нехотят ?

Ну например так:
http://webmaster.yandex.ru/check.xml