indexowanie bota google

[Gość lukasz1989]

Hello, ktos moze wie czy to jest normalne:

w logach innych botow mam ladnie pokazane co gdzie kiedy indexuje, a tu pusto tak jakby nic nie indexowal tylko z RSS.

Edytowane 1 Kwietnia 2009 przez lukasz1989

[DawPi]

Tam tych stron widzę więcej, wszystkie są z RSS? Bo wiesz, to mogłoby byś na jednej sesji. Nie wiem jak bot G działa, ale na to wejście mógł przeszukiwać RSS.

[Gość lukasz1989]

mhm tylko rss.. i tylko z pierwszego kanalu rss z drugiego nic.

Edytowane 1 Kwietnia 2009 przez lukasz1989

[DawPi]

No czyli masz tam załóżmy parę tysięcy 'wpisów' i wszystkie z RSS?

[Gość lukasz1989]

tak... dokladnie tak jak na sceenie, na kazdej stronie tych logow ejst to samo

[DawPi]

Wg mnie coś go tam zatrzymuje. Wg mnie mógłbyś zablokować botom dostęp do RSSów.

Stwórz plik robots.txt z treścią:

User-agent: *
Disallow: /index.php?act=rssout

[Gość lukasz1989]

Wg mnie coś go tam zatrzymuje. Wg mnie mógłbyś zablokować botom dostęp do RSSów. :/

Stwórz plik robots.txt z treścią:

User-agent: *
Disallow: /index.php?act=rssout

ok a gdzie go wyslac?

[DawPi]

Do głównego folderu forum oczywiście.

[Gość lukasz1989]

ok zorbione, zdam relacje jak najszybciej.

[Gość lukasz1989]

dalej mi indexuje z rss, dobra wylacze RSS i zobacze

[Gość lukasz1989]

Wrzucilem ta sama liste botow co ty uzyuwasz (http://forum.invisionize.pl/index.php?showtopic=2279) i dalej mam to samo... moze to przez FURL ?

Edytowane 4 Kwietnia 2009 przez lukasz1989

[DawPi]

Zablokowałeś RSS w robots.txt?

[Gość lukasz1989]

tak, tak jak napisalem wyzej..

dalej mi indexuje z rss, dobra wylacze RSS i zobacze

[DawPi]

No to lipton z tym ogólnie jest. Opcja skasowania kanałów RSS i sprawdzenia pewnie nie wchodzi w grę.

A jakbyś jeszcze zablokować ten adres w pliku .htaccess?

[Gość lukasz1989]

jednak ten robots raczej zablokowal ten rss, a jak teraz to odblokowac? (usuniecie pliku z ftp nie pomoglo )

[DawPi]

No to źle?

Bot sam musi sobie 'odświeżyć' - nie masz na to wpływu. Trzeba odczekać.

No, ale wytłumacz - chciałeś zablokować - źle, zablokowane - źle.

[Gość lukasz1989]

w sumie to chcialem zeby mi indexowal normalnie tak jak inne dobra poczekamy... prosze nie zamykaj jescze

[Gość lukasz1989]

Helo w tym momecie sytulacja wyglada tak...teraz google bot indexuje normalnie a rss nie lol czyli ten robot.txt jednak zadzialal tylko jak teraz to odblokowac? :)

dobra jedyny pomysl jaki mam to wrzucic go jescze raz tylko zmienie z disallow na allow lol

DAMMMMMMMMMMMMMM

Edytowane 18 Kwietnia 2009 przez lukasz1989

[DawPi]

No tak i uzbrój się w cierpliwość.