Google индексинен сайтты же анын бөлүктөрүн кантип алып салуу

Google тарабынан кабыл алынган индекстөө түшүнүк боюнча, толуктугу үчүн туура, маалымат жана калыстыгын жыйынтыгын чыгаруу боюнча издөө суроо үчүн ылайык. индекси спам мыйзамсыз мазмунга же ресурсу менен сайтына калса, бул сайттын барактары жалпы базасы издөө белгиленген жок. Биз үчүн аны изилдеп-үйрөнүү маанилүү сайтты өчүрүш үчүн кандай издөө Server жыйынтыгы берүү келген.

Чыгарылган нөл индекстөө Google жөнүндө

издөө робот бир жолу - жаңы ресурстарды туурасында маалымат чогултуу үчүн программа - беттеги тарабынан сайт бет издейт, анда, талдоо үчүн Google саясатынын талаптарына ылайык, ал менен кошо индекстелет болот. индекси жана бир эле учурда аялдамасына издөө - Бирок биз да кантип аркылуу издөө системалары үчүн сиздин сайтка же сыныктарын robots.txt алып, сага көрсөтөт.

жалпы эле ресурстун берүү киргизбөө үчүн сайт жайгашкан жүрүш тамыры папкасында, бир текст аймагын түзөт - robots.txt билдирди. Бул аймак издөө системалары менен мамиле окуп көрсөтмөсүнө ылайык иш-аракет болуп саналат.

колдонуучунун уруксаты бар болсо да, Google издөө индекстердин бет, тыюу көрүү үчүн эстен чыгарбайлы. браузер 401 же 403 менен жооп берсе, "мүмкүндүк алуу туура эмес", ал бул үчүн чогулуп программаларга караганда, бир гана коноктор тиешелүү издөө каражаты.

түшүнүү үчүн алып кандай издөө индекстөө чейин сайт бир текст көрсөткүчү төмөндөгүдөй багыттар керек:

Колдонуучу агент: Googlebot

Тыйуу: /

Бул жөрмөлөгүч көрсөтүп көрсөткүчкө сайтында бардык мазмунга тыюу. Мында сайтты өчүрүш үчүн кантип акыркы аныкталган тизмесине ресурсун кеш эмес, ошондуктан, Google.

башка протоколдордун сканерлөө жактан

Сиз гипертекст үчүн өз-өзүнчө, мисалы үчүн, Google индекстештирүү үчүн атайын эрежелер колдонулат каалаган үчүн, жеке байланыш стандарттарын Тизмеге керек болсо протоколдорду HTTP / HTTPS, ал кийинки жолу (мисалы,) менен ачууну robots.txtке каттоого, ошондой эле зарыл.

(Http://yourserver.com/robots.txt) - сиздин сайттын домендик аты-жөнү (бар болсо)

Колдонуучу агент: * - ар кандай издөө

Уруксат берүү: / - толук индекстөөнү жол

HTTPS протоколго толугу менен маселе бир сайтты өчүрүш үчүн кантип

(Https://yourserver.com/robots.txt):

Колдонуучу агент: *

Тыйуу: / индекстөө боюнча толугу менен тыюу

Google SERPs тартып тездетилген салуу URL- ресурс даректери

Сиз сыяктуу кайра-индекстөө, сен муну жашыныш үчүн каалаган сайт күтүп кереги жок болсо, мен мүмкүн болушунча тез арада тейлөө http://services.google.com/urlconsole/controller пайдаланууну сунуш кылабыз. Алдын ала robots.txt сайт Server өзөк каталогуна жайгаштырылган керек. Ал тийиштүү көрсөтмөлөрдү белгиленген керек.

Кайсы бир себептен улам, чычкан көрсөткүчү өзөк каталогуна-жылы түзөтүү мүмкүн эмес болсо, издөө системалары жашынып каалаган бутага менен папка жетиштүү аны түзүү. Сиз дароо гипертекст даректерин салуу кызматы ушул жана сөз кийин, Google ачууну robots.txtке бир айыбын жазылган папкаларды арытып, жок болот.

Бул көрүнбөгөн мөөнөтү 3 ай үчүн белгиленет. Бул мөөнөт аяктагандан кийин, маселе алынган каталог, кайрадан Google тейлөө аркылуу иштелип чыгат.

H тартмайынча жарым-жартылай издөөсүнө сайтты өчүрүш үчүн

Издөө бот ачууну robots.txtке мазмунун окуп жатканда, кээ бир чечимдер, анын мазмунунун негизинде жүргүзүлөт. Сиз ANATOM деп аталган толугу менен каталогун көрсөтүү жокко кылгыбыз келип жатат деп коёлу. Бул ченемдик укуктук жазып алуу үчүн жетиштүү болуп саналат:

Колдонуучу агент: Googlebot

Тыйуу: / ANATOM

Же, мисалы, бардык сүрөт түрлөрү .gif индекс эмес келет. Бул үчүн төмөнкү тизмесин кошуу:

Колдонуучу агент: Googlebot

Тыйуу: /*.gif$

Бул жерде дагы бир мисал. индекс жазуусу түрүнө кошуп, ал эми, динамикалуу түзүлгөн беттер жөнүндө маалыматтарды талдоодо жок болсун:

Колдонуучу агент: Googlebot

Тыйуу: / *?

Бул жөнүндө, ошондой эле издөө системалары үчүн эрежелер менен берилет. Дагы бир нерсе, бул жөн гана бул META теги колдонуу үчүн кыйла ыңгайлуу болуп саналат. Ал эми Webmasters учурда издөө ишин жөнгө салуу сыяктуу стандартты колдонуу. Бирок, кийинки жылы бул талкуулоо болот.