Як пошукавыя сістэмы знаходзяць, скануюць і індэксуюць ваш змест?
Я не часта рэкамендую кліентам ствараць свае ўласныя сістэмы электроннай камерцыі або кіравання кантэнтам з-за нябачных магчымасцей пашырэння, неабходных у наш час - у першую чаргу сканцэнтраваных на пошукавай і сацыяльнай аптымізацыі. Я напісаў артыкул аб выбар CMS, і я па-ранейшаму паказваю гэта кампаніям, з якімі супрацоўнічаю, якія хочуць пабудаваць сваю сістэму кіравання кантэнтам.
Як працуюць пошукавыя машыны?
Пачнем з таго, як працуюць пошукавыя сістэмы. Вось выдатны агляд ад Google.
Аднак бываюць абсалютна сітуацыі, калі карыстацкая платформа з'яўляецца неабходнасцю. Калі гэта аптымальнае рашэнне, я па-ранейшаму падштурхоўваю сваіх кліентаў да стварэння неабходных функцый для аптымізацыі сваіх сайтаў для пошуку і сацыяльных сетак. Тры асноўныя функцыі з'яўляюцца неабходнасцю.
- robots.txt
- XML Sitemap
- метададзеныя
Што такое файл Robots.txt?
robots.txt файл - robots.txt файл - гэта звычайны тэкставы файл у каранёвым каталогу сайта, які паведамляе пошукавым сістэмам, што яны павінны ўключыць і што выключыць з вынікаў пошуку. У апошнія гады пошукавыя сістэмы таксама прасілі ўключыць у файл шлях да XML-карты сайта. Вось мой прыклад, які дазваляе ўсім ботам сканаваць мой сайт, а таксама накіроўвае іх да маёй XML-карты сайта:
User-agent: *
Sitemap: https://martech.zone/sitemap_index.xmlШто такое XML-карта сайта?
XML Sitemap - Падабаецца HTML прызначаны для прагляду ў браўзеры, XML напісаны для праграмнага засваення. Ан XML карта сайта - гэта табліца кожнай старонкі вашага сайта і час апошняга абнаўлення. Карты сайта ў фармаце XML таксама могуць быць злучаныя ў ланцужок... гэта значыць, адна карта сайта ў фармаце XML можа спасылацца на іншую. Гэта выдатна, калі вы хочаце лагічна арганізаваць і разбіць элементы вашага сайта (Пытанні і адказы, старонкі, прадукты і г.д.) у іх уласныя карты сайта.
Карты сайта важныя для таго, каб эфектыўна паведамляць пошукавым сістэмам, які кантэнт вы стварылі і калі ён апошні раз рэдагаваўся. Працэс пошукавай сістэмы пры пераходзе на ваш сайт неэфектыўны без укаранення карты сайта і фрагментаў.
Без XML-карты сайта, вы рызыкуеце, што вашы старонкі ніколі не будуць знойдзены. Што рабіць, калі ў вас ёсць новая мэтавая старонка прадукту, на якую няма ні ўнутраных, ні знешніх спасылак? Як Google выяўляе гэта? Што ж, пакуль на яго не будзе знойдзена спасылка, вас не выявяць. На шчасце, пошукавыя сістэмы дазваляюць сістэмам кіравання кантэнтам і платформам электроннай камерцыі раскласці для іх чырвоную дарожку!
- Google выяўляе знешнюю ці ўнутраную спасылку на ваш сайт.
- Google індэксуе старонку і ранжыруе яе ў адпаведнасці з яе зместам, а таксама зместам і якасцю сайта спасылкі.
З XML-картай сайта, вы не пакідаеце выяўленне або абнаўленне вашага кантэнту на волю выпадку! Занадта шмат распрацоўшчыкаў спрабуюць выкарыстоўваць цэтлікі, якія таксама шкодзяць ім. Яны публікуюць адзін і той жа пашыраны фрагмент па ўсім сайце, падаючы інфармацыю, якая не мае дачынення да інфармацыі на старонцы. Яны публікуюць карту сайта з аднолькавымі датамі на кожнай старонцы (або ўсе яны абнаўляюцца, калі адна старонка абнаўляецца), ствараючы чэргі пошукавым сістэмам, што яны падманваюць сістэму або ненадзейныя. Або яны ўвогуле не пінгуюць пошукавыя сістэмы... таму пошукавая сістэма не разумее, што была апублікаваная новая інфармацыя.
Што такое метаданыя? Мікрададзеныя? Багатыя фрагменты?
Багатыя фрагменты - гэта старанна пазначаныя мікраданыя схаваны ад прагляду, але бачны на старонцы для выкарыстання пошукавымі сістэмамі або сацыяльнымі сеткамі. Гэта вядома як метададзеныя. Google адпавядае Schema.org у якасці стандарту для ўключэння такіх рэчаў, як выявы, загалоўкі, апісанні і мноства іншых інфармацыйных фрагментаў, такіх як цана, колькасць, інфармацыя пра месцазнаходжанне, рэйтынгі і г. д. Схема значна палепшыць бачнасць вашай пошукавай сістэмы і верагоднасць таго, што карыстальнік пстрыкне.
Facebook выкарыстоўвае OpenGraph пратакол (вядома, яны не могуць быць аднолькавымі), X нават ёсць фрагмент для ўказання вашага профілю X. Усё больш і больш платформаў выкарыстоўваюць гэтыя метаданыя для папярэдняга прагляду ўбудаваных спасылак і іншай інфармацыі пры публікацыі.
Вашы вэб-старонкі маюць асноўнае значэнне, якое людзі разумеюць, чытаючы вэб-старонкі. Але пошукавыя сістэмы маюць абмежаванае разуменне таго, што абмяркоўваецца на гэтых старонках. Дадаўшы дадатковыя тэгі ў HTML вашых вэб-старонак - тэгі, якія кажуць: "Гэй, пошукавая машына, гэтая інфармацыя апісвае гэты канкрэтны фільм, альбо месца, альбо чалавека, альбо відэа" - вы можаце дапамагчы пошукавым сістэмам і іншым дадаткам лепш зразумець ваш змест і адлюстраваць яго карысным і адпаведным чынам. Мікрададзеныя - гэта набор тэгаў, уведзены разам з HTML5, які дазваляе вам гэта рабіць.
Schema.org, Што такое MicroData?
Зразумела, нічога з гэтага не патрабуецца ... але я настойліва рэкамендую іх. Напрыклад, калі вы дзеліцеся спасылкай на Facebook, а малюнак, загаловак ці апісанне не ўзнікае ... мала хто будзе зацікаўлены і на самай справе націсне. І калі вашыя фрагменты схемы адсутнічаюць на кожнай старонцы, вядома, вы ўсё яшчэ можаце з'яўляцца ў выніках пошуку ... але канкурэнты могуць перамагчы вас, калі ў іх будзе адлюстравана дадатковая інфармацыя.
Зарэгіструйце свае XML-карты сайта з дапамогай Search Console
Калі вы стварылі свой уласны кантэнт або платформу электроннай камерцыі, вельмі важна, каб у вас была падсістэма, якая пінгуе пошукавыя сістэмы, публікуе мікрададзеныя, а затым забяспечвае сапраўдную карту сайта XML для пошуку кантэнту або інфармацыі аб прадукце!
Пасля таго, як ваш файл robots.txt, карты сайта XML і пашыраныя фрагменты будуць настроены і аптымізаваны на ўсім сайце, не забудзьцеся зарэгістравацца для кожнай пошукавай сістэмы Пошук Кансоль (таксама вядомы як вэб-майстар інструмент), дзе вы можаце кантраляваць стан і бачнасць вашага сайта ў пошукавых сістэмах. Вы нават можаце пазначыць свой шлях да карты сайта, калі ніводнага няма ў спісе, і паглядзець, як пошукавая сістэма выкарыстоўвае яго, ці ёсць з ім якія-небудзь праблемы, і нават як іх выправіць.
Разгарніце чырвоную дарожку ў пошукавых сістэмах і сацыяльных сетках, і вы ўбачыце, што ваш сайт займае лепшы рэйтынг, вашыя запісы на старонках вынікаў пошукавых сістэм будуць націскаць больш, і вашы старонкі будуць больш распаўсюджвацца ў сацыяльных сетках. Усё складваецца!
Як Robots.txt, Sitemap і MetaData працуюць разам
Аб'яднанне ўсіх гэтых элементаў падобна на раскладванне чырвонай дарожкі для вашага сайта. Вось працэс сканавання, які выконвае бот, і тое, як пошукавая сістэма індэксуе ваш кантэнт.
- На вашым сайце ёсць файл robots.txt, які таксама спасылаецца на ваша месцазнаходжанне XML-карты сайта.
- Ваша CMS або сістэма электроннай камерцыі абнаўляе XML Sitemap любой старонкай і датай публікацыі або інфармацыяй аб даце рэдагавання.
- Ваша CMS або сістэма электроннай камерцыі пінгуюць пошукавыя сістэмы, каб паведаміць ім, што ваш сайт абноўлены. Вы можаце адправіць іх наўпрост ці выкарыстаць RPC і такі сэрвіс, як Ping-o-matic, каб адправіць іх ва ўсе ключавыя пошукавыя сістэмы.
- Пошукавая сістэма імгненна вяртаецца, паважае файл Robots.txt, знаходзіць новыя або абноўленыя старонкі праз карту сайта, а затым індэксуе старонку.
- Пры індэксацыі вашай старонкі яна выкарыстоўвае загаловак, метаапісанне, элементы HTML5, загалоўкі, выявы, альтэрнатыўныя тэгі і іншую інфармацыю, каб належным чынам праіндэксаваць старонку для адпаведнага пошуку.
- Пры індэксацыі вашай старонкі яна выкарыстоўвае загаловак, метаапісанне і мікрададзеныя багатых фрагментаў для паляпшэння старонкі вынікаў пошукавай сістэмы.
- Паколькі іншыя адпаведныя сайты спасылаюцца на ваш змест, ваш змест займае лепшае месца.
- Паколькі ваш змест абагульваецца ў сацыяльных сетках, указаная пашыраная інфармацыя можа дапамагчы правільна праглядзець ваш змест і накіраваць яго ў ваш сацыяльны профіль.
