Google உங்கள் வலைத்தளத்தை சரியாகக் காணமுடியுமா?

அந்த கோப்பு எதுவாக இருக்கிறது

ஒவ்வொரு வலைத்தளத்திலும் robots.txt என்ற பெயரைக் கொண்ட ஒரு கோப்பு உள்ளது, அல்லது இருக்க வேண்டும். உங்கள் டோமைன் பெயரின் பின்னால் /robots.txt ஐ தட்டினால் நீங்கள் அதைக் கண்டறியலாம், எடுத்துக்காட்டாக uwbedrijf.nl/robots.txt. Google உங்கள் தளத்தைப் பார்ப்பதற்கு முன் இந்த கோப்பு முதல் வாசிப்பது. இது சாதாரண உரையில் உள்ளது மற்றும் தேடுபொறிகளுக்கு தளத்தின் எந்தப் பகுதிகளை அவை பார்க்கலாம் என்றும் பார்க்க முடியாது என்றும் சொல்கிறது.

நீங்கள் ஒரு கட்டடத்தின் நுழைவாசலில் உள்ள ஒரு பதாகை என்று ஒப்பிடலாம். சில கதவுகள் திறந்திருக்கின்றன, மற்றவை ஒரு எளிய குறிப்பு மூலம் மூடப்பட்டிருக்கின்றன. சிக்கல் என்னவென்றால் நிறுவனங்கள் சில நேரங்களில் தவறுதலாக தவறான குறிப்பைத் தொங்கவிடுகின்றன. ஒரு பிற்பகல் கதவை மூடுவதற்கு பதிலாக, அவர்கள் முக்கிய அறைகள் உட்பட வருகையாளர்களுக்கு முழு கட்டடத்தை மூடிவிடுகிறார்கள்.

பார்க்க அনுமதிக்கப்பட்ட மற்றும் அனுமதிக்கப்படாத பாதைகள் தவிர, இது மேலும் நுண்ணிய ஒன்றைப் பற்றிய விষயமாகும்: பக்கத்தை உருவாக்கும் கோப்புகள். CSS, ஃபார்மாட்டிங்கிற்கு பொறுப்பாக உள்ளது, மற்றும் JavaScript, பக்கத்தில் இயக்கம் மற்றும் ইন்டரঅ্যাக்ஷனுக்கு பொறுப்பாக உள்ளது என்று சிந்தனை செய்யுங்கள். robots.txt அந்த கோப்புகளைத் தடுக்கிறது என்றால், Google பக்கத்தை பார்க்கலாம், ஆனால் சரியாகப் பார்க்க முடியாது. இது உங்கள் தளத்தின் ஒரு வெற்று, உடைந்த பதிப்பைக் காணப்படுகிறது.

இது ஒரு பிற வளைவு புள்ளிக்கு நெருக்கமாக சম்பந்தப்பட்டுள்ளது: JavaScript இல்லாமல் உங்கள் மূல உள்ளடக்கம் அணுகக்கூடியதா, நாங்கள் அடிப்படை உள்ளடக்கம் JavaScript இல்லாமல் அணுகக்கூடியது என்பதை விளக்குவதுபோல். இரண்டு புள்ளிகளும் ஒரே கேள்விக்கு செல்கின்றன: Google உங்கள் பக்கத்தை ஒரு பார்வையாளர் பார்ப்பது போலவே பார்க்கலாம், அல்லது Google ஒரு முழுமையற்ற படத்தைப் பெறுகிறதா அது மோசமாக மதிப்பிடுகிறது.

இது ஒரு தொழில்நுட்ப விவரத்தை விட அதிகமாக ஏன் உள்ளது

Google ஒரு செயல்முறை பயன்படுத்துகிறது அதை வரைதல் என்று அழைக்கப்படுகிறது: தேடுபொறி அடிப்படையில் உங்கள் பக்கத்தை மீளமைக்கிறது, சரியாக ஒரு ব্राউசர் செய்கிறது, ஒரு பார்வையாளர் உண்மையில் சரியாக பார்ப்பது என்பதைப் பார்க்க. இது Google அனைத்து பகுதிகளுக்கு அனுமতி இல்லாமல் முடிந்ததாக முடியாது அதனுக்கு தேவை. CSS அல்லது JavaScript தடுக்கப்பட்டால், Google ஃபார்மாট்டிங் இல்லாமல், மெனு இல்லாமல், சில சமயங்களில் சரிசெய்யப்பட்ட உரை இல்லாமல் ஒரு வெற்று பக்கத்தைப் பார்க்கிறது.

முடிவு என்பது Google உங்கள் பக்கம் எதைப் பற்றி பிழையாக மதிப்பிடுகிறது. ஒரு பக்கம் பார்வையாளர்களுக்கு மாறுபாடாக மாறுபட்டது, Google க்கு நிறைவு அல்லது வெற்றுதல் மாறுபாட்டாக இருக்கலாம். இது ஒரு சிறு தர மாறுபாடான ஒரு கேள்வி அல்ல. இது மேலெ எடுக்கப்படாமல் ஒரு கேள்வி, நீங்கள் உள்ளடக்கமே சரியாக செய்யாத போது.

ஒரு பக்கம் இல்லாத மற்றும் ஒரு பக்கம் அணுகக்கூடியமற்ற செய்ய கூட்டு ஆனால் முடியாது ஒரு வேறுபாடு உள்ளது. இது நமது அளவு பட்டியல் மற்ற புள்ளிகளையும் தொடுகிறது, ஒரு நீக்கப்பட்ட பக்கம் சரியாக 404-நிலைத்தை பின்வரும் என்பது கேள்வி போல், 404-பக்கம் தன்னை சாதகமாக செய்கிறது என்பதை நாங்கள் விவாதிப்பது போல. இரு சந்தர্பங்களிலும் இது வெளிப்பாடு பற்றி: Google க்கு என்ன கண்டுபிடிக்கப்பட வேண்டும் மற்றும் என்ன வேண்டாம் என்பதை காட்டு.

நீங்கள் உங்களுக்கு சரியாக உள்ளதா என்பதைப் பரிசோதிக்கும் விதம்

உங்கள் டோமைன் பெயரைத் தொடர்ந்து /robots.txt உங்கள் ব்ரவுசரின் முகவரி பட்டையில் தட்டுங்கள். ஒரு எளிய விதிகளின் பட்டியல் தோன்றும், பொதுவாக 'Disallow' பின்பற்றப்பட்ட ஒரு பாதை. Disallow என்பது: இந்த பாதை பார்க்க முடியாது. நீங்கள் எதிர்பார்க்கவில்லாத ஒன்று, ஒரு வெட்ட பட்டம் மாத்திரம் என்பது முழு தளம் மூடப்பட்டுள்ளது என்ற பொருள் என்ற ஒன்று உள்ளதா என்பதை பார்க்கவும்.

/wp-content/, /assets/, /css/ அல்லது /js/ போன்ற பெயர்களுடன் ஆஃபர்களைக் குறிப்பிடும் விதிகளைக் கவனிக்கவும். இவை பெரும்பாலும் சரியாக உங்கள் தளத்தின் ஃபார்மாट்டிங் மற்றும் ইন்டারঅ்যாக්ஷன் இல்லாத ஆஃபர்களாக இருக்கின்றன. அவை தடுக்கப்பட்டால், Google உங்கள் பக்கங்களை சரியாக பறிக்க முடியாமல் இருப்பதற்கான ஒரு நல்ல வாய்ப்பு உள்ளது, கோப்பு மீதமுள்ளவை தெளிவாகக் குற்றவுணர்ச்சிக்குரியது என்று தோன்றினாலும்.

Google Search Console, வலைத்தள உரிமையாளர்களுக்கான Google இலிருந்து ஒரு இலவச சேவை, ஒரு சோதனை ஏற்கனவே உள்ளது அதனுடன் நீங்கள் ஒரு குறிப்பிட்ட பக்கத்தை வரையறை சிக்கல்களைக் கட்டுப்படுத்தலாம். Google உங்கள் பக்கம் எவ்வாறு உணர்கிறது என்பதன் ஒரு உதாரணம் நீங்கள் பார்க்கிறீர்கள். அது உங்கள் ব்ரவுசரில் பக்கம் மாறுபாடாக தோன்றுவதற்கே எதிரே வெற்றுதல் அல்லது உடைந்த தெரிந்தால், இது CSS, JavaScript அல்லது படங்களை பெறும் போது ஏதாவது சரியாக செய்கிறது என்பது ஒரு தெளிவான சமிக்ஞை உள்ளது.

உங்களுக்கு சந்தேகம் இருந்தால், ஒரு குறிப்பிட்ட பாதை வேண்டுமென்றே விலக்கப்பட்டுள்ளதா அல்லது தற்செயலாக விலக்கப்பட்டுள்ளதா, உங்கள் இணையதளத்தை கட்டியவரிடம் ஆலோசனை செய்யவும். சில தடை விலக்குகள் வேண்டுமென்றே செய்யப்பட்டவை மற்றும் புத்திசாலிகள், உதாரணமாக ஒரு உள் தேடல் முடிவு மூடப்படுவது, இது உள் தேடல் முடிவு பக்கங்களில் noindex பற்றி தனித்து விளக்கப்படுகிறது. மற்ற தடை விலக்குகள் ஒரு தரநிலை அமைப்பிலிருந்து வெறுமனே பிழைகள், இது ஒருபோதும் சரிபார்க்கப்படவில்லை.

இது சரியில்லாவிட்டால் என்ன செலவாகும்

robots.txt முக்கியமான பாதைகளை தடை செய்தால், நீங்கள் Google க்கு உங்கள் தளத்தின் பகுதிகளை தெரியாமலே மூடுகிறீர்கள். இவை பொருள் பக்கங்கள், வலைப்பதிவு கட்டுரைகள், அல்லது ஒரு புதிய முறைமைக்கு இடம் மாற்றிய பிறகு முழு தளம் கூட இருக்கலாம். இது எதிர்பார்ப்பை விட அடிக்கடி நிகழ்கிறது, குறிப்பாக ஒரு இணையதள புதுப்பிப்பிற்குப் பிறகு, இதில் சோதனை சூழ்நிலைக்கான ஒரு அமைப்பு தற்செயலாக உண்மையான தளத்தில் நிற்கிறது.

தந்திரமான விஷயம் என்னவென்றால், உங்கள் தளத்தின் தினசரி பயன்பாட்டில் நீங்கள் அதைக் கவனிப்பது இல்லை. பக்கங்கள் வெறுமனே ஏற்றப்படுகின்றன, நேரடியாக இணைப்பைப் பெறும் வருந்தக்குறியோ இன்னும் அங்கே வரலாம். தேடல் பொறிகளிலிருந்து ট்রাஃபிக் மட்டுமே ধीராக உலர்ந்துவிடுகிறது, தெளிவான காரணம் இல்லை. பல முன்னணி பணியாளர்கள் பின்னர் உள்ளடக்கம் அல்லது போட்டியில் காரணத்தை தேடுகிறார்கள், அதே சமயம் சிக்கல் ஒரு தொழில்நுட்ப கோப்பில் இருக்கிறது, அவர்கள் ஒருபோதும் திறந்தவில்லை.

CSS மற்றும் JavaScript மட்டும் தடை செய்யப்பட்ட போது, விளைவு நுட்பமானது ஆனால் குறைந்த ক্ষতিகரமாக இல்லை. உங்கள் பக்கங்கள் கண்டுபிடிக்கப்படக்கூடியவை உள்ளன, ஆனால் Google அவற்றை ஒரு முழுமையற்ற படத்தின் அடிப்படையில் மதிப்பாய்வு செய்கிறது. ஒரு ஸ்கிரிப்ட்டால் ஏற்றப்பட்ட உரை பின்னர் கணக்கில் வாய்ப்பு இல்லை. ஒரு பக்கம் உங்களுக்கு நன்றாக தோன்றுகிறது, Google வல்லுனர்களால் ஏழை உள்ளடக்கமாக மதிப்பாய்வு செய்யப்படுகிறது, உங்கள் தேடல் முடிவுகளில் அதன் நிலையின் அனைத்து விளைவுகள் உடன்.

தீர்க்கமானவை வழக்கமாக மাসங்களின் வேலையின் விஷயம் அல்ல. பெரும்பாலும் இது ஒரு கோப்பில் சில வரிகளை சரிசெய்வதைப் பற்றியது. கருத்து என்னவென்றால், நீங்கள் முதலில் சிக்கலை அங்கீகரிக்க வேண்டும். சரிபார்ப்பு இல்லாமல், ஒரு தடை சில சமயங்களில் ஆண்டுகள் கண்ணுக்கு தெரியாது, வெறுமனே ஏனெனில் தளம் கடைசிமுறை சரிசெய்யப்பட்ட பிறகு யாரும் அதற்கு பார்க்கவில்லை.

இதை சரிசெய்ய பெறுவது என்ன

தொடக்க புள்ளி எளிது: robots.txt பாதை விலக்க வேண்டும் பாதை நீங்கள் வேண்டுமென்றே விலக்க விரும்புகிறீர்கள், ஒரு ஆட்சேரின் உள்நுழைவு பக்கம் அல்லது ஒரு சாப்பிடும் வண்டி போன்ற, இது ஒருபோதும் தேடல் முடிவுகளில் தோன்ற வேண்டாம். அனைத்து பக்கம் எப்படி தோன்றுகிறது அல்லது செயல்படுகிறது எனக்கு பங்களிக்கிறது, அணுகலுக்கு கிடைக்கிறது. இது இந்த கட்டுப்பாட்டு புள்ளির பின்னணி: எல்லாவற்றையும் முன்னெச்சரிக்கையாக செய்ய வேண்டாம், ஆனால் தேர்ந்தெடுக்கப்பட்ட முறையில் அட்டை செய்யுங்கள் அவசியம்.

ஒரு தள அல்லது பொருள்தோன்றுவதைத் தொடங்கிய உள்ள தளத்தை கட்டுவதாக இந்த கோப்பு கூறு. அந்த பேக்கேஜ், ஒரு செயலான ஒன்றுக்கொன்று ஒரு பக்க வகையை ஒரு யோசிக்கப்பட்ட மசாலா, அமைப்பு கிடைப்பவ Google மற்றும் கண்டுபிடிக்க யாருக்கு சாதாரணமாக வேண்டாம் வரைபடம் என்ன ஒன்று இல்லை, ஒரு பக்கம் வகை வரைபடம் நாம் விளக்க உள்ளடக்கம் அதை பாதை கட்ட மற்றும் பக்கம் பயன்பாட்டில் முடிவுகள். Robots.txt பின்னர் பாதை நேர்திசை கட்டை மூலம் சாধனம் அல்ல செய்ய இந்த தெரிவுகளை மார்பு ஏறும்.

தளம் கட்ட பிறகு இந்த கோப்பு சரிபார்க்க வேண்டாம், ஆனால் நீங்கள் பெரிய மாற்றம் பிறகும். ஒரு மாற்ற கோப்பு பயனுட்டம், ஒரு புதிய இணையதள பயனுட்டம், அல்லது ஒரு பুনர்நிர்ణயம் தளம். இந்த முறை வெறுமனே கணம் மாறி நீங்கள் உள்ளிடப்பட்ட முந்தைய ஒரு சோதனை சூழ்நிலையிலிருந்து செட் சேர்க்க. ஒரு சுருக்கமான மூல்யாங்கன் பিறகு பாதை ஒரு நேரம்தात் அமைப்பு எழுமாறு.

யாதும் நினைவு வைக்கவும் robots.txt ஒரு உபாய வேற்று மின் நின்றுக்கு. இது நெருங்கிய தொட்டுக்கொண்டிருக்கிறது கணம் அங்கு நீங்கள் Google வழங்குகின்றன, ஒரு இறுக்கம் பக்கம் அளவு ஒரு noindex ট்যাக், குறிப்பு மேலெ noindex உள்ளடக்க meta உபாயங்கள் அல்லது X-Robots-Tag. நீங்கள் இரண்டும் இல்லை பாவி தங்கள் வேற்று மூல். ஒரு பக்கம் நீங்கள் தெரிவு நேர்திசை ஒரு கட்ட நிறுத்த செய்ய வேண்டாம் மற்றும் கருவிக்கான தொடக்க நிறுத்த.