Google ஒரு பக்கத்தின் குறியீட்டைச் சரிபார்த்தல்: தேடல் முடிவுகளில் URL உள்ளதா, மற்றும் அது ஏன் அங்கு இல்லை?

சுருக்கமான பதில்: Google ஒரு பக்கத்தின் குறியீட்டைச் சரிபார்க்க, அதன் முகவரியை புரோமோபைலட்டின் பக்க குறியீட்டு சரிபார்ப்புக் கருவியில் (PromoPilot's Page Indexing Checker) ஒட்டவும். இந்தக் கருவி Google ஒரு உண்மையான தளக் கோரிக்கையை (real site: request) மேற்கொண்டு, அந்த URL குறியிடப்பட்டுள்ளதா என்பதை உங்களுக்குத் தெரிவிக்கும். இல்லையெனில், அது மெட்டா ரோபோட்ஸ் மற்றும் எக்ஸ்-ரோபோட்ஸ் குறிச்சொற்கள் (meta robots and X-Robots tags), அனுமதிக்கப்படாத robots.txt, மற்றொரு URL-க்கான நியமனமாக்கல் (canonicalization to another URL), அல்லது விடுபட்ட sitemap.xml உள்ளிட்ட ஏதேனும் சிக்கல்களைச் சரிபார்க்கும். பின்னர் அது காரணங்கள் மற்றும் சாத்தியமான தீர்வுகளுடன் ஒரு தீர்ப்பை வழங்கும். இது இலவசமானது மற்றும் பதிவு தேவையில்லை. தீர்ப்பை எவ்வாறு படிப்பது மற்றும் ஒவ்வொரு சிக்கலுக்கும் என்ன செய்வது என்பது கீழே கொடுக்கப்பட்டுள்ளது.

"இந்தப் பக்கம் ஒரு மாதத்திற்கு முன்பு வெளியிடப்பட்டது, ஆனால் அது Google இல்லை" என்பது நான் அடிக்கடி பெறும் கேள்வியாகும். பெரும்பாலான நேரங்களில், உருவாக்கப் பணியின்போது மறக்கப்பட்ட noindex தான் இதற்குக் காரணமாக இருக்கிறது.

பக்க அட்டவணைப்படுத்தல் எதைச் சரிபார்க்கிறது?

இந்தக் கருவி இரண்டு விஷயங்களை ஒருங்கிணைக்கிறது: ஒரு உண்மை (அந்தப் பக்கம் தற்போது Google உள்ளதா என்பது) மற்றும் ஒரு கணிப்பு (கொள்கையளவில் அது அங்கு இடம்பெற முடியுமா என்பது).

ஒரு பக்கம் Google குறியிடப்பட்டுள்ளதா என்பதை எவ்வாறு சரிபார்ப்பது?

1. திறந்த பக்க அட்டவணைப்படுத்தல் சரிபார்ப்பி.
2. நெறிமுறையையும் சேர்த்து, உலாவியில் தோன்றுவது போலவே முழுப் பக்க முகவரியையும் ஒட்டவும்: https://example.com/new-page.
3. "குறியீட்டைச் சரிபார்க்கவும்" என்பதைக் கிளிக் செய்து, Google காரணிகளை வினவி பகுப்பாய்வு செய்யும் வரை காத்திருக்கவும்.
4. "குறியீட்டில் உள்ளது" அல்லது "குறியீட்டில் இல்லை" என்ற தீர்ப்பையும், கண்டறியப்பட்ட தொகுதிகளின் பட்டியலையும் படிக்கவும்.
5. காரணத்தை நீக்கிவிட்டு, சில நாட்கள் கழித்து மீண்டும் சரிபார்க்கவும்.

கருவிப் பக்கம் இப்படித்தான் காட்சியளிக்கும்: ஒரு முகவரிப் புலம், இன்றைய இலவசச் சோதனைகளின் எண்ணிக்கைக் காட்டி, மற்றும் பகுப்பாய்வு செய்யப்படும் விஷயங்களின் பட்டியல்.

உதாரணத் தீர்ப்பு: https://example.com/new-page என்ற பக்கம் அட்டவணைப்படுத்தப்படுவதிலிருந்து தடுக்கப்பட்டுள்ளது, ஏனெனில் அதன் குறியீட்டில் ஒரு மெட்டா நோஇன்டெக்ஸ் (meta noindex) உள்ளது, மேலும் முதன்மை URL (canonical URL) வேறொரு URL-ஐச் சுட்டிக்காட்டுகிறது. ஒரே நேரத்தில் இரண்டு காரணங்கள், மேலும் இரண்டுமே வார்ப்புருவில் (template) உள்ளன.

பக்கம் ஏன் அட்டவணைப்படுத்தப்படவில்லை, நான் முதலில் எதைச் சரிசெய்ய வேண்டும்?

காரணங்களை, நேரடித் தடைகளிலிருந்து மென்மையான தடைகள் வரை இந்த வரிசைப்படி கருத்தில் கொள்ளுங்கள்.

1. மெட்டா ரோபோட்ஸ் அல்லது எக்ஸ்-ரோபோட்ஸ்-டேக்கில் உள்ள நோஇன்டெக்ஸ் (Noindex) என்பதை நீக்கவும். இது ஒரு பொதுவான நிலை: உருவாக்கத்தின் போது, CMS-இல் "தளத்தைத் தேடுபொறிகளிலிருந்து மறை" என்ற விருப்பம் இயக்கப்பட்டு, பின்னர் அதை முடக்க மறந்துவிடலாம். எக்ஸ்-ரோபோட்ஸ்-டேக்கைப் பொறுத்தவரை, உங்கள் சர்வர் அமைப்புகள், CDN அல்லது SEO பிளகினைச் சரிபார்க்கவும்.
2. robots.txt-இல் 'Disallow' எனக் குறிக்கவும். Disallow: /blog/ போன்ற ஒரு விதி, முழுப் பகுதியையும் மூடிவிடும். ஒரு நுணுக்கம்: robots.txt-இல் ஒரு பக்கம் மூடப்பட்டிருந்தால், அதில் உள்ள 'noindex'-ஐ Google படிக்க முடியாது. எனவே, அதை இன்டெக்ஸிலிருந்து நீக்க, திறந்த robots.txt மற்றும் 'noindex' தேவைப்படும்; அதை இன்டெக்ஸ் செய்ய, 'Disallow' குறிச்சொல்லை நீக்கினால் மட்டும் போதும்.
3. கேனானிக்கல் வேறு ஒரு முகவரிக்குச் செல்கிறது. பக்கம் தனித்துவமானது என்றால், கேனானிக்கல் அந்தப் பக்கத்தையே சுட்டிக்காட்ட வேண்டும். இந்தப் பிழை பெரும்பாலும் டெம்ப்ளேட்டில்தான் உள்ளது: அதாவது, அனைத்துத் தயாரிப்புகளுக்கும் வகைக்கான கேனானிக்கல் இருப்பதும், அனைத்துக் கட்டுரைகளுக்கும் வலைப்பதிவின் முகப்புப் பக்கத்திற்கான கேனானிக்கல் இருப்பதும் தான் காரணம்.
4. இது தளவரைபடத்தில் (sitemap) இல்லை, மேலும் இதற்கு இணைப்புகளும் இல்லை. இது Google தெரியாத ஒரு தனித்த பக்கம். இதை உங்கள் sitemap.xml கோப்பில் சேர்த்து, ஏற்கனவே அட்டவணைப்படுத்தப்பட்ட பக்கங்களான மெனு, பிரிவுகள் மற்றும் தொடர்புடைய கட்டுரைகளிலிருந்து இணைப்புகளைச் சேர்க்கவும்.
5. எல்லாம் திறந்திருந்தாலும், அந்தப் பக்கம் இல்லை. இதன் பொருள், Google அதைப் பார்த்தும், பொதுவாக உள்ளடக்கம் குறைவாக இருப்பதாலோ அல்லது நகல் உள்ளடக்கமாக இருப்பதாலோ, அதைச் சேர்க்க வேண்டாம் என முடிவு செய்துள்ளது. பக்கத்தையே மேம்படுத்தினால் மட்டுமே இதற்கு உதவ முடியும்.

ஒரு பிளாக்கை நீங்களே விரைவாகக் கண்டுபிடிப்பது எப்படி. பக்கத்தைத் திறந்து, Ctrl+U ஐ அழுத்தி, கோடில் உள்ள noindex மற்றும் canonical என்பதைத் தேடுங்கள். X-Robots-Tag ஹெடர், பிரவுசரின் டெவலப்பர் டூல்ஸில் தெரியும் (Network tab → Document response → Headers). ваш-домен/robots.txt இல் உள்ள robots.txt கோப்பைத் திறந்து, பக்கத்தின் முகவரியின் தொடக்கத்துடன் பொருந்தும் Disallow விதிகளைக் கண்டறியவும். இந்தக் கருவி இவை அனைத்தையும் உங்களுக்காகச் செய்கிறது, ஆனால் எங்கே தேடுவது என்று தெரிந்து வைத்திருப்பது உதவியாக இருக்கும்: திருத்தம் உண்மையில் செயல்படுத்தப்பட்டதா என்பதைச் சரிபார்ப்பதை இது எளிதாக்குகிறது.

அளவுருக்கள் மற்றும் வடிப்பான்களைக் கொண்ட பக்கங்கள் ஒரு சிறப்பு வகையாகும்: ?sort=price, ?color=red, UTM குறிச்சொற்கள். இவை பொதுவாக அட்டவணைப்படுத்தப்பட வேண்டியதில்லை; முதன்மைப் பதிப்பிற்கு முதன்மை இணைப்பு இருப்பது சிறந்தது. நீங்கள் அத்தகைய URL-ஐச் சரிபார்த்து, அந்தப் பிரிவிற்கு முதன்மை இணைப்புடன் "அட்டவணைப்படுத்தப்படவில்லை" என்று கண்டால், அனைத்தும் திட்டமிட்டபடி செயல்படுகின்றன என்று பொருள்.

தொழில்நுட்பச் சிக்கல்கள் தீர்க்கப்பட்டவுடன், நீங்கள் செயல்முறையை விரைவுபடுத்தலாம்: தேடல் கன்சோலில் (Search Console) உள்ள URL ஆய்வு கருவியைப் பயன்படுத்தி, உங்கள் சரிபார்க்கப்பட்ட தளத்தின் URL-ஐ மறு அட்டவணைப்படுத்தலுக்காகச் சமர்ப்பிக்கவும். இருப்பினும், இது ஒரு கோரிக்கையே தவிர, உத்தரவாதமல்ல: புதிய பக்கங்கள் அட்டவணைப்படுத்தப்படுவதற்குப் பல நாட்கள் முதல் பல வாரங்கள் வரை ஆகலாம்.

ஒப்பீடு: ப்ரோமோபைலட் பக்க அட்டவணைப்படுத்தல் சரிபார்ப்பு மற்றும் மாற்று வழிகள்

முடிவுரை: சர்ச் கன்சோல் (Search Console) உங்கள் வலைத்தளத்திற்கான ஒரு அளவுகோலாகும், ஆனால் அதை அணுகும் வசதி உங்களுக்குத் தேவை. அணுகல் கிடைக்காத சமயங்களில் (உதாரணமாக, ஒரு வாடிக்கையாளரின் தளம், பழைய திட்டம் அல்லது போட்டியாளரின் பக்கம்) அல்லது ஏதேனும் தொழில்நுட்பத் தடை உள்ளதா என்பதை நீங்கள் விரைவாகக் கண்டறிய வேண்டியிருக்கும் போது, ஆன்லைன் சரிபார்ப்பு வசதியாக இருக்கும்.

புரோமோபைலட்டில் மேலும் 87 இலவச SEO கருவிகள் உள்ளன. நீங்கள் ஒரு பக்கத்தை மட்டும் கேட்காமல், உங்கள் முழு வலைத்தளத்தைப் பற்றியும் கேட்கிறீர்கள் என்றால்— Google அந்த டொமைன் எத்தனை பக்கங்களில் தரவரிசைப்படுத்தப்பட்டுள்ளது மற்றும் தளவரைபடத்தில் (sitemap) அது எத்தனை சதவீதத்தில் தரவரிசைப்படுத்தப்பட்டுள்ளது என்பது பற்றி—அதற்கென ஒரு தனி தள அட்டவணைப்படுத்தல் சரிபார்ப்பு உள்ளது, அது இந்தப் பிரிவின் அடுத்த கட்டுரையில் விவரிக்கப்பட்டுள்ளது. robots.txt பகுப்பாய்வி, robots.txt விதிகளைப் புரிந்துகொள்ள உங்களுக்கு உதவுகிறது.

பக்க அட்டவணைப்படுத்தல் சரிபார்ப்பின் வரம்புகள் யாவை?

இந்தக் கருவி பொது சமிக்ஞைகளைப் பயன்படுத்துகிறது மற்றும் தேடல் கன்சோலில் உள்ள URL ஆய்வு கருவியின் தரவை மாற்றுவதில்லை: தளத்தின் உரிமையாளர் மட்டுமே Google விலக்கத்திற்கான சரியான நிலை மற்றும் காரணங்களைக் காண முடியும்.

DDoS பாதுகாப்பு, CAPTCHA மற்றும் வேகக் கட்டுப்பாடு போன்ற தற்காலிக பாட் தடைகள் துல்லியத்தன்மையைப் பாதிக்கலாம்: கருவி ஒரு பக்கத்தைத் திறக்கத் தவறினால், மெட்டா ரோபோட்களும் முதன்மை முடிவுகளும் முழுமையடையாமல் இருக்கும். மேலும், ஒரு சமீபத்திய பக்கம் ஏற்கனவே அட்டவணைப்படுத்தப்பட்டிருக்கலாம், ஆனால் ஒரு 'site:' வினவல் அதை உடனடியாகக் காட்டாது. முடிவு "அட்டவணைப்படுத்தப்படவில்லை" என்று இருந்து, தடைகள் எதுவும் இல்லை என்றால், ஓரிரு நாட்களில் மீண்டும் சரிபார்க்கவும்.

இறுதியாக, இந்தக் கருவி பக்கத்தை வெளியிலிருந்து சரிபார்க்கிறது, மேலும் Google அதன் தரத்தை எவ்வாறு மதிப்பிட்டுள்ளது என்பது அதற்குத் தெரியாது. "ஊர்ந்து செல்லப்பட்டது, ஆனால் இன்னும் அட்டவணைப்படுத்தப்படவில்லை" என்ற நிலை, தேடல் கன்சோலில் மட்டுமே தெரியும்—மேலும் இது குறியீட்டின் மூலம் அல்ல, மாறாக பக்கத்தின் உள்ளடக்கத்தின் மூலமே கையாளப்படுகிறது.

ஒரு இலவசக் கருவி எப்போது போதுமானதாக இருக்காது?

noindex-ஐ மறந்துவிட்ட ஒரு பக்கத்தைச் சரிசெய்ய ஐந்து நிமிட வேலைதான் ஆகும். ஆனால், விஷயங்கள் இதைவிடச் சிக்கலானவையாகவும் இருக்கலாம். பின்வரும் சூழ்நிலைகளில் உங்களுக்கு ஒரு நிபுணர் தேவை:

• பல்வேறு பக்கங்களுக்கு அட்டவணை இடப்படவில்லை, மேலும் வெளிப்படையான தடைகள் எதுவும் இல்லை;
• canonical, noindex அல்லது robots.txt போன்றவை ஒரு செருகுநிரல் அல்லது வார்ப்புருவால் உருவாக்கப்பட்டு, திருத்திய பிறகு "திருப்பித் தரப்படுகின்றன";
• இடம் மாறிய பிறகு, பக்கங்கள் அட்டவணையிலிருந்து அகற்றப்பட்டுவிட்டன, மேலும் புதிய பக்கங்கள் தோன்றுவதில்லை;
• அட்டவணையில் பக்கங்கள் இருந்தாலும், Google வேறொரு முகவரியை முதன்மை முகவரியாகத் தேர்ந்தெடுக்கிறது.

உங்கள் வலைத்தளத்திற்கு நான் என்ன செய்ய முடியும்?

என் பெயர் வலேரி டான்யுக், நான் 12 வருட அனுபவமும் 200க்கும் மேற்பட்ட வாடிக்கையாளர்களும் கொண்ட ஒரு டெவலப்பர் மற்றும் SEO நிபுணர். மக்கள் என்னிடம் வருவதற்கான பொதுவான காரணங்களில் ஒன்று இன்டெக்சிங் சிக்கல்கள்.

SEO மற்றும் விளம்பரம்

• முழுமையான SEO தணிக்கை: பக்கங்கள் ஏன் அட்டவணைப்படுத்தப்படவில்லை என்பதைக் கண்டறிந்து, டெம்ப்ளேட்கள், robots.txt, canonical மற்றும் sitemap ஆகியவற்றைச் சரிசெய்கிறேன்.
• உடனடியாக அட்டவணைப்படுத்தப்படும் உள்ளடக்கம்: செயற்கை நுண்ணறிவு முகவர்களால் இயக்கப்படும் ஒரு தானியங்கு வலைப்பதிவு, சரியான குறியீடுகள் மற்றும் தளவரைபடங்களுடன் கட்டுரைகளை வெளியிடுகிறது.
• மொழிப் பதிப்புகளை அட்டவணைப்படுத்துதல் - மொழிபெயர்ப்பாளர் இல்லாமல் ஒரு பன்மொழித் தளத்தை உருவாக்குவது எப்படி என்பது குறித்த ஒரு பகுப்பாய்வில்.

வலைத்தளங்கள் மற்றும் ஆன்லைன் கடைகள்

• ஒரே இரவில் அறிமுகப்படுத்தப்பட்ட ஒரு புதிய தயாரிப்புக்கான முகப்புப் பக்கம் — முதல் நிமிடத்திலிருந்தே தேடுபொறியில் தேடக் கிடைக்கிறது.
• 1001site இல் நிமிடங்களில் உங்களுக்குப் பிடித்தமான இணையதளத்தின் பாணியில் ஒரு வலைத்தளத்தைப் பெறுங்கள்: சர்வர் ரெண்டரிங், சைட்மேப் மற்றும் மார்க்அப் ஆகியவை தானாகவே கட்டமைக்கப்படுகின்றன.
• Google கண்டறிந்த கார்டுகளைப் பயன்படுத்தி , Instagram இருந்து ஒரு கடைக்கு வலைத்தளத்திற்கு மாற்றுதல்.

CRM, கணக்கியல் மற்றும் தானியங்குமயமாக்கல்

• ERP + இணையதளம் + செயற்கை நுண்ணறிவு மூலம் இயங்கும் Telegram பாட் கொண்டு 6 நாட்களில் தானாகவே அகற்றுதல்.

Google பட்டியலிடப்படாத ஒரு பக்கத்தின் முகவரியை Telegram எனக்கு அனுப்புங்கள் - காரணத்தை எங்கே தேடுவது என்று நான் உங்களுக்குச் சொல்கிறேன்.

முடிவு

1. ஒரு பக்கத்தின் குறியீட்டு நிலையைச் சரிபார்ப்பது இரண்டு கேள்விகளுக்குப் பதிலளிக்கிறது: அந்த இணைய முகவரி (URL) Google உள்ளதா என்பதும், அது அங்கு இடம்பெறுவதைத் தடுப்பது எது என்பதும் ஆகும்.
2. நிகழ்வு வாரியான காரணங்கள்: noindex (குறியீட்டில் அல்லது தலைப்பில்), robots.txt, வேறொருவரின் முகவரிக்குத் தற்சார்பாக இருத்தல், தளவரைபடம் மற்றும் இணைப்புகள் இல்லாத அனாதைப் பக்கம்.
3. அதைச் சரிசெய்த பிறகு, தேடல் கன்சோலில் (Search Console) மறு அட்டவணைப்படுத்தலுக்காக URL-ஐச் சமர்ப்பித்து, சில நாட்களில் மீண்டும் சரிபார்க்கவும்.
4. பல பக்கங்கள் அட்டவணைப்படுத்தப்படவில்லை என்றால், ஒரு தணிக்கை தேவைப்படுகிறது, மேலும் சிக்கலான வார்ப்புருக்களைக் கொண்ட ஒரு பழைய தளத்தை 1001site இல் மீண்டும் உருவாக்குவது சில நேரங்களில் எளிதாக இருக்கும்.

தேடல் முடிவுகளிலிருந்து 'மறைந்துவிட்ட' பக்கத்தைச் சரிபார்க்கவும் — அதற்கான காரணத்துடன் கூடிய முடிவு ஒரு நிமிடத்திற்கும் குறைவான நேரத்தில் தோன்றும்.

ஆதாரங்கள்

• புரோமோபைலட்டின் "பக்க அட்டவணைப்படுத்தல் சரிபார்ப்பு" கருவிப் பக்கம் — சரிபார்ப்புகளின் பட்டியல், எடுத்துக்காட்டு மற்றும் வரம்புகள்.
• Google தேடல் கன்சோல் உதவி - URL ஆய்வு கருவி.
• Google சர்ச் சென்ட்ரல் - noindex மூலம் குறியீடாக்கத்தைத் தடுக்கவும்.
• Google தேடல் மையம் - செம்மையான URL-கள் மற்றும் நகல் பக்கங்கள்.