1990-களின் மத்தியில் தேடுபொறிகளுக்காக வலைத்தலைமைகளும் (Webmasters), உள்ளடக்கத் தரவு வழங்குனர்களும் வலைத்தளங்களைத் துல்லியப்படுத்த ஆரம்பித்தார்கள், ஆரம்பகால தேடுபொறிகள் காலத்தின் அடிப்படையில் முன்னால் உருவாக்கப்பட்ட வலைத்தளங்களை முன்னால் பட்டியலிட்டு வந்தன. தொடக்கத்தில், ஒரு வலைத்தலைமையானது ஒரு பக்கத்தின் முகவரியை பல்வேறு தேடுபொறிகளுக்கும் அனுப்ப வேண்டியதிருந்தது, அவை அந்த பக்கத்தைப் பார்வையிடவும், அதிலிருந்து பிற பக்கங்களுக்கான இணைப்புகளைப் பிரித்தெடுக்கவும் ஒரு உளவியை (spider) அனுப்பின, மேலும் அந்த பக்கத்தை உள்ளடக்கத்தில் சேர்க்க அந்த பக்கத்தில் காணப்பட்ட தகவலை திருப்பி அனுப்பின. இந்தச் செயல்முறையில், ஒரு தேடுபொறியின் உளவியானது ஒரு பக்கத்தைப் பதிவிறக்கம் செய்து, தேடுபொறியின் சொந்த வழங்கியில் (server) சேமித்து வைக்க வேண்டிய அவசியத்தை ஏற்படுத்தி இருந்தது. மேலும் இவ்வாறு சேமித்து வைக்கப்படும் இடத்தில், உள்ளடக்க நிரல் (indexer) எனப்படும் மற்றொரு நிரல், இந்த பக்கத்தில் இருந்து பல்வேறு தகவல்களைப் பிரித்தெடுக்கும். அதாவது அதில் இருக்கும் வார்த்தைகளையும் இவை எங்கே இடம் பெற்றிருக்கின்றன என்ற தகவல்களையும் அத்துடன் குறிப்பிட்ட வார்த்தைக்கு வேறேதேனும் முக்கியத்துவம் உண்டா என்ற தகவல்கள், மற்றும் பிந்தைய தேதியில் பார்ப்பதற்காக ஒரு காலச்செயலாக்கியில் (scheduler) போடப்படும் அந்த பக்கத்தின் ஏனைய இணைப்புகள் போன்றவற்றைப் பிரித்தெடுத்துச் சேமித்து வைக்கும்.

வலைத்தள உரிமையாளர்கள் தங்களின் தளங்கள் உயர்ந்த மதிப்பீட்டையும், தேடுபொறிகள் அளிக்கும் முடிவுகளிலும் இடம் பெற வேண்டியதன் மதிப்பையும் உணரத் தொடங்கினார்கள், இது வெண்தொப்பி மற்றும் கருந்தொப்பித் தேடுபொறி உகப்பாக்கம் ஆகிய இரண்டு பயிற்சியாளர்களுக்கும் வாய்ப்பை உருவாக்கி அளித்தது. இத்தொழில் வல்லுனரான டேனி சுலிவன் கருத்துப்படி, "தேடல் பொறி உகப்பாக்கம்" என்ற இந்தச் சொல் 1997-ல் பயன்பாட்டிற்கு வந்தது.

தேடும் படிமுறைகளின் ஆரம்பகால பதிப்புகள், குறிச்சொல்லின் முதன்மை சொல், அல்லது ALIWEB போன்ற பொறிகளில் இருந்த உள்ளடக்க கோப்புகள் வலைத்தலைமை அளித்த தகவலின் அடிப்படையிலேயே அமைந்திருந்தன. முதன்மை சொல் ஒவ்வொரு பக்கத்தின் உள்ளடக்கத் தரவுக் குறித்தும் ஒரு வழிகாட்டுதலை வழங்கும். ஆனால் பக்கங்களைப் பட்டியலிட முதன்மை தரவைப் பயன்படுத்துவதில், நம்பகத்தன்மை குறைந்து காணப்பட்டது, ஏனென்றால் முதன்மை சொல்லில் இருக்கும் வலைதலைமையின் குறிச்சொற்கள் தேர்வு, வலைத்தளத்தில் இருக்கும் உள்ளடக்க தரவுடன் துல்லியமாக பொருந்துவதாக இருக்காது. முதன்மை சொற்களில் இருக்கும் துல்லியமில்லாத, முழுமையில்லாத, மற்றும் பொருத்தமில்லாத தரவானது, பக்கங்களை தேடுதலுக்கு ஒத்த வரிசைப்பாட்டில் (rank) கொண்டு வராது அல்லது கொண்டு வராமல் செய்ய கூடும். வலைத்தள உள்ளடக்கத் தரவு வழங்குனர்களும், தேடுபொறிகளின் வரிசைப்படுதலில் சிறந்த இடத்தைப் பிடிக்கும் முயற்சியில் ஒரு பக்கத்தில் இருக்கும் HTML மூலக்குறியீட்டு பண்புகளில் சூழ்ச்சி செய்தார்கள்.

ஒரு வலைதலைமையின் தனித்த கட்டுப்பாட்டில் இருக்கும் குறிச்சொற்களின் எண்ணிக்கை போன்ற நிறைய காரணிகளோடு சம்பந்தப்பட்டதால், ஆரம்பகால தேடுபொறிகள் பல்வேறு தவறான கையாளுகைகளாலும், வரிசைப்படுத்தல் (ranking) குழப்பங்களிலும் மாட்டி கொண்டிருந்தது. தங்களுடைய பயனர்களுக்கு சிறந்த முடிவுகளை அளிப்பதற்காக, கொள்கையில்லாத வலைத்தலைமைகளால் எண்ணிறைந்த குறிச்சொற்களுடன் வரும் பொருத்தமில்லாத பக்கங்களைக் காட்டாமல், மிகவும் பொருத்தமான தேடுதல் முடிவுகளே தங்கள் முடிவு பக்கங்களில் வரும் என்பதை உறுதிப்படுத்த வேண்டிய நிலைக்கு தேடுபொறிகள் தள்ளப்பட்டன. தேடுபொறிகள் அளிக்கும் முடிவுகள் தவறாக இருந்தால், பயனர்கள் வேறு தேடுதளங்களுக்கு சென்று விடுவார்கள் என்பதால், கொடுக்கப்பட்ட எந்த தேடுதலுக்கும் மிகவும் பொருத்தமான முடிவுகளைத் தருவதில் தான் ஒரு தேடுபொறியின் வெற்றியும் அதன் பிரபலத்தன்மையும் அடங்கி இருக்கிறது. இதனால் வலைத்தலைமைகளின் மோசடியை மிகவும் கடினமாக்கும் வேறுசில கூடுதல் காரணிகளைக் கணக்கில் எடுத்து, தேடுபொறிகள் மிகவும் சிக்கலான வரிசைப்படுத்தல் படிமுறைகளை (ranking algorithms) உருவாக்கின.

ஸ்டேன்போர்டு பல்கலைக்கழக பட்டதாரி மாணவர்களான லாரி பேஜ் மற்றும் சேர்ஜி பிரின் இருவரும் "பேக்ரப்" (backrub) என்பதை உருவாக்கினார்கள், இது வலைப்பக்கங்களின் முக்கியத்துவத்தின் அடிப்படையில் வரிசைப்படுத்தும் ஒரு கணித படிமுறை சார்ந்த தேடுபொறியாகும். பேஜ்தரம் (PageRank) என்ற படிமுறையால் கணக்கிடப்பட்ட எண்ணிக்கை, அவற்றில் இருக்கும் தொடுப்புகளின் (link) தரம் மற்றும் வலிமையின் செயல்பாட்டைப் பொறுத்திருக்கும். வலையகத்தில் மாறிமாறி உலாவி வரும் ஒரு வலை பயனரால் விரும்பப்படும் ஒரு பக்கத்தை இந்த பக்க வரிசைப்பாடு மதிப்பிடுகிறது, பிறகு ஒரு பக்கத்தில் இருந்து மற்றொரு பக்கத்திற்குத் திரிகளைத் தொடர்ந்து செல்கிறது. நடைமுறையில், ஒருசில திரிகள் மற்றவற்றைவிட வலுவாக இருக்கின்றன என்பதையும், பக்க வரிசைப்பாட்டில் முதன்மை பெற்ற பக்கம் வலை பயனரால் மாறிமாறி உலாவும் போது அப்பக்கம் அதிகளவில் எட்டப்பட்டிருந்தது என்பதையுமே இது குறித்தது.

பேஜ் மற்றும் பிரின் 1998-ல் கூகுளை உருவாக்கினார்கள். வளர்ந்து வந்த இணையப் பயனர்களிடையே கூகுள் பெரும் வரவேற்பைப் பெற்றது, இவர்கள் கூகுளின் எளிமையான வடிவமைப்பை விரும்பினார்கள். வலைப்பக்கத்தில் இருக்கும் காரணிகளை மட்டும் கருத்தில் கொண்டு தங்களின் வரிசைப்படுத்தல்களை அமைத்து கொண்டிருந்த தேடுபொறிகளில் இருந்த குழப்பங்களைத் தவிர்க்க கூகுள், வலைப்பக்கத்தில் இருக்கும் காரணிகளுடன் (குறிச்சொல்லின் பயன்பாட்டு எண்ணிக்கை, முதன்மை சொற்கள், தலைப்பு வாக்கியங்கள், இணைப்புகள் மற்றும் வலைத்தள வடிவமைப்பு போன்றவை) வலைப்பக்கத்தில் இல்லா காரணிகளையும் (பக்க வரிசைப்பாடு மற்றும் வலைத்தொடுப்பு பகுப்பாய்வு போன்றவை) சேர்த்து கொண்டது. பக்க வரிசைப்பாடு மிகவும் சிக்கலானது என்ற போதினும், வலைத்தலைமைகள் ஏற்கனவே தொடுப்பு உருவாக்கும் கருவிகளையும், Inktomi தேடுபொறியில் ஆதிக்கம் செலுத்தும் திட்டங்களையும் (schemes) உருவாக்கிவிட்டிருந்தார்கள், இந்த முறைகள் பக்க வரிசைப்பாட்டு விளையாட்டைப் போலவே அதனோடு பொருந்தி வந்தது. பல வலைத்தளங்கள் இணைப்புகளை வாங்குவதும், பரிமாறி கொள்வதும், விற்பதுமாக இருந்தன, அதுவும் இது பெரும் அளவில் அதிகமாக நடந்து கொண்டிருந்தது. இந்த திட்டங்கள் அல்லது தொடுப்பு தொகுப்புகளில் சில, முழுமையாக தொடுப்பு மோசடிக்காகவே ஆயிரக்கணக்கான வலைத்தளங்களை உருவாக்குவதில் ஈடுபட்டன.

2004 வாக்கில், தொடுப்பு மோசடிகளின் விளைவுகளைக் குறைப்பதற்காக தேடுபொறிகள் அவற்றின் வரிசைப்படுத்தல் படிமுறையில் பல்வேறு வெளியிடப்படாத காரணிகளை உள்ளடக்கி இருந்தன. 200-க்கும் மேற்பட்ட சமிக்ஞைகளைப் பயன்படுத்தி வலைத்தளங்களைப் பட்டியலிடுவதாக கூகுள் தெரிவிக்கிறது. கூகுள் மற்றும் யாகூ போன்ற முன்னணி தேடுபொறிகள், வலைப்பக்கங்களைப் பட்டியலிடுவதற்கு அவை பயன்படுத்தும் படிமுறைகளை வெளியிடுவதில்லை. ரேண்ட் பிஸ்கின், பேரி ஸ்கூவார்ட்ஜ், ஆரோன் வால் மற்றும் ஜில் வேலென் போன்ற பிற SEO-க்கள், தேடல் பொறி உகப்பாக்கத்திற்கான பல்வேறு அணுகுமுறைகளை ஆராய்ச்சி செய்திருக்கின்றன, அத்துடன் இணைய பேரவைகளிலும், வலைப்பதிவுகளிலும் அவற்றின் கருத்துக்களைப் பதிவு செய்திருக்கின்றன. SEO பயிற்சியாளர்களும் படிமுறைகளின் ஆழத்தைத் தெரிந்து கொள்வதற்காக பல்வேறு தேடுபொறிகள் கொண்டிருக்கும் காப்புரிமைகளை ஆய்வு செய்கின்றன.

2005-ல், கூகுள் ஒவ்வொரு பயனருக்கும் ஏற்ப தேடு முடிவுகளைப் பிரத்யேகப்படுத்த ஆரம்பித்தது. பயனர்களின் முந்தைய தேடல்களின் வரலாற்றை அடிப்படையாக கொண்டு, உள்நுழைந்திருக்கும் பயனருக்கான முடிவுகளை வரையறுத்தது. பிரத்யேக தேடுதல் வந்துவிட்டதன் காரணமாக "வரிசைப்படுத்தும் முறை செத்துவிட்டது" என்று 2008-ல் புரூஸ் கிளே தெரிவித்தார். ஒவ்வொரு பயனருக்கும், ஒவ்வொரு தேடலின் போதும் பட்டியிலில் ஒரு வலைத்தளத்தின் மதிப்பு வேறுவேறாக இருக்கும் என்பதால், ஒரு வலைத்தளம் எவ்வாறு பட்டியலிடப்படுகிறது என்று விவாதிப்பது அர்த்தமற்றது என்று அவர் தெரிவித்தார்.

பக்க வரிசைப்பாட்டைப் பரிமாறும் கட்டண தொடுப்புகளுக்கு எதிராக 2007-ல் கூகுள் ஓர் அறிவிப்பை வெளியிட்டது. தொடுப்புகளில் பின்தொடரகூடாப் பண்புகளைப் (nofollow attibute) பயன்படுத்தி, பக்க வரிசைப்பாடு வடிவமைப்பில் விளைவுகளைக் குறைக்க நடவடிக்கை எடுக்கப்பட்டிருப்பதாக 2009 ஜூன் 15-ல் கூகுள் அறிவித்தது. கூகுளின் பிரபல மென்பொருள் வல்லுனரான மேட் கட்ஸ், பக்க வரிசைப்பாடு வடிவமைப்பு செய்வதற்காக SEO-க்கள் பின்தொடரக்கூடா பண்பைப் பயன்படுத்துவதைத் தடுப்பதற்காக, கூகுள் போட் (Google Bot) இனி பின்தொடரப்படா தொடுப்புகளை (nofollowed links) அதே முறையில் கையாள போவதில்லை என்று அறிவித்தார். இந்த மாற்றத்தின் விளைவாக, பின்தொடரக்கூடா பண்பின் பயன்பாடு பக்க வரிசைப்பாட்டின் மறைவிற்கு இட்டு செல்கிறது. இதை தடுப்பதற்காக, SEO-க்கள் மாற்று நுட்பங்களை உருவாக்கினார்கள், அது பின்தொடரப்படாக் குறிச்சொற்களுக்கு (nofollowed tags) பதிலாக குழப்பும் ஜாவாஸ்கிரிப்டைப் பயன்படுத்தும், இதனால் பக்க வரிசைப்பாடு வடிவம் தொடர்ந்திருக்கும். இதுதவிர, iframes, ஃப்ளாஷ் மற்றும் ஜாவாஸ்கிரிப்ட் பயன்படுத்துவது உட்பட பல்வேறு தீர்வுகளும் பரிந்துரைக்கப்பட்டன.
தேடுபொறி முடிவுகளை மேலும் சிறப்பமைக்க தமது அனைத்து பயனர்களின் வலைத்தள தேடு வரலாற்றைப் பயன்படுத்தப் போவதாக டிசம்பர் 2009-ல் கூகுள் அறிவித்தது.

தேடுபொறி முடிவுகளில் குறுகிய காலத்தில், பொருத்தமானதைப் பெறச் செய்யும் ஒரு முயற்சியில் 2009-ன் பின்பகுதியில் கூகுள் நிகழ்நேரத் தேடல் அறிமுகப்படுத்தப்பட்டது. அனுபவம் வாய்ந்த வலைத்தள நிர்வாகிகள், தேடுபொறி பட்டியலில் ஒரு வலைத்தளத்தை முன்னிலைக்கு கொண்டு வர, பல மாதங்கள் அல்லது பல ஆண்டுகள் கூட துல்லியப்படுத்தலில் செலவிட்டார்கள். சமூக ஊடக வலைத்தளங்கள் மற்றும் வலைப்பதிவுகளின் பிரபலத்தன்மையின் வளர்ச்சியால், தேடுபொறி முடிவுகளுக்குள் புதிய உள்ளடக்க தரவுகளையும் விரைவாக பட்டியலிட செய்யும் வகையில் முன்னணி தேடுபொறிகள் தங்கள் படிமுறைகளில் மாற்றத்தை ஏற்படுத்தின. தேடுதலுக்கான இந்த புதிய அணுகுமுறை சமகாலத்திய, புதிய மற்றும் தனித்துவ உள்ளடக்க தரவுகளின் முக்கியத்துவத்தையும் முன்னிறுத்துகிறது.

தேடுபொறிகளுடனான தொடர்பு
நுட்பங்கள்
வரலாறு
வெண்தொப்பியும் கருந்தொப்பியும்