Coś, co zawładnęło praktycznie rzeczywistością życia codziennego, nowoczesna wyszukiwarka, jest nadal tajemnicą dla tak wielu osób. Każdego dnia, w Google jest ponad 3,5 miliarda wyszukiwań. Wpisywanie słów kluczowych w wyszukiwarkę i otrzymywanie odpowiedzi w zaledwie kilka sekund może być bardzo wciągające. W jaki sposób narzędzie znajduje Twoją witrynę i tak szybko ją przedstawia? To tylko jedno z pytań dotyczących wyszukiwarek i technik, o których mówi się za kulisami.
W celu zapewnienia wyników dla Twojego wyszukiwania, Google posługuje się "robotami" lub "pająkami". Jest to ogólne określenie dla botów internetowych, których rolą jest krążenie po Internecie, indeksowanie na różnych stronach internetowych i zapisywanie ich treści. Działają one poprzez podążanie za odnośnikami z witryny do witryny, a następnie wysyłają dane z powrotem na swoje serwery. W chwili, kiedy Twoja strona nie jest zaindeksowana przez Google, a więc posiada oznaczenie "noindex" sprawia, że roboty pominą tę wyszukiwarkę.
Zaindeksowana strona "wysyła" wyszukiwarkom "znak" o tym, iż chce aby roboty Google wkroczyły na nią. Po tym, jak roboty zakończyły przeszukiwanie stron za pomocą umieszczonych tam odsyłaczy i zapisaniu ich na serwerach, otrzymają one ich kopię, dodając adresy URL do indeksu. Przechowywanie tego wszystkiego zajmuje ogromną ilość pamięci, tak jak w przypadku Google - ich serwery mają ponad 100 000 000 gigabajtów. Aby to ująć w całości, tylko jeden procent z tego to około 10 000 godzin telewizji. Jest to szalona ilość informacji i stale się powiększa, i pamiętajcie, to tylko jedna wyszukiwarka! W jaki sposób informacje są odtwarzane? Indeksowanie jest tylko częścią procesu, jednak pomiędzy tymi bazami danych i oferowanymi wynikami istnieje inny proces, nazywany jest odzyskiwaniem. Jednakże, metody dla każdej wyszukiwarki są różne i dlatego wyniki nie zawsze są takie same. Istnieje zestaw kryteriów, za pomocą których wybierane są strony, które najlepiej pasują do wyszukiwania. Te różnorodne algorytmy porównują miliardy różnych stron, aby przekonać się, który z nich najbardziej odpowiada i pasuje. Strony są sprawdzane pod względem tytułu, ile stron linkuje do danej witryny, czy też są wyświetlane w zgodnej kolejności. Konkretna metoda jednego z tych algorytmów nigdy nie została w pełni ujawniona. Niegdyś właściciele witryn upychali słowa kluczowe na stronach internetowych, ponieważ tak działały wyszukiwarki. Z tego względu stworzono termin "upychanie słów kluczowych".
Oprogramowanie, które generuje wyniki, wykorzystuje uczenie maszynowe. Oznacza to, iż im więcej stron jest analizowanych, tym dokładniejszy jest wynik. Mogą one zrozumieć nawet podstawowe znaczenie słowa. Niemniej jednak, najdokładniejszym sposobem wyszukiwania nie jest wpisywanie treści całego pytania, na przykład: “Jak zrobić ciasto czekoladowe?” Lepiej jest wyszukiwać w oparciu o słowa kluczowe, jak: “nagroda”, “czekolada”, “ciasto”. Ułatwia to osobom, które wykonują swoją pracę, dostarczenie dokładniejszych wyników skupionych wokół tych słów kluczowych.
Po tym, jak wyniki zostały starannie wyselekcjonowanie za pomocą dowolnej metody, którą wyszukiwarka uzna za stosowną, zostaną one uporządkowane w kolejności uważanej za najbardziej przydatną dla Twoich potrzeb. Nazywane jest to rankingiem; w Google Pagerank lub PR (wymyślone i nazwane po Lawrence Edward Page). Proces ten jest podobny do tego, w jaki sposób strony były pierwotnie odnajdywane, według kolejności, częstotliwości i jakości słów kluczowych. Oczywiście jest to zaledwie kilka przykładów tego, jak jest to naprawdę robione. Ranking ten można znacznie poprawić za pomocą SEO (optymalizacja pod kątem wyszukiwarek), zapewniającej przewagę nad konkurentami, jeśli zostanie wykonana prawidłowo. Algorytm Google uwzględnia ponad 200 kryteriów, które wpływają na rankingi. Istnieje ogromna ilość mniej znanych technik, które składają się na SEO, począwszy od optymalizacji słów kluczowych, aż po budowanie linków itd.