Die Naver-Ergebnisseite hinter einem Proxy lesen

Der Versuch, eine Portal-Suchmaschine wie eine klassische Suchmaschine zu messen, fuehrt schon in der ersten Runde zu falschen Ergebnissen. Bei einer klassischen Suchmaschine hat die Frage „auf welcher Position stehe ich“ eine klare Antwort; in der Portal-Logik liefert dieselbe Anfrage eine Seite, auf der Bloecke aus voneinander unabhaengigen Quellen uebereinandergeschichtet sind. In der organischen Liste eine Stufe aufzusteigen bedeutet nichts, wenn dieser Block weit nach unten gerutscht ist.

Der Proxy beruehrt nicht dieses gesamte Bild, sondern nur eine einzige Eingabe: wohin das Netzwerk, aus dem die Anfrage kommt, zu gehoeren scheint. Diese Eingabe wirkt besonders bei standortsensiblen Bloecken; Sprache, Session und Oberflaechenpraeferenzen bleiben dagegen unabhaengig von Ihrem Austritt gleich und verunreinigen die Messung weiterhin.

Im Folgenden finden Sie zuerst, aus welchen Teilen sich die Seite aufbaut, dann die Reihenfolge der Standortsignale, anschliessend die Trennung der Session, das Testen der erweiterten Suche und schliesslich die Wahl des Austritts sowie die Setup-Schritte.

Warum entspricht einer Anfrage nicht eine einzige Liste?

Naver ist seit Langem weniger als Suchfeld denn als Portal gewachsen. Die Auswirkung auf die Ergebnisseite ist deutlich: Je nach Anfragetyp teilen sich Bloecke aus den eigenen Inhaltsdiensten, allgemeine Webdokumente und standortsensible lokale Karten dieselbe Seite. Bei einer Begriffsanfrage treten Text- und Diskussionsinhalte aus dem eigenen Oekosystem in den Vordergrund, bei einer Unternehmens- oder Ortsanfrage ruecken lokale Karten und der Kartenblock nach oben.

Fuer die Messung hat das zwei Konsequenzen. Erstens sind die zu erfassenden Daten nicht die „Positionsnummer“, sondern die „Blockkomposition“: welche Bloecke auf der Seite vorhanden sind, in welcher Reihenfolge sie stehen und wie viele Eintraege jeder Block zeigt. Zweitens muessen Sie bei der Deutung des Unterschieds zwischen zwei Runden zuerst pruefen, ob sich die Komposition geaendert hat; wenn die Blockreihenfolge verrutscht ist, sind Schwankungen in den darunterliegenden Eintraegen ohnehin zu erwarten.

Die Quellenvielfalt der Bloecke bestimmt zugleich die Sprachsensibilitaet. Bei einer koreanisch geschriebenen Anfrage sind Inhalte aus den eigenen Diensten reichlich vorhanden, waehrend dieselbe Begrifflichkeit in lateinischer Schrift eine Seite mit allgemeinen Webdokumenten und einer duenneren Menge liefert. Wenn Sie einen Vergleich in zwei Sprachen aufsetzen moechten, fuehren Sie diese als getrennte Serien durch; ein in eine Tabelle gepresster Sprachvergleich ist nicht interpretierbar.

Schliesslich die Oberflaechenversion: Ausgaben fuer schmale und breite Bildschirme koennen mit unterschiedlichen Blockreihenfolgen kommen. Wenn Sie nicht festhalten, in welcher Ansicht Ihre Messrunde durchgefuehrt wurde, kann niemand dieselbe Runde spaeter reproduzieren.

Woraus leiten Karten- und Unternehmenskarten den Standort ab?

Standortsensible Bloecke sind der nuetzlichste Proxy-Test, den Sie haben; denn sie aendern ihr Verhalten sichtbar, sobald sich das Austrittsland aendert. Die Standortschaetzung stammt jedoch nicht allein aus der IP. Der Reihe nach wirken folgende Eingaben: die vom Nutzer im Dienst ausdruecklich gewaehlte Region, ueber die Session mitgefuehrte fruehere Praeferenzen, die Standortberechtigung des Browsers und schliesslich die geografische Ableitung des Netzwerks, aus dem die Anfrage kommt.

Diese Reihenfolge ist wichtig, denn die oberen unterdruecken die unteren. Wenn Sie im Dienst eine Region ausgewaehlt haben, aendern lokale Karten sich moeglicherweise nicht, wenn Sie Ihren Austritt in ein anderes Land verlegen. Das ist ein sehr haeufiger Grund fuer die Deutung „der Proxy funktioniert nicht“: Der Proxy funktioniert, aber ein staerkeres Signal ueberschreibt ihn. Fuer einen sauberen Test darf im Profil keine Region ausgewaehlt und keine Standortberechtigung erteilt sein.

Wenn Sie eine Ansicht auf Stadtebene benoetigen, genuegt die Wahl des Landes moeglicherweise nicht. Es gibt Setups, in denen innerhalb der Austrittspools ein Targeting auf Stadt- oder Anbieterebene moeglich ist; Methode und Grenzen im Beitrag Targeting nach Stadt und ISP . Akzeptieren Sie dennoch von Anfang an: Die Stadtableitung ist eine Naeherung, dieselbe Adresse kann in verschiedenen Datenquellen verschiedenen Staedten zugeordnet sein.

Den angemeldeten Zustand von der Messung trennen

Die Ergebnisseite, die Sie bei aktiver Session sehen, wird von den mit Ihrem Konto verknuepften Praeferenzen geformt. Im Alltag ist das erwuenscht; bei der Messung ist es der groesste Stoerfaktor. Denn der an Ihr Konto gebundene Verlauf wandert mit Ihnen mit, wenn Sie den Austritt wechseln, und erzeugt den Eindruck „Ich habe das Land gewechselt, aber das Ergebnis ist gleich“.

Das richtige Setup ist einfach, verlangt aber Disziplin: Messrunden werden immer in einem nicht angemeldeten, leeren Profil ausgefuehrt. Wenn Sie ein Szenario mit Anmeldung messen muessen, fuehren Sie es als separate Serie mit einem festen Austritt durch; vergleichen Sie Runden mit und ohne Session nicht in derselben Tabelle. Die beiden Serien messen unterschiedliche Dinge.

Bei Szenarien mit Session kommt eine zweite Regel ins Spiel: Adressstabilitaet. Wenn eine Session in kurzen Abstaenden von Adressen aus weit voneinander entfernten Laendern kommt, entsteht ein inkonsistentes Bild, das zusaetzliche Verifizierungen ausloesen kann. Nutzen Sie bei solchen Aufgaben eine Sticky Session, waehlen Sie die Dauer grosszuegiger als Ihre Arbeitssitzung und denken Sie daran, dass Sie beim Ablauf der Dauer keine Warnung erhalten (Einrichtung einer Sticky-Session).

Wie bestimmend ist welches Signal?

Die folgenden Anzeigen stellen exemplarisch das relative Gewicht der drei Signale dar, die standortsensible Bloecke formen. Es sind keine gemessenen Werte, sondern Punktwerte, die zeigen, welche Variable Sie beim Setup zuerst abschalten sollten: Das Signal mit der hoechsten Punktzahl hat die groesste Kraft, die anderen zu unterdruecken.

Die praktische Regel daraus lautet: Wenn Sie die Wirkung des Proxys sehen moechten, muessen Sie zuerst die staerkeren Signale eigenhaendig zuruecksetzen. Ein Laendertest, der bei bestehender Regionsauswahl im Dienst durchgefuehrt wird, misst die Netzwerkseite ueberhaupt nicht. Es gibt keinen Weg, die Rangfolge umzukehren; das Einzige, was Sie tun koennen, ist, die oberen Signale zu deaktivieren.

Die zweite Praxisregel ist die Ein-Variablen-Regel. Aendern Sie in einer Runde nur das Austrittsland und lassen Sie Sprachliste und Profil unberuehrt. In der naechsten Runde aendern Sie nur die Sprache und halten den Austritt fest. In einer Tabelle, in der Sie zwei Variablen gemeinsam bewegt haben, kann niemand sagen, welcher Unterschied von welcher stammt – das Ergebnis ist ein Datenhaufen, ueber den sich nicht diskutieren laesst.

Das Dritte ist die Anzahl der Wiederholungen. Ein einzelner Blick spiegelt den Indexzustand und die Blockkomposition des Moments wider; am naechsten Tag kann dieselbe Anfrage anders ausfallen. Wenn Sie dieselbe Anfrage unter denselben Bedingungen mehrmals an verschiedenen Tagen wiederholen und die Schwankung dazwischen sehen, lernen Sie zugleich, wie gross ein echter Unterschied sein muss.