So teste ich die Apps

Es gibt mich, meine Notizen und die offiziellen Seiten der Anbieter. Das ist weniger spektakulär als manche Testseite behauptet, aber es ist nachprüfbar.

Warum ich das so ausführlich aufschreibe? Weil in diesem Markt viel behauptet wird. Manche Seiten schreiben von wochenlangen Tests, die offensichtlich nie stattgefunden haben, und dieselben ausgedachten Szenen tauchen auf mehreren Seiten fast wortgleich auf. Wenn du weißt, wie meine Berichte entstehen, kannst du selbst beurteilen, wie weit du ihnen trauen willst. Und wenn dir an meiner Methode etwas nicht schlüssig vorkommt, sag es mir.

Dabei schreibe ich mit. In meinen Notizen landet, wann ich angefangen habe, was mich überrascht hat, wo die App etwas vergessen hat, wann die Gratis-Nachrichten aufgebraucht waren und was ein Abo oder ein Credit-Paket gekostet hat. Als Entwickler schaue ich außerdem gern auf die Mechanik dahinter: Wie wird abgerechnet, pro Nachricht, pro Minute Sprache oder pro Bild?

Was bleibt nach einer Woche Pause im Gedächtnis hängen? Für die Kosten führe ich eine eigene Tabelle, in der ich ausrechne, was ein typischer Abend in der jeweiligen App kostet.

Im Gespräch selbst achte ich auf ein paar Dinge, die mir über die Jahre wichtig geworden sind. Bleibt die Figur bei ihrer Persönlichkeit, oder klingt sie nach zwanzig Nachrichten wie ein Kundendienst? Wiederholt sie sich? Kommt sie mit einem Themenwechsel klar?

Ich schreibe meistens auf Deutsch und merke mir, ob eine App dabei bleibt oder nach ein paar Sätzen ins Englische kippt. Und ich schaue, was nach einer Pause von einigen Tagen noch da ist: der Name meiner Katze, der Job, über den ich mich beschwert habe, der Faden einer Geschichte.

Nicht jede App bekommt dieselbe Zeit. Eine App, die ich über Monate begleitet habe, beschreibe ich ausführlicher als eine, die ich an einem langen Wochenende ausprobiert habe. Der Zeitraum steht deshalb immer dabei.

Bei einem Teil der Apps hatte ich ein bezahltes Abo mit meiner eigenen Karte. Bei den meisten bin ich in der Gratis-Version geblieben, weil die Frage, wie weit man ohne Geld kommt, für viele Leser die wichtigste ist. Welcher Fall es war, zeigt das Label oben auf dem Bericht, und der Bericht nennt den Zeitraum.

Jede Angabe, die ich dort finde, speichere ich mit dem Datum der Prüfung und einem Link zur Fundstelle. Dazu gehört auch, wer hinter einer App steht: der Name der Firma und das Land, in dem sie sitzt, soweit die Nutzungsbedingungen oder das Impressum der App das verraten.

Wo eine App im Browser und im App Store unterschiedlich viel kostet, halte ich beide Wege fest. Der Unterschied ist oft größer, als man denkt, weil Apple und Google an jedem Abo mitverdienen und viele Anbieter diesen Anteil an dich weitergeben.

Das klingt nach Fleißarbeit, und das ist es auch. Aber genau dort stehen die Dinge, die später Ärger machen: ob sich ein Abo automatisch verlängert, ob es Erstattungen gibt, ob du im Browser kündigen kannst, was mit deinen Chats passiert und ob die Firma sie zum Training ihrer Modelle verwendet. Solche Punkte übernehme ich nie aus dem Gedächtnis, sondern nur aus der aktuellen Fassung der Seite.

Und wo es keine verlässliche Quelle gibt, bleibt das Feld leer, und die Seite zeigt „Noch nicht bekannt“.

Das gilt auch für Dinge, die man nur mit einem Bezahl-Abo herausfindet. Wenn ich eine App nur in der Gratis-Version kenne, rate ich nicht, wie großzügig das Abo in der Praxis ist. Ich schreibe, was der Anbieter verspricht, und kennzeichne es als Angabe des Anbieters.

So steht ein Preis im Bericht, in der Bestenliste und im Vergleich immer gleich da, mit demselben Datum.

• „Praxistest mit Bezahltarif“: Ich habe die App benutzt und dabei ein bezahltes Abo oder Credit-Paket mit eigenem Geld gekauft.
• „Praxistest mit Gratis-Version“: Ich habe die App ausgiebig benutzt, aber nie bezahlt. Aussagen über bezahlte Funktionen stammen dann aus den offiziellen Seiten.
• „Recherche-Test - noch nicht bezahlt“: Ich kenne das Angebot nur aus den offiziellen Quellen. Bei den Apps mit eigenem Bericht kommt dieses Label derzeit nicht vor.

Ein Gratis-Label ist kein Makel. Für viele Fragen, etwa wie großzügig das Kontingent ist oder wie schnell die App zum Abo drängt, ist die Gratis-Version sogar die aussagekräftigere Quelle. Es heißt nur, dass ich über das Innenleben des Abos nicht aus eigener Erfahrung schreibe.

Er steht in der Wertungsbox immer als eigene Zeile, damit du das gewichtete Mittel und den Bonus getrennt siehst. Die Gewichte sind für jede App gleich und in den Einstellungen der Seite festgelegt:

Jede Teilwertung stützt sich auf zwei Dinge: meine datierten Notizen und die offiziellen Seiten in ihrer aktuellen Fassung. Hat sich ein Tarif oder eine Regel seit meiner Nutzung geändert, sagt der Bericht das. Eine App, die eingestellt wurde, bekommt bei der Zuverlässigkeit eine niedrige Note, egal wie gut sie früher war.

Die Wertung ist meine Meinung in Zahlen, kein Prüfsiegel. Zwei Apps mit derselben Gesamtnote können sich trotzdem völlig anders anfühlen. Deshalb steht auf jedem Bericht neben dem Balken für jedes Kriterium ein kurzer Satz, warum die Note so ausfällt.

Die Noten sind nicht in Stein gemeißelt. Wenn ein Anbieter seine Preise deutlich ändert, die Datenschutzerklärung umschreibt oder die App über Wochen ausfällt, sehe ich mir die betroffenen Kriterien neu an. Eine geänderte Note erkennst du am neuen Datum des Berichts.

Die Wertung steht neben jedem Eintrag, ändert aber die Reihenfolge nicht. Unter den Apps, die am besten zum Thema passen, stehen Partner-Apps vorne; wie das genau funktioniert, erkläre ich im Affiliate-Hinweis. Die Fakten zu jedem Eintrag sind dieselben, ob eine Provision fließt oder nicht.

Warum nicht einfach nach Wertung sortieren? Weil die Gesamtnote eine Durchschnittsnote über alles ist. Wer eine App für lange Gespräche sucht, dem hilft es wenig, wenn eine App ganz oben steht, weil sie tolle Bilder macht. Eine Liste soll die Frage beantworten, die in ihrer Überschrift steht, und dafür ist die Passung zum Thema der bessere Maßstab. Die Wertung daneben zeigt dir trotzdem, wie ich die App insgesamt sehe.

In Vergleichen, bei denen zwei Apps direkt gegeneinander antreten, stehen immer genau diese beiden vorne. Weitere Apps tauchen dort nur als Alternativen auf, falls keine der beiden zu deinem Bedarf passt.

Ein Preis, dessen letzte Prüfung länger als 30 Tage zurückliegt, erscheint nicht mehr auf der Seite, bis ich ihn neu geprüft habe. Das Gleiche gilt für Gutscheincodes und Rabatte. Countdowns, die dich unter Zeitdruck setzen sollen, gibt es hier grundsätzlich nicht.

Das ersetzt kein Lesen, fängt aber viele Flüchtigkeitsfehler ab, bevor du sie siehst. Außerdem stoppt der Build jeden Entwurf, in dem noch ein unbestätigter Erfahrungssatz steht. Sätze über meine eigene Nutzung stammen aus meinen datierten Notizen, und was ich dort nicht bestätigt habe, kommt gar nicht erst online.

Eine App, die mich vor einem Jahr mit ihrem Gedächtnis beeindruckt hat, kann heute anders reagieren. Meine Notizen sind datiert, damit du das einordnen kannst.

Ich messe auch nichts im Laborsinn. Wenn ich schreibe, dass eine App Details über mehrere Tage behält, beruht das auf meinen Gesprächen und nicht auf einer standardisierten Testreihe. Ich halte das für ehrlicher, als Zahlen zu präsentieren, die eine Genauigkeit vortäuschen, die es nicht gibt.