Wie man ChatGPT dazu bringt, bessere Quellen und Zitate bereitzustellen

Vertrauen Sie niemals nur den Quellen von ChatGPT. Überprüfen Sie immer.

Eine der größten Beschwerden über ChatGPT ist, dass es Informationen liefert, die schwer auf ihre Richtigkeit überprüft werden können. Diese Beschwerden existieren, weil ChatGPT in seinen Antworten nicht immer die Quellen, Fußnoten oder Links angibt, aus denen es die Informationen abgeleitet hat.

So beschreibt ChatGPT den Ansatz: "GPT-4o im kostenlosen Modus bietet grundlegende und wesentliche Zitate und konzentriert sich auf schnelle und prägnante Referenzen, um sicherzustellen, dass die Informationen nachvollziehbar sind. Im Gegensatz dazu bietet GPT-4o im kostenpflichtigen Modus verbesserte, detaillierte und häufige Zitate, einschließlich mehrerer Quellen und kontextbezogener Anmerkungen, um eine umfassende Überprüfung und ein umfassendes Verständnis der Informationen zu ermöglichen. Dies gewährleistet eine robuste und zuverlässige Erfahrung, die besonders für Benutzer von Vorteil ist, die detaillierte Informationen und eine gründliche Quellenüberprüfung benötigen."

Selbst mit den bereitgestellten Zitaten in GPT-4o gibt es Möglichkeiten, Ihre Ergebnisse zu verbessern.

Wie man ChatGPT dazu bringt, Quellen und Zitate bereitzustellen

1. Schreiben Sie eine Abfrage und fragen Sie ChatGPT

Zu Beginn müssen Sie ChatGPT etwas fragen, das Quellen oder Zitate benötigt. Ich habe festgestellt, dass es besser ist, eine Frage mit einer längeren Antwort zu stellen, damit es mehr "Fleisch" gibt, an dem ChatGPT kauen kann.

Denken Sie daran, dass ChatGPT nach Januar 2022 für GPT-3.5, April 2023 für GPT-4 und Oktober 2023 für GPT-4o keine Informationen mehr bereitstellen kann, und Informationsanfragen vor dem Internet (z. B. für ein Papier über die Präsidentschaft von Ronald Reagan) werden weitaus weniger verfügbare Quellen haben.

Hier ist ein Beispiel für eine Eingabeaufforderung, die ich zu einem Thema geschrieben habe, an dem ich während meines Studiums viel gearbeitet habe:

Beschreiben Sie die Lerntheorien des Kognitivismus, Behaviorismus und Konstruktivismus

2. Bitten Sie ChatGPT, Quellen anzugeben

Hier kommt ein bisschen Prompt Engineering ins Spiel. Ein guter Ausgangspunkt ist mit dieser Abfrage:

Bitte geben Sie Quellen für die vorherige Antwort an

Ich habe festgestellt, dass diese Eingabeaufforderung oft Offline-Quellen, Bücher, Papiere usw. bereitstellt. Das Problem mit Offline-Quellen ist, dass Sie ihren Wahrheitsgehalt nicht überprüfen können. Trotzdem ist es ein Ausgangspunkt. Eine bessere Abfrage ist diese:

Bitte geben Sie URL-Quellen an

Diese Aufforderung teilt ChatGPT ausdrücklich mit, dass Sie anklickbare Links zu Quellen wünschen. Sie können diese Aufforderung auch optimieren, indem Sie nach einer bestimmten Anzahl von Quellen fragen, obwohl Ihr Kilometerstand in Bezug auf die Anzahl der Quellen, die Sie zurückerhalten, variieren kann:

Bitte geben Sie 10 URL-Quellen an

3. Pushen Sie ChatGPT, um Ihnen qualitativ hochwertigere Quellen zu liefern

Die meisten großen Sprachmodelle reagieren gut auf Details und Spezifität. Wenn du also nach Quellen fragst, kannst du auf qualitativ hochwertigere Quellen drängen. Sie müssen angeben, dass Sie zuverlässige und genaue Quellen benötigen. Dieser Ansatz funktioniert zwar nicht unbedingt, kann aber den KI-Chatbot daran erinnern, Ihnen nützlichere Antworten zu geben. Zum Beispiel:

Bitte geben Sie mir seriöse Quellen, um meine Argumentation über... (was auch immer das Thema ist, das Sie betrachten)

Sie können ChatGPT auch mitteilen, welche Arten von Quellen Sie möchten. Wenn Sie nach wissenschaftlichen Artikeln, Peer-Review-Zeitschriften, Büchern oder maßgeblichen Websites suchen, erwähnen Sie diese Präferenzen ausdrücklich. Zum Beispiel:

Bitte empfehlen Sie begutachtete Zeitschriften, die sich mit einem... (Und wiederholen Sie hier, was Sie zuvor in Ihrem Gespräch besprochen haben)

Wenn Sie sich mit abstrakten Konzepten oder Theorien befassen, bitten Sie ChatGPT, einen konzeptionellen Rahmen und Beispiele aus der Praxis bereitzustellen. Hier ist ein Beispiel:

Können Sie die Prinzipien von Wygotskis Theorie der sozialen Entwicklung beschreiben und Beispiele aus der Praxis nennen, wo diese Prinzipien angewendet wurden, einschließlich Quellen für diese Beispiele?

Dieser Ansatz bietet Ihnen eine theoretische Erklärung und praktische Beispiele, um die Originalquellen oder Fallstudien nachzuvollziehen.

Eine andere Idee besteht darin, Quellen zu verwenden, die keine Link-Fäulnis aufweisen (d. h. sie sind nicht mehr unter der URL online, die ChatGPT möglicherweise kennt). Seien Sie jedoch vorsichtig mit dieser Idee, denn ChatGPT weiß nichts über die Dinge nach Januar 2022 für GPT-3.5, April 2023 für GPT-4 und Oktober 2023 für GPT-4o. Während Sie also versucht sein könnten, eine Eingabeaufforderung wie diese zu verwenden:

Bitte nennen Sie mir Quellen, die in den letzten fünf Jahren veröffentlicht wurden.

Erwägen Sie stattdessen, eine Eingabeaufforderung wie diese zu verwenden:

Bitte geben Sie Quellen an, die zwischen 2019 und April 2023 veröffentlicht wurden.

Und wie immer sollten Sie nicht davon ausgehen, dass die Ausgabe, die ChatGPT Ihnen liefert, korrekt ist. Es ist immer noch gut möglich, dass die KI Antworten vollständig fabriziert, sogar bis zu dem Punkt, an dem sie die Namen von scheinbar akademischen Zeitschriften erfindet. Es ist ein manchmal hilfreiches Werkzeug, aber es ist auch ein Geschwätz.

Bitte führen Sie eine Websuche durch, um aktuellere Quellen zu finden.

GPT-4o mit dem Plus-Plan führt Websuchen durch. Denken Sie daran, dass ChatGPT Webergebnisse nicht wirklich validiert, so dass es zwar möglich ist, Ihnen Quellen später als im Oktober 2023 zu liefern, aber keine Garantie dafür gibt, dass die Quellen selbst korrekt sind.

4. Versuchen Sie, die bereitgestellten Quellen zu überprüfen/zu validieren

Behalten Sie diese goldene Regel für von ChatGPT bereitgestellte Quellen im Hinterkopf: ChatGPT liegt häufiger falsch als richtig.

In den vielen Fällen, in denen ich ChatGPT nach URL-Quellen gefragt habe, waren etwa die Hälfte einfach nur schlechte Links. Weitere 25% oder mehr der Links führten zu Themen, die völlig oder etwas nichts mit dem zu tun hatten, das ich zu beschaffen versuchte. GPT-4 und GPT-4o sind etwas zuverlässiger, aber nicht viel.

Zum Beispiel fragte ich nach Quellen für einen Hintergrundbericht für die Formulierung "vertrauen, aber überprüfen", die allgemein von US-Präsident Ronald Reagan populär gemacht wurde. Ich habe viele Quellen zurückbekommen, aber die meisten existierten nicht. Ich bekam einige zurück, die mich korrekt zu aktiven Seiten auf der Website der Reagan Presidential Library führten, aber das Seitenthema hatte nichts mit der Phrase zu tun.

Ich hatte mehr Glück mit meiner lerntheoretischen Frage aus Schritt 1. Dort bekam ich Offline-Texte von Leuten, die ich aus dem Studium kannte und die an diesen Theorien gearbeitet hatten. Ich habe auch URLs zurückbekommen. Auch hier funktionierten nur etwa zwei von 10 oder waren genau.

Verzweifeln Sie nicht. Die Idee ist nicht, von ChatGPT zu erwarten, dass es Quellen bereitstellt, die Sie sofort verwenden können. Wenn Sie ChatGPT stattdessen als Forschungsassistenten betrachten, erhalten Sie einige großartige Ausgangspunkte. Verwenden Sie die Namen der Artikel (die möglicherweise völlig gefälscht oder einfach nicht zugänglich sind) und geben Sie sie bei Google ab. Dieser Prozess wird Ihnen einige interessante Suchanfragen liefern, die wahrscheinlich zu interessantem Material führen, das legitim in Ihre Recherche einfließen kann.

Denken Sie auch daran, dass Sie nicht auf die Verwendung von ChatGPT beschränkt sind. Vergessen Sie nicht alle Werkzeuge, die Forschern und Studenten zur Verfügung stehen. Führen Sie Ihre eigene Websuche durch. Erkundigen Sie sich bei Primärquellen und Fachexperten, ob diese verfügbar sind. Wenn du in der Schule bist, kannst du sogar deinen freundlichen Bibliothekar in der Nachbarschaft um Hilfe bitten.

Vergessen Sie nicht, dass es viele ausgezeichnete traditionelle Quellen gibt. Google Scholar und JSTOR bieten beispielsweise Zugriff auf eine breite Palette akademisch akzeptabler Ressourcen, die Sie mit angemessener Sicherheit zitieren können.

Ein letzter Punkt: Wenn Du ChatGPT-Quellen einfach ausschneidest und in Deine Recherche einfügst, wirst Du wahrscheinlich gestochen. Nutzen Sie die KI als Anhaltspunkt, nicht als Möglichkeit, die eigentliche Forschungsarbeit zu vermeiden.

Häufig gestellte Fragen

Werden verschiedene ChatGPT-LLMs unterschiedliche Ergebnisse liefern?

Ja. Lassen Sie uns die wichtigsten derzeit verfügbaren LLMs besprechen:

GPT-3.5: Dies ist das OG ChatGPT und ist nicht mehr so verbreitet, da GPT-4 sogar mit der kostenlosen Version verfügbar ist. 3.5 konnte keine Quellen zitieren oder verifizieren, und es neigte dazu, ziemlich oft Dinge zu erfinden.
GPT-4: Dies ist auch eine Art Legacy-Version, aber sie ist für Plus-Abonnenten und einige API-Benutzer verfügbar. Es neigte auch dazu, Quellen zu halluzinieren und gab keine URLs an, es sei denn, sie wurden angefordert (und die URLs waren oft falsch).
GPT-4o: Dies ist jetzt die Hauptversion von GPT, die sowohl für kostenlose als auch für Plus-Benutzer verfügbar ist. Es bietet qualitativ hochwertigere Zitate, Quellen mit etwas Kontext und genauere URLs. Die kostenlose Version weist jedoch erheblich reduzierte Rechenressourcen zu, was dazu führt, dass die Quellen seltener und weniger detailliert sind, da die kostenlose Version für den Zugriff und nicht für die Tiefe optimiert ist. Die kostenpflichtige Version bietet eine Websuche, die es Ihnen ermöglicht, Quellen (mit unterschiedlicher Qualität) nach dem Stichtag der Wissensdatenbank im Oktober 2023 zu erhalten.
GPT-o1: Das ist das "denkende" Modell von OpenAI, das etwas länger braucht, um Antworten zu erarbeiten. Erwarten Sie jedoch keine qualitativ hochwertigeren Quellenangaben, denn obwohl es Konzepte intensiver verarbeitet, hat es nicht mehr oder bessere Daten, mit denen es arbeiten kann als GPT-4o.

Die Quintessenz ist, dass GPT-4o im Moment die besten Quellen liefern wird, und wenn Sie die besten ChatGPT-Angebote in Bezug auf die Tiefe von Quellen und Zitaten wünschen, sollten Sie für die Plus-Version für 20 US-Dollar pro Monat bezahlen.

Wie fügt man Quellen im APA-Format ein?

Der APA-Stil ist ein Zitierstil, der häufig in akademischen Programmen erforderlich ist. APA steht für American Psychological Association. Ich habe oft gedacht, dass sie diese Stilregeln erfunden haben, um mehr Kunden zu gewinnen. Der definitive Ausgangspunkt für den APA-Stil ist die Purdue OWL, die eine breite Palette von Stilrichtlinien bietet.

Seien Sie vorsichtig: Online-Formatierer erledigen möglicherweise keine vollständige Arbeit, und es kann sein, dass Sie Ihre Arbeit von Ihrem Professor zurückerhalten. Es zahlt sich aus, die Arbeit selbst zu erledigen - und dabei vorsichtig zu sein.

Wie kann ich ChatGPT dazu bringen, zuverlässigere Quellen für seine Antworten bereitzustellen?

Das ist eine gute Frage. Ich habe festgestellt, dass manchmal, wenn man ChatGPT bittet, mehr Quellen zu nennen oder erneut nach Quellen fragt, neue Einträge erhält. Wenn du ChatGPT sagst, dass die von ihm bereitgestellten Quellen falsch waren, wird es dir manchmal bessere Quellen geben. Der Bot kann sich auch entschuldigen und Entschuldigungen vorbringen. Ein anderer Ansatz besteht darin, Ihre ursprüngliche Frage mit einem anderen Fokus oder einer anderen Richtung erneut zu stellen und dann nach Quellen für die neue Antwort zu fragen.

Noch einmal, mein bester Rat ist, ChatGPT nicht als ein Werkzeug zu behandeln, das für Sie schreibt, und eher als Schreibassistent. Nach Quellen zu fragen, um eine ChatGPT-Antwort auszuschneiden und einzufügen, ist so ziemlich ein Plagiat. Das heißt, die Antworten von ChatGPT und alle Quellen, die Sie herauskitzeln können, als Hinweise für weitere Recherchen und Texte zu verwenden, ist ein legitimer Weg, dieses Tool zu verwenden.

Warum liegen ChatGPT-Quellen oft so falsch?

Bei einigen Links ist es nur Link-Rot. Einige Links könnten sich geändert haben, da viele Quellen älter als drei Jahre sind. Andere Quellen sind unbestimmten Alters. Da wir keine vollständige Liste der Quellen von ChatGPT haben, ist es unmöglich zu sagen, wie gültig sie sind oder waren.

Da ChatGPT größtenteils ohne menschliche Aufsicht trainiert wurde, wissen wir, dass die meisten seiner Quellen nicht überprüft wurden und falsch, erfunden oder völlig nicht vorhanden sein können.

Vertrauen, aber überprüfen.