Reddit scheint sich hinter den Kulissen zu bemühen, die Auswirkungen der Migration zu begrenzen. Schadensbegrenzung: ChatGPT-Bots spammen pro-admin, astroturfed Kommentare

@Temperche@feddit.de · edit-2 1 year ago

Reddit scheint sich hinter den Kulissen zu bemühen, die Auswirkungen der Migration zu begrenzen. Schadensbegrenzung: ChatGPT-Bots spammen pro-admin, astroturfed Kommentare

𝜏au · edit-2 1 year ago

Könnte das nicht genau so gut ein Troll/False-Flag sein, der Reddit schlecht dastehen lassen soll?

Gerade wenn es um r/programming geht, gibt es doch wahrscheinlich keinen Mangel an Leuten, die ein kurzes Script schreiben können, das mit der ChatGPT-API auf Reddit-Kommentare antwortet.

Es ist auf jeden Fall schon auffällig, dass die Bot-Kommentare in r/programming sind und nicht einfach überall, wo kritisch über Reddit geredet wird.

@luckystarr@feddit.de · 1 year ago

Unwahrscheinlich. So etwas in der Breite zu erstellen ist nicht so einfach wie du dir das eventuell vorstellst. Erstens müssen die Kommentare von ChatGPT gelesen und verstanden werden (1 API request), dann bewertet werden ob etwas pro/contro Reddit gesagt wird (1 API request), dann eine entsprechende Response generiert werden (1 API request). Also 3 API requests pro Kommentar. Und auch wenn es einfach wäre, kostet doch jeder Zugriff auf GPT-3.5 oder GPT-4 via OpenAI’s API Geld. Skripten via ChatGPT kann zu einem Ban führen.

@luckystarr@feddit.de · 1 year ago

Nach erneutem Nachdenken glaube ich dass man das billiger lösen kann indem man verschiedene Kommentare in einem API request zusammenfasst und dann GPT anweist die Ziel-Kommentare herauszufiltern. Dann kann man das an eine andere Komponente weiterleiten und die entsprechenden Antworten generieren lassen. Es stimmt also, dass so etwas konzeptionell sicher einfach zu erstellen ist (ich bin ja schließlich auch darauf gekommen wie man so etwas baut), aber so ein Unterfangen ist sicher nicht an einem Nachmittag umgesetzt.

@Besen@feddit.de · 1 year ago

Die OpenAI Kosten werden pro Token (entspricht in etwa einigen Buchstaben) berechnet. Für längere input Texte zahlt man also mehr.

𝜏au · edit-2 1 year ago

Erstens müssen die Kommentare von ChatGPT gelesen und verstanden werden (1 API request), dann bewertet werden ob etwas pro/contro Reddit gesagt wird (1 API request), dann eine entsprechende Response generiert werden (1 API request). Also 3 API requests pro Kommentar.

Könnte man das nicht alles in einem Prompt machen? Z.B.:

Wenn folgender Kommentar kritisch gegenüber Reddit ist, dann verfasse eine kurze Antwort, die der Aussage widerspricht.
Sonst gebe "[keine Antwort nötig]" aus.

Kommentar: "{Kommentar}"

Und auch wenn es einfach wäre, kostet doch jeder Zugriff auf GPT-3.5 oder GPT-4 via OpenAI’s API Geld.

Wenn man sich die API-Preise anguckt, dann kostet grob überschlagen 15 Kommentare reinwerfen und von GPT-4 entsprechende Antworten (jeweils ~50 Worte lang) generieren zu lassen $0.1. Mit $10 könnte man also vielleicht schon so um die 1500 Trollkommentare erzeugen lassen. Man müsste natürlich z.B. anhand von ein paar Stichworten vorfiltern, damit man nicht 99% irrelevante Kommentare reinwirft.

Skripten via ChatGPT kann zu einem Ban führen.

Da wäre die Frage, wie lange es dauert und ob einen Troll das überhaupt juckt.