banner

Blog

Aug 20, 2023

Stack Overflow: quanto sta calando il traffico e come è stato risolto lo “strike” del moderatore • DEVCLASS

Stack Overflow, il sito web a cui gli sviluppatori si rivolgono spesso per avere indicazioni sui problemi di codifica, ha affermato che il calo del traffico, legato alla concorrenza degli assistenti IA, è stato esagerato, anche se la nostra analisi suggerisce che rimane significativo. La società, tuttavia, ha per lo più risolto lo sciopero dei moderatori, indetto per questioni relative ai contenuti generati dall'intelligenza artificiale.

Sono stati segnalati vari casi di calo del traffico, incluso il nostro, poiché gli sviluppatori utilizzano la comodità degli assistenti di codifica interni all'editor per risolvere i problemi. L’azienda ora afferma che le analisi più estreme, che mostrano cali dal 35% al ​​50%, erano errate e causate da modifiche alla configurazione di Google Analytics.

"Quest'anno, nel complesso, stiamo registrando una media di circa il 5% di traffico in meno rispetto al 2022", ha affermato il direttore della gestione del prodotto Des Darilek. Tuttavia ha anche riconosciuto che ad aprile il traffico è diminuito del 14%, attribuito agli “sviluppatori che provano GPT-4”, il motore OpenAI dell’azienda che alimenta anche GitHub Copilot. C'è quindi un calo, anche se alcuni resoconti lo hanno esagerato.

Un altro modo di vedere questo è contare quante domande vengono poste. Questo rapporto mostra che le nuove domande sono diminuite rispetto allo scorso anno; e abbiamo proseguito con la nostra query SEDE (Stack Exchange Data Explorer) che mostrava che aprile non era un caso isolato. Anno su anno, aprile è sceso del 22,5%, maggio del 25,6%, giugno del 24,5% e luglio del 22,2%, secondo le domande poste.

La soluzione sperata da Stack Overflow è un nuovo servizio in preparazione chiamato OverflowAI, oltre a qualcosa forse più importante, un componente aggiuntivo di Visual Studio Code che potrebbe rivaleggiare con la comodità di Copilot, anche se il suo obiettivo è diverso in quanto non inserirà direttamente il codice.

La buona notizia per l’azienda è che lo “sciopero” dei moderatori è quasi terminato e i rapporti tra lo staff e i moderatori volontari sono migliorati. Il problema chiave, descritto in una lettera aperta, era che ai moderatori non era consentito rimuovere le risposte a domande tecniche in cui il motivo della rimozione era che erano generate dall’intelligenza artificiale. I moderatori hanno sostenuto che tali risposte sono soggette a “informazioni errate e plagio”.

La possibilità di risposte errate è un problema inerente all'intelligenza artificiale generativa, utilizzata da ChatGPT di Open AI, Bard di Google e altri sistemi simili. L’intelligenza artificiale generativa è forte nel senso della sua capacità di creare risposte fluide alla domanda posta, ma non vi è alcuna garanzia di correttezza. Le FAQ per GitHub Copilot, ad esempio, affermano che “Il codice pubblico può contenere modelli di codifica, bug o riferimenti ad API o idiomi obsoleti. Quando GitHub Copilot sintetizza i suggerimenti di codice basati su questi dati, può anche sintetizzare il codice che contiene questi modelli indesiderati.

Il risultato delle negoziazioni è stato che Stack Exchange (la società dietro Stack Overflow) ha accettato di consentire la rimozione di contenuti sulla base di "un unico indicatore forte di utilizzo di GPT o su diversi indicatori più deboli". La politica in merito precedentemente stabilita dall'azienda è stata resa obsoleta. Inoltre, la società si è impegnata a continuare a mantenere i dump dei dati dei contenuti degli abbonati, dell'accesso API e di Stack Exchange Data Explorer, anche se con la clausola che potrebbe "posizionare guardrail attorno ad essi per garantire che le aziende che costruiscono modelli linguistici, ecc., paghino per l'accesso. ” – una condizione che alcuni membri della comunità considerano inappropriata dato che i dump dei dati sono concessi sotto una licenza Creative Commons, CC by-SA 4.0, che consente l'adattamento per qualsiasi scopo soggetto a credito appropriato. Inoltre, sono state apportate modifiche al modo in cui Stack Exchange comunica con i moderatori e un processo per quando Stack Exchange stesso sembra aver violato il proprio accordo di moderatore.

Questo sciopero non è paragonabile a uno sciopero dei dipendenti, perché i moderatori di Stack Overflow sono volontari; e nel tipico stile di Stack Overflow, la questione se lo sciopero fosse finito era di per sé oggetto di dibattito, anche se in pratica sembra che la moderazione sia tornata alla normalità.

L’intelligenza artificiale è il filo conduttore tra lo sciopero, il traffico e i nuovi servizi. Stack Overflow rimane di enorme importanza per molti sviluppatori, poiché il suo vantaggio rispetto all'intelligenza artificiale è la moderazione e il consenso degli esperti applicati alle sue domande, a condizione che attirino un interesse sufficiente. Detto questo, i siti hanno difficoltà con l’intelligenza artificiale e le sue implicazioni sembrano destinate a continuare.

CONDIVIDERE