Do arquivo: Perguntamos a @MarkChen (diretor de pesquisa da @OpenAI) como perseguir as métricas do usuário pode prejudicar o desenvolvimento da IA. Ele destacou como perseguir métricas simples, como usuários ativos diários (DAU), pode distorcer o comportamento de um modelo ao longo do tempo: "Se você apenas aumentar as respostas em que os usuários dizem polegar para cima, isso cria uma condição para um modelo... onde começa a te sugar, dizendo 'ei, você está certo', mesmo em situações complicadas em que objetivamente você diria que essa pessoa está errada." Chen descreveu a necessidade de uma abordagem cuidadosa das métricas: "Precisamos ter opiniões sobre os recursos que construímos. Construa para as coisas que as pessoas vão querer, talvez não necessariamente saibam que querem hoje, e então use o DAU como um subproduto." "Não queremos cair nessas armadilhas em que daqui a três, quatro anos isso se transforma em isca de engajamento."
34,88K