A Remoção do Encoder no Transformer e o Valor dos Livros Pré-2023 na Era da IA Generativa
Em um estudo recente publicado na biblioteca digital da ACM, pesquisadores demonstraram que a degradação recursiva de modelos de linguagem treinados sobre dados sintéticos gera um colapso epistêmico irreversÃvel em poucas gerações de ajuste fino. Esse fenômeno, conhecido como model collapse, revela um paradoxo fundamental na engenharia de aprendizado de máquina moderna: quanto mais dependemos […]






