A equipe de pesquisa de IA da Meta, empresa controladora do Facebook, está trabalhando no desenvolvimento do que chama de Avaliador Autodidata para grandes modelos de linguagem (LLMs), o que pode ajudar as empresas a reduzir seus requisitos de tempo e recursos humanos ao desenvolver LLMs personalizados.
No início deste mês, a equipe de pesquisa de IA da gigante das mídias sociais, chamada Meta FAIR, publicou um artigo sobre a tecnologia, que afirma que esses avaliadores podem ajudar um LLM a criar seus próprios dados de treinamento — dados sintéticos — para fins de avaliação.
Normalmente, os modelos usados como avaliadores, conhecidos como LLM-as-a-Judge, são treinados com grandes quantidades de dados anotados por humanos, o que é um processo caro, e os dados se tornam obsoletos à medida que o modelo melhora, explicaram os pesquisadores no artigo.
