
Microsoft aprimora o Azure AI Foundry com otimização de preferência direta
A Microsoft realizou avanços significativos em seu portal Azure AI Foundry, juntamente com as APIs e SDKs do Azure OpenAI Service. A atualização mais recente apresenta a Otimização de Preferência Direta (DPO) para GPT-4.1 e GPT-4.1-mini. Essa abordagem inovadora de ajuste fino permite o ajuste dos pesos do modelo com base nas preferências do usuário, utilizando uma comparação entre respostas preferenciais e não preferenciais.
Vantagens da Otimização de Preferência Direta
O DPO apresenta uma alternativa atraente ao tradicional Aprendizado por Reforço por Feedback Humano (RLHF).Uma de suas principais vantagens é que ele exige consideravelmente menos poder computacional e tempo, ao mesmo tempo em que alinha os modelos de forma eficaz às expectativas do usuário. As organizações podem utilizar esse método para ajustar os modelos e refletir melhor sua identidade de marca, padrões de segurança e nuances conversacionais específicas.
Expansão global de treinamento
Além da integração com o DPO, a Microsoft ampliou seus recursos de Treinamento Global de IA do Azure para incluir mais doze regiões. Essa expansão inclui áreas como Leste dos EUA, Oeste da Europa, Sul do Reino Unido e Norte da Suíça.É importante observar, no entanto, que essa iniciativa ainda está em fase de pré-visualização pública.
Olhando para o futuro: próximos recursos
A Microsoft prevê recursos futuros que aprimorarão a experiência do usuário, como a capacidade de pausar e retomar processos e recursos que suportam ajustes finos contínuos. Além disso, a introdução do GPT-4.1-nano nas regiões recém-adicionadas está próxima.
Considerações sobre soberania e privacidade de dados
A expansão do Treinamento Global é particularmente significativa em relação à soberania de dados. Com os recentes esforços da União Europeia defendendo a gestão de dados localizada na Europa, garantir privacidade e conformidade aprimoradas é mais crucial do que nunca.
Introdução à API de Respostas
Em mais uma iniciativa para facilitar o trabalho dos desenvolvedores, a Microsoft lançou uma nova API de Respostas, adaptada para modelos com ajuste fino. Essa API aumenta o potencial de integração em diversos aplicativos e é particularmente vantajosa para fluxos de trabalho que exigem conversas com estado e múltiplas etapas. De acordo com a Microsoft, a API de Respostas “reúne tudo automaticamente em segundo plano”, otimizando a experiência do usuário.
Principais recursos da API de respostas
Esta API oferece uma variedade de recursos, incluindo:
- Retenção de contexto para melhorar a coerência da conversação.
- Transparência no raciocínio do modelo durante a geração de respostas.
- Acompanhamento do progresso do usuário à medida que as respostas são formuladas.
- Suporte para processamento em segundo plano e integração com ferramentas como pesquisa na web e consulta de arquivos.
Para mais informações sobre essas atualizações, confira a postagem oficial do blog da Microsoft sobre os serviços de IA do Azure.
Imagem via Depositphotos.com
Deixe um comentário