The Agent Architect #36: Uncertainty Quantification

Le pattern de la semaine

Uncertainty Quantification

Quoi:

Sépare l'incertitude du modèle du bruit irréductible, puis restitue des plages de prédiction et des niveaux de confiance en plus des estimations ponctuelles.

Quand l'utiliser:

Décisions à fort enjeu où les utilisateurs doivent connaître la fiabilité d'une prédiction, ou lorsque des systèmes en aval doivent ajuster leur comportement selon le niveau de confiance.

Vigilance:

Des intervalles mal calibrés induisent les utilisateurs en erreur et créent une fausse confiance ; la validation sur des données réservées est indispensable et souvent négligée.

Cette semaine en IA agentique

• Experiment with Qwen3.8-Flash-Next on NVIDIA GB300 NVL72 for Agentic CodingNVIDIA Developer

  Alibaba released Qwen3.8-Flash-Next model weights, a multimodal mixture-of-experts model with 125B main parameters.

• Experiment with Qwen3.8-Flash-Next 176B Model on NVIDIA GB300 NVL72 for Agentic CodingNVIDIA Developer

  Alibaba released Qwen3.8-Flash-Next model weights, a 176B parameter multimodal mixture-of-experts model for developer evaluation.

• When Does Bigger Help? A Controlled Study of LLM Scale for Ontology LearningarXiv cs.AI

  Controlled evaluation of 13 LLMs across Qwen and GPT variants shows varying effects of model scale on ontology learning performance.

• A Model with No Head and Many ThoughtsarXiv cs.AI

  Method replaces vocabulary projection with lightweight projector to enable reasoning in embedding space.

• AI Agent Latency 101: How do I speed up my AI agent?LangChain

  Strategies to reduce AI agent latency include optimizing LLM calls, enabling parallelism, and improving user experience.