IBI-000385 - Critiquepublie
Biais d'apprentissage par renforcement humain biaisé
Biased RLHF Preference Bias
Score IBI
9.2
sur 10
Sévérité5_critique
Fréquencesystematique
Ampleur groupes5
Difficulté détection4
🇫🇷 Définition (FR)
Biais introduits par les préférences des annotateurs RLHF, souvent non représentatifs.
🇬🇧 Definition (EN)
Bias introduced by RLHF annotator preferences, often non-representative.
Taxonomie TriAxis
Classification structurelle
O
Origine
O3
Humain-Cognitif
L
Cycle de vie
L5
Apprentissage
S
Spécifique
S05
Biais d'annotation
💡
Exemple concret
Les annotateurs RLHF de GPT-4 (majoritairement jeunes, américains) introduisent des biais culturels dans le modèle.
📊 Métriques de détection
Annotation AgreementDemographic Parity Difference
⚙ Seuils d'alerte
Annotation Agreement0.8
Demographic Parity Difference0.1
📚 Sources & Références Scientifiques
- •Open Problems and Fundamental Limitations of Reinforcement Learning from Human FeedbackStephen Casper, Xander Davies, Claudia Shi, Thomas Krendl Gilbert, J�r�my Scheurer, Javier Rando, Rachel Freedman et al. (32 auteurs) (2023)
- •
🛡 Impact & Mitigation
🔬 Preuves documentées (Études & Incidents)
- OpenAI rolls back ChatGPT's sycophancy and explains what went wrong : Source : https://venturebeat.com/ai/openai-rolls-back-chatgpts-sycophancy-and-explains-what-went-wrong
Impact :
🎯 Groupes vulnérables impactés
Locuteurs langues minoritairesZones rurales
🛠 Méthodologies de mitigation
- AUDIT_TIERS : Audit par tiers indépendant
🏢 Secteurs concernés
Médias et plateformes sociales (Risque: /5)
⚖ Réglementations applicables
🇪🇺 Europe
- •AI_ACT_10 : AI Act (UE) 2024/1689
- •AI_ACT_15 : AI Act (UE) 2024/1689
- •AI_ACT_9 : AI Act (UE) 2024/1689
🇺🇸 États-Unis
- •US_CO_SB24_205 : Colorado AI Act (SB 24-205)
- •US_NIST_AI_RMF : NIST AI Risk Management Framework 1.0
🌍 International
- •ISO_42001 : ISO/IEC 42001:2023
- •UNESCO_2021 : UNESCO - Recommandation sur l'éthique de l'IA
- •OECD_AI_PRINCIPLES : OCDE - Principes IA
- •COE_AI_CONVENTION_INT : Conseil de l'Europe - Convention IA
🌐 autre
- •SG_AI_GOVERNANCE : Singapour - AI Governance Framework
📋 Métadonnées
Contributeur
Mohamadou SIDIBE
Institution
AI BIAIS INITIATIVE
Version
1
Créé le
14 octobre 2026
Mis à jour le
4 novembre 2026
UUID
c0ebe062-1f6b-4d0a-8818-eee3089d6374
Explorer d'autres biais
250 biais documentés, classés par la taxonomie TriAxis.