Mathématiques · Glossaire

Qu'est-ce que « Indépendance » ?

Aussi appelé : événements indépendants

Définition 21.19 Mathématiques universitaires — Licence 2 · Chapitre 21 — Probabilités sur les espaces dénombrables

Deux événements AA et BB sont indépendants si P(AB)=P(A)P(B)\P(A \cap B) = \P(A)\P(B). Une famille (Ai)iI(A_i)_{i \in I} d’événements est (mutuellement) indépendante si pour toute partie finie JIJ \subseteq I,

P(iJAi)=iJP(Ai).\P\Bigl(\bigcap_{i \in J} A_i\Bigr) = \prod_{i \in J} \P(A_i) .

Exemples

Exemple 21.21 (Indépendance lue sur une structure de produit)

Lançons deux dés équilibrés : Ω=[ ⁣[1,6] ⁣]2\Omega = \intint16^2 avec des poids uniformes. Posons A=A = {}« premier dé pair » et B=B = {}« second dé au moins 55 ». Dénombrement : A=36=18\abs A = 3\cdot6 = 18, B=62=12\abs B = 6\cdot2 = 12, AB=32=6\abs{A\cap B} = 3\cdot2 = 6, de sorte que

P(AB)=636=18361236=P(A)P(B):\P(A\cap B) = \frac6{36} = \frac{18}{36}\cdot\frac{12}{36} = \P(A)\,\P(B) :

indépendants, et le mécanisme est visible — AA ne contraint que la première coordonnée, BB que la seconde, et la mesure uniforme sur un ensemble produit fait multiplier les dénombrements par coordonnée. Toute affirmation du type « des événements dépendant de groupes disjoints de lancers sont indépendants » (utilisée massivement dans le devoir du week-end) est ce calcul, avec davantage d’indices.

Exemple 21.8 (La borne de l’union : grossière mais indestructible)

La sous-additivité avec un nombre fini d’événements — la borne de l’union — échange la précision contre l’universalité. Pour le problème des anniversaires avec 2323 personnes, borner la probabilité de collision par la somme sur les paires donne

P(collision)(232)1365=2533650.693,\P(\text{collision}) \leq \binom{23}2\cdot\frac1{365} = \frac{253}{365} \approx 0.693 ,

contre la vraie valeur 0.5070.507 : éloignée d’une large marge, car les collisions se recouvrent. Pourtant la borne ne requiert aucune indépendance, aucune loi jointe, rien d’autre que les probabilités des paires — c’est pourquoi, dans le devoir du week-end et tout au long du Chapitre 22, la borne de l’union est le premier outil dégainé : lorsqu’elle se trouve être petite, l’affaire est réglée sans autre modélisation.

Exemple 21.15 (La collision d’anniversaires, par la règle des probabilités composées)

Avec nn personnes dont les anniversaires sont indépendants et uniformes sur 365365 jours, posons Dn=D_n = {}« les nn anniversaires sont tous distincts ». En conditionnant personne par personne (règle des probabilités composées) :

P(Dn)=k=1n1(1k365),\P(D_n) = \prod_{k=1}^{n-1}\Bigl(1 - \frac{k}{365}\Bigr),

chaque nouvelle personne devant éviter les kk jours déjà pris. Pour n=23n = 23 : P(D23)0.493\P(D_{23}) \approx 0.493 — un anniversaire partagé est déjà plus probable qu’improbable. L’heuristique qui explique la petitesse de 2323 : en prenant les logarithmes, lnP(Dn)k<nk365=(n2)365-\ln \P(D_n) \approx \sum_{k<n}\frac k{365} = \frac{\binom n2}{365}, et (232)=253\binom{23}2 = 253 donne 253/3650.693ln2253/365 \approx 0.693 \approx \ln 2. Ce qui importe, c’est le nombre de paires, qui croît quadratiquement : les problèmes de collision vivent à l’échelle n365n \sim \sqrt{365}, non n365n \sim 365 — le paradoxe des anniversaires est une racine carrée déguisée.

Lire dans le chapitre →
Définition 22.4 Mathématiques universitaires — Licence 3 · Chapitre 22 — Probabilités : fondements et loi des grands nombres

Des sous-σ\sigma-algèbres A1,,AnA\mathcal A_1, \dots, \mathcal A_n \subseteq \mathcal A sont indépendantes si P(A1An)=P(Ai)\P(A_1\cap\dots\cap A_n) = \prod\P(A_i) pour tous AiAiA_i \in \mathcal A_i ; des événements sont indépendants si les σ\sigma-algèbres {,Ai,Aic,Ω}\{\varnothing, A_i, A_i^c, \Omega\} le sont ; des variables aléatoires X1,,XnX_1, \dots, X_n si les σ\sigma-algèbres σ(Xi)=Xi1(B(R))\sigma(X_i) = X_i^{-1}(\mathcal B(\R)) le sont. Une famille infinie est indépendante si toute sous-famille finie l’est.

Exemples

Exemple 22.7 (Le problème des anniversaires, honnêtement)

Parmi nn personnes d’anniversaires indépendants, uniformes sur N=365N = 365 jours, la probabilité que tous les anniversaires diffèrent est

pn=k=1n1(1kN),p_n = \prod_{k=1}^{n-1}\Bigl(1 - \frac kN\Bigr),

par conditionnement itéré (ou directement : les N(N1)(Nn+1)N(N-1)\cdots(N - n + 1) favorables sur le total NnN^n, un argument de comptage que la formule produit de l’indépendance rend rigoureux). En prenant les logarithmes et en utilisant ln(1x)=x+O(x2)-\ln(1 - x) = x + O(x^2) :

lnpn=n(n1)2N+O(n3N2),doncpnen2/2N.\ln p_n = -\frac{n(n-1)}{2N} + O\Bigl(\frac{n^3}{N^2}\Bigr), \qquad\text{donc}\qquad p_n \approx \eu^{-n^2/2N} .

Le point de bascule pn=12p_n = \frac12 se situe en n2Nln21.18Nn \approx \sqrt{2N\ln2} \approx 1.18\sqrt N : pour N=365N = 365, n=23n = 23 (p23=0.4927p_{23} = 0.4927). Deux morales. Premièrement, les collisions parmi nn items dans NN boîtes apparaissent à l’échelle nNn \sim \sqrt N, non nNn \sim N — l’échelle des anniversaires qui gouverne les collisions de hachage et le coût N\sqrt N des attaques d’anniversaire en cryptographie. Deuxièmement, le calcul est un modèle : les (n2)\binom n2 événements de collision par paires ne sont pas indépendants, et pourtant la réponse se comporte comme s’ils l’étaient (e(n2)/N\eu^{-\binom n2/N} est exactement l’heuristique des paires indépendantes) — une première instance de l’approximation de Poisson rendue rigoureuse dans le problème de week-end du Chapitre 23 (inégalité de Le Cam).

Exemple 22.14 (Ce que la loi forte achète)

(a) Fréquences : pour des piles ou faces i.i.d., la fréquence observée de faces converge p.s. vers pp — la justification empirique de la probabilité elle-même. (b) Monte-Carlo : pour gL1([0,1])g \in L^1(\intcc01) et (Un)(U_n) i.i.d. uniformes (Théorème 22.6), 1nkng(Uk)01g\frac1n\sum_{k\leq n}g(U_k) \to \int_0^1g p.s. : intégrales par échantillonnage, en toute dimension, au taux indépendant de la dimension n1/2\sim n^{-1/2} précisé au Chapitre 23. (c) Nombres normaux : presque tout nombre réel a, dans son développement binaire, une fréquence asymptotique 12\frac12 de uns (appliquer la loi forte aux variables chiffres du Théorème 22.6) — le théorème de Borel, un énoncé sur les nombres de tous les jours prouvé par la mesure : le Problème 22.1 le complète dans toutes les bases.

Lire dans le chapitre →