Théorie Des Probabilités: Branche de la théorie de la mesure étudiant les phénomènes incertains

Cet article présente la théorie mathématique des probabilités ; pour d'autres notions sur les probabilités voir Probabilité, pour une approche plus élémentaire du calcul des probabilités voir Probabilités (mathématiques élémentaires), pour l'historique de ces notions, voir Histoire des probabilités.

La théorie des probabilités en mathématiques est l'étude des phénomènes caractérisés par le hasard et l'incertitude. Elle forme avec la statistique les deux sciences du hasard qui sont partie intégrante des mathématiques. Les débuts de l'étude des probabilités correspondent aux premières observations du hasard dans les jeux ou dans les phénomènes climatiques par exemple.

Bien que le calcul de probabilités sur des questions liées au hasard existe depuis longtemps, la formalisation mathématique n'est que récente. Elle date du début du XX^e siècle avec l'axiomatique de Kolmogorov. Des objets tels que les événements, les mesures de probabilité, les espaces probabilisés ou les variables aléatoires sont centraux dans la théorie. Ils permettent de traduire de manière abstraite les comportements ou des quantités mesurées qui peuvent être supposés aléatoires. En fonction du nombre de valeurs possibles pour le phénomène aléatoire étudié, la théorie des probabilités est dite discrète ou continue. Dans le cas discret, c'est-à-dire pour un nombre au plus dénombrable d'états possibles, la théorie des probabilités se rapproche de la théorie du dénombrement ; alors que dans le cas continu, la théorie de l'intégration et la théorie de la mesure donnent les outils nécessaires.

Les objets et résultats probabilistes sont un support nécessaire à la statistique, c'est le cas par exemple du théorème de Bayes, de l'évaluation des quantiles ou du théorème central limite et de la loi normale. Cette modélisation du hasard permet également de résoudre plusieurs paradoxes probabilistes.

Qu'il soit discret ou continu, le calcul stochastique est l'étude des phénomènes aléatoires qui dépendent du temps. La notion d'intégrale stochastique et d'équation différentielle stochastique font partie de cette branche de la théorie des probabilités. Ces processus aléatoires permettent de faire des liens avec plusieurs domaines plus appliqués tels que les modèles mathématiques utilisés pour la prévision météorologique, la mécanique statistique, le traitement d'images, etc.

Avant que l'étude des probabilités soit considérée comme une science, l'observation du hasard dans les événements naturels a amené les philosophes et les scientifiques à réfléchir sur la notion de liens entre événements, causes et conséquences, et lois de la nature. Les jeux de hasard, les situations météorologiques ou les trajectoires des astres ont fait partie des domaines étudiés. Les explications données sont alors liées au destin, à une colère céleste ou à une présence divine.

Il est communément admis que le début de la science des probabilités se situe au XVI^e siècle avec l'analyse de jeux de hasard par Jérôme Cardan et au XVII^e siècle avec les discussions entre Pierre de Fermat et Blaise Pascal au sujet du problème des partis posé par Antoine Gombaud, chevalier de Méré : comment partager les gains quand la partie est interrompue à un moment quelconque. Cette nouvelle théorie est nommée géométrie aléatoire par le chevalier de Méré en 1654, elle est appelée par la suite calcul conjectural, arithmétique politique et plus communément aujourd'hui théorie des probabilités. Cette théorie, dite des probabilités modernes, est alors étudiée par de nombreux penseurs jusqu'au XIX^e siècle : Kepler, Galilée, Leibniz, Huygens, Halley, Buffon, les frères Bernoulli, Moivre, Euler, D'Alembert, Condorcet, Laplace, Fourier^,. Elle est principalement basée sur les événements discrets et la combinatoire.

Au début du XX^e siècle, Kolmogorov fit la connexion entre la théorie de la mesure de Borel, la théorie de l'intégration de Lebesgue et les probabilités.

Des considérations analytiques ont forcé l'introduction de variables aléatoires continues dans la théorie. Cette idée prend tout son essor dans la théorie moderne des probabilités, dont les fondations ont été posées par Andreï Nikolaevich Kolmogorov. Kolmogorov combina la notion d'univers, introduite par Richard von Mises et la théorie de la mesure pour présenter son système d'axiomes pour la théorie des probabilités en 1933. Très vite, son approche devint la base incontestée des probabilités modernes.

Le XX^e siècle voit également le développement de l'application de la théorie des probabilités dans plusieurs sciences.

Avec la mécanique newtonienne, la théorie du champ électromagnétique ou la thermodynamique, la physique classique est la théorie utilisée jusqu'à la fin du XIX^e siècle. En 1929, Erwin Schrödinger étudie l'équation qui détermine l'évolution d'une onde au cours du temps : l'équation de Schrödinger. Max Born utilise cette équation pour décrire une collision entre des particules telles que des électrons ou des atomes. Les observations de ses expériences l'amène à supposer que la fonction d'onde est la probabilité que la particule soit détectée en un point de l'espace. C'est le début d'une nouvelle approche de la physique quantique.

En 1900, Louis Bachelier fut un des premiers mathématiciens à modéliser les variations de prix boursiers grâce à des variables aléatoires. « le marché n'obéit qu'à une seule loi : la loi du hasard ». Bachelier utilise alors le calcul stochastique pour étudier les variations boursières au cours du temps. En 1970, Fischer Black et Myron Scholes reprennent les idées de Bachelier pour modéliser les rendements d'une action grâce à leur modèle Black-Scholes.

L'utilisation des probabilités en biologie a pris un essor dans les années 1970, notamment dans l'étude de l'évolution des espèces. La reproduction des individus est modélisée par un choix aléatoire des gènes transmis ainsi que des mutations apparaissant de manière aléatoire sur les individus. L'extinction des espèces ou des gènes est alors étudiée en fonction des effets stochastiques.

Suivant les époques ou les domaines d'application, la théorie des probabilités peut prendre des noms différents : la théorie de la probabilité mathématique, le calcul des probabilités, ou plus simplement les probabilités bien qu'il ne faille pas confondre avec une probabilité qui est une loi (ou mesure) de probabilité ou la probabilité d'un événement qui est l'évaluation de son caractère probable. Pour ce dernier terme, voir les différentes approches d'une probabilité.

La théorie des probabilités a évolué au cours de son existence. Dans son cours vers 1893, Henri Poincaré s'exprime ainsi : « On ne peut guère donner de définition satisfaisante de la Probabilité. On dit généralement ... etc. ». Cependant, il est toujours fait mention de l'étude de notions comme le hasard, l'aléa, la chance ou encore le caractère probable d'un événement. Une définition peut être donnée sous la forme :

La théorie des probabilités est l'étude mathématique des phénomènes caractérisés par le hasard et l'incertitude.

C'est-à-dire que la théorie des probabilités est un domaine des mathématiques. Ce n'a pas toujours été le cas, cette théorie a été rattachée à la théorie des jeux de hasard, à la philosophie, les géomètres ont été parmi les premiers scientifiques à utiliser le calcul des probabilités. Il est à noter que le groupe mathématique Bourbaki, créé en 1930 et dont le but est de proposer une présentation cohérente des mathématiques, a été critiqué pour ne pas avoir pris suffisamment en considération la théorie des probabilités : « Bourbaki s'est écarté des probabilités, les a rejetées, les a considérées comme non rigoureuses et, par son influence considérable, a dirigé la jeunesse hors du sentier des probabilités. » soulignait Laurent Schwartz dans son autobiographie.

Axiomatique

 

Pour pleinement appartenir aux mathématiques, la théorie des probabilités a eu besoin d'une axiomatique. Plusieurs constructions sont proposées au début du XX^e siècle comme la théorie des collectifs de Richard von Mises ou l'axiomatique de Andreï Kolmogorov. Cette dernière étant la plus pratique des axiomatiques disponibles à l'époque a été adoptée définitivement par les scientifiques à partir de 1950. Elle a permis d'étudier le calcul des probabilités au-delà des probabilités finies, dites théorie discrète des probabilités et de considérer un cadre plus général pour la théorie des probabilités. Dans cette axiomatique, la théorie des probabilités est basée sur un espace probabilisé et ainsi beaucoup de notions correspondent à des notions de la théorie de l'intégration. Cependant dans la théorie des probabilités, le but est de proposer un modèle prédictif pour une expérience aléatoire.

• Un ensemble, souvent noté ${\displaystyle \Omega }$ , donne la liste de tous les résultats que l'on pourrait obtenir si on réalisait l'expérience. Cet ensemble, dont les éléments sont appelés « éventualités » ou « cas possibles » ou « issues » est également appelé univers (ou champ) des possibles.
• Un ensemble ${\displaystyle {\mathcal {A}}}$  dont les éléments sont tous les événements liés à l'expérience, chaque événement regroupant les éventualités pour lesquelles une certaine propriété est vérifiée. Ces événements, qui peuvent être réalisés ou pas au cours de l'expérience selon le résultat obtenu, représentent les seuls ensembles de possibilités pour lesquels on sait calculer la probabilité de réalisation. Mathématiquement, un élément ${\displaystyle A\in {\mathcal {A}}}$  est un sous-ensemble de ${\displaystyle \Omega }$  et l'ensemble ${\displaystyle {\mathcal {A}}}$  des événements liés à l'expérience possède une structure de tribu.
• L'espace probabilisable ${\displaystyle (\Omega ,{\mathcal {A}})}$  est muni d'une mesure de probabilité afin de pouvoir calculer la probabilité de réalisation de n'importe quel événement lié à l'expérience aléatoire. Mathématiquement, cette mesure de probabilité est une application qui à chaque événement ${\displaystyle A\in {\mathcal {A}}}$  associe une valeur réelle comprise au sens large entre 0 et 1, souvent exprimée en pourcentage, dite probabilité de l'événement A. Cette mesure de probabilité ${\displaystyle \mathbb {P} }$  vérifie les trois axiomes des probabilités :
  1. (positivité) la probabilité d'un événement est une valeur entre 0 et 1 : pour tout ${\displaystyle A\in {\mathcal {A}}}$ , ${\displaystyle 0\leq \mathbb {P} (A)\leq 1}$ ,
  2. (masse unitaire) la probabilité de l'univers est 1 : ${\displaystyle \mathbb {P} (\Omega )=1}$ ,
  3. (additivité) pour toute suite dénombrable d'événements ${\displaystyle A_{1},A_{2},\dots \in {\mathcal {A}}}$  disjoints deux à deux, c'est-à-dire tels que ${\displaystyle A_{i}\cap A_{j}=\emptyset }$  pour tous ${\displaystyle i\neq j}$ , alors ${\displaystyle \mathbb {P} (\bigcup _{i\geq 1}A_{i})=\sum _{i\geq 1}\mathbb {P} (A_{i})}$ .

L'intérêt de cette construction plutôt abstraite est qu'elle permet une explication globale des calculs de probabilités notamment de pouvoir considérer à la fois les théories des probabilités discrète et continue (voir sections suivantes). Elle permet également de résoudre des problèmes probabilistes en cours au début du XX^e siècle comme les paradoxes qui occupaient tant les scientifiques tels que Joseph Bertrand (voir le paradoxe de Bertrand), Émile Borel (voir le paradoxe du singe savant), etc..

Exemples

Donnons une modélisation sous forme d'espace probabilisé d'un exemple simple : le lancer d'un dé usuel cubique parfaitement équilibré.

• ${\displaystyle \Omega =\{1,2,3,4,5,6\}}$ ,
• ${\displaystyle {\mathcal {A}}={\mathcal {P}}(\Omega )=\{\emptyset ,\{1\},\dots ,\{6\},\{1,2\},\dots ,\{1,6\},\{2,3\},\dots ,\{2,3,4,5,6\},\Omega \}}$ 
• ${\displaystyle \mathbb {P} (A)={\frac {\mathrm {Card} (A)}{6}}}$ .

Cependant cette axiomatique n'est pas nécessaire pour calculer des probabilités dans des cas simples notamment dans le cas discret : il est facile de calculer que la probabilité d'obtenir un numéro pair dans le lancer de dé précédent est de 1/2.

Il est également possible de décrire une situation plus complexe. On considère le déplacement d'une particule soumise à des perturbations aléatoires. Si on se limite à l'espace de temps ${\displaystyle [0,1]}$ , l'espace de probabilité naturel est l'ensemble des fonctions continues à valeurs dans ${\displaystyle \Omega ={\mathcal {C}}([0,1],\mathbb {R} ^{3})}$ . Autrement dit, un élément de ${\displaystyle \Omega }$  est une fonction continue ${\displaystyle \omega :[0,1]\rightarrow \mathbb {R} ^{3}}$ . La tribu associée à cet espace est la plus petite tribu qui rende toutes les applications ${\displaystyle \omega }$  mesurables. Reste à définir la mesure de probabilité; un exemple est de prendre la mesure de Wiener, c'est-à-dire la loi d'un mouvement brownien. Le choix de cet espace n'est généralement pas donné, on s'intéresse directement aux propriétés des fonctions définies sur cet espace.

Variable aléatoire

 

L'espace probabilisé ${\displaystyle (\Omega ,{\mathcal {A}},\mathbb {P} )}$  construit dans la section précédente est un espace abstrait. Il n'est pas forcément adapté pour effectuer des calculs. Lorsque les résultats possibles de l'expérience aléatoire ne sont pas des nombres, c'est le cas des résultats pile et face dans un lancer de pièce, il est utile de pouvoir associer une valeur numérique à chaque résultat. Une variable aléatoire remplit ce rôle.

Une variable aléatoire est une application mesurable ${\displaystyle X:\Omega \rightarrow E}$  où ${\displaystyle (E,{\mathcal {E}})}$  est un espace mesurable. C'est-à-dire qu'à chaque éventualité ${\displaystyle \omega \in \Omega }$  est associée une valeur ${\displaystyle X(\omega )}$ . Si cette valeur est réelle, la variable aléatoire est dite réelle.

Comme précisé précédemment, il n'est pas toujours utile de définir l'espace probabilisé ${\displaystyle (\Omega ,{\mathcal {A}},\mathbb {P} )}$ , mais il est possible de donner directement les variables aléatoires sur l'espace ${\displaystyle (E,{\mathcal {E}})}$ . La variable aléatoire s'écrit simplement ${\displaystyle X}$  au lieu de ${\displaystyle X(\omega )}$ .

De la même manière qu'il existe des cas continus et discrets pour la théorie des probabilités, il existe des variables aléatoires discrètes et continues. Il est possible de considérer un vecteur aléatoire comme une variable aléatoire multidimensionnelle : ${\displaystyle X=(X_{1},\dots ,X_{n})}$ . Lorsque la dimension n du vecteur n'est plus finie mais infinie, on parle de marche aléatoire ; lorsque la dimension est infinie non dénombrable, on parle de processus stochastique (voir la section Calcul stochastique ci-dessous).

Exemple

Donnons un exemple simple du lancer de deux dés, ce qui est équivalent à lancer deux fois un dé. Une première variable ${\displaystyle X_{1}}$  aléatoire donne le résultat du premier lancer, une deuxième ${\displaystyle X_{2}}$  donne le résultat du deuxième lancer, c'est-à-dire ${\displaystyle X_{1}(\omega )\in \{1,2,3,4,5,6\}}$  et ${\displaystyle X_{2}(\omega )\in \{1,2,3,4,5,6\}}$  que l'on note plus simplement ${\displaystyle X_{1}\in \{1,2,3,4,5,6\}}$  et ${\displaystyle X_{2}\in \{1,2,3,4,5,6\}}$ .

Il est possible de s'intéresser à la somme des deux résultats, qui peut être notée par une variable aléatoire : ${\displaystyle S\in \{2,3,\dots ,12\}}$ .

Théorie des probabilités discrète

La théorie des probabilités est dite discrète lorsque l'ensemble ${\displaystyle \Omega }$  de l'espace probabilisé est fini ou dénombrable. Le plus simple exemple d'étude en théorie des probabilités discrète est le jeu de pile ou face, dans ce cas l'univers ${\displaystyle \Omega }$  ne contient que deux éléments : pile et face. Les études d'un lancer de dé, d'un tirage d'une carte dans un jeu de cartes ou par exemple du loto font également partie de la théorie des probabilités discrète.

Avant que la théorie de la mesure soit introduite, la probabilité d'un événement a été définie comme le nombre de cas favorables divisé par le nombre de cas possibles. De manière plus pratique, une expérience aléatoire était répétée un nombre N de fois, le nombre de fois où l'événement A est réalisé est noté ${\displaystyle N_{A}}$ . Lorsque N tend vers l'infini, la proportion ${\displaystyle N_{A}/N}$  converge vers une valeur dite probabilité de A.

Cependant ce raisonnement n'est pas si simple pour toute question relative à une expérience aléatoire. Les différentes manières de compter ont amené des paradoxes probabilistes. L'axiomatique de Kolmogorov (voir la section ci-dessus) a permis de résoudre ces problèmes. Dans le cas de la théorie discrète, pour une expérience non répétée, l'axiomatique s'écrit :

${\displaystyle {\begin{cases}\Omega =\{\omega _{1},\omega _{2},\dots ,\omega _{n}\}&{\text{ pour le cas d'un univers fini, }}\\\Omega =\{\omega _{1},\omega _{2},\omega _{3},\omega _{4},\dots \}&{\text{ pour le cas d'un univers infini dénombrable. }}\end{cases}}}$ 

où le choix ${\displaystyle \omega _{1}=1,\omega _{2}=2,\dots }$  peut être effectué pour représenter les différents résultats équiprobables de l'expérience. Plusieurs choix de tribu sont possibles, cependant il est raisonnable pour une étude discrète de choisir la tribu de l'ensemble des parties puisqu'elle contient tous les événements possibles :

${\displaystyle {\mathcal {A}}={\mathcal {P}}(\Omega )}$ .

Dans le cas de la théorie discrète, la mesure de probabilité possède la particularité de pouvoir être définie uniquement sur les singletons : ${\displaystyle \mathbb {P} (\{\omega _{1}\}),\mathbb {P} (\{\omega _{2}\}),\dots }$ . Les probabilités des autres événements s'obtiennent grâce aux axiomes des probabilités (voir la section ci-dessus).

Lorsque l'univers ${\displaystyle \Omega }$  est fini, contenant n éléments, il est possible de choisir la mesure uniforme : ${\displaystyle \mathbb {P} (\{\omega _{1}\})=\dots =\mathbb {P} (\{\omega _{n}\})={\frac {1}{n}}}$  et ainsi obtenir la formule utile et cohérente à l'intuition des scientifiques plus anciens :

${\displaystyle \mathbb {P} (A)={\frac {\mathrm {Card} (A)}{n}}}$  pour tout ${\displaystyle A\in {\mathcal {A}}}$ .

Grâce à l'utilisation de ces formules, la théorie des probabilités discrète repose sur la théorie des combinaisons, aujourd'hui appelée la combinatoire et le dénombrement.

Exemple

Reprenons l'exemple du lancer de deux dés. L'ensemble de tous les possibles est :

${\displaystyle \Omega =\{1,2,3,4,5,6\}^{2}=\{1,2,3,4,5,6\}\times \{1,2,3,4,5,6\}=\{(1,1),(1,2),\dots ,(1,6),(2,1),(2,2),\dots \}}$ 

C'est-à-dire que ${\displaystyle \Omega }$  contient tous les couples de deux chiffres, le premier correspondant au résultat du premier dé, le deuxième au résultat du deuxième. Un choix possible pour la tribu ${\displaystyle {\mathcal {A}}}$  est l'ensemble des parties :

${\displaystyle {\mathcal {A}}={\mathcal {P}}(\Omega )=\{A{\text{ sous-ensemble de }}\Omega \}.}$ 

Le choix de l'espace ${\displaystyle (\Omega ,{\mathcal {A}})}$  est fait de telle sorte que les singletons de ${\displaystyle \Omega }$  aient tous la même probabilité : ils sont dits équiprobables. Il est alors possible de calculer les probabilités de plusieurs événements comme

${\displaystyle A=\{{\text{obtenir 1 pour les deux dés}}\}=\{(1,1)\}}$ , donc ${\displaystyle \mathbb {P} (A)={\frac {1}{36}}}$ .
${\displaystyle B=\{{\text{obtenir 1 pour le premier dé}}\}=\{(1,1),(1,2),\dots ,(1,6)\}}$ , donc ${\displaystyle \mathbb {P} (B)={\frac {6}{36}}={\frac {1}{6}}}$ . ${\displaystyle \mathbb {P} (B)}$  s'obtient également en décomposant en singletons : ${\displaystyle \mathbb {P} (B)=\mathbb {P} (\{(1,1)\})+\dots +\mathbb {P} (\{(1,6)\})={\frac {1}{36}}+\dots +{\frac {1}{36}}={\frac {1}{6}}}$ .

Théorie des probabilités continue

La théorie des probabilités est dite continue lorsque l'univers ${\displaystyle \Omega }$  n'est plus dénombrable mais quelconque, possiblement non topologique. C'est-à-dire lorsque la théorie des probabilités n'est plus discrète.

Il est possible de choisir plusieurs tribus, cependant lorsque l'univers est l'ensemble des réels, il est classique de lui munir la tribu borélienne qui possède de bonnes propriétés. Si ce n'est pas le cas, l'utilisation des variables aléatoires permet de représenter l'univers par l'ensemble des réels ${\displaystyle \mathbb {R} }$ . Le terme théorie des probabilités continue est également utilisé pour désigner le cas où la variable aléatoire, ou la loi de probabilité, associée est absolument continue, c'est-à-dire qu'elle possède une densité.

La mesure de probabilité se définit plus facilement sur ${\displaystyle \mathbb {R} }$ , c'est-à-dire qu'il est plus facile de définir la loi de probabilité de la variable aléatoire :

${\displaystyle \mathbb {P} (A)=\mathbb {P} (\{\omega ,X(\omega )\in B\})=\mathbb {P} (X\in B)}$  pour tout ${\displaystyle A\subset \Omega }$  tel que ${\displaystyle B\subset {\mathcal {E}}}$  soit l'image réciproque de ${\displaystyle A}$  par ${\displaystyle X}$  : ${\displaystyle A=X^{-1}(B)}$ .

Dans certains cas de la théorie des probabilités continue, la variable aléatoire réelle est dite absolument continue par rapport à la mesure de Lebesgue, c'est-à-dire qu'il existe une fonction ${\displaystyle f:\mathbb {R} \rightarrow \mathbb {R} _{+}}$  telle que :

${\displaystyle \mathbb {P} (X\in B)=\int _{\mathbb {R} }\mathbf {1} _{B}(x)f(x)\mathrm {d} x}$ 

où le terme ${\displaystyle \mathbf {1} }$  dans l'intégrale est une indicatrice. La fonction ${\displaystyle f}$  est appelée la densité de probabilité de ${\displaystyle X}$ .

Grâce à l'utilisation de ces formules, la théorie des probabilités continue repose sur la théorie de l'intégration.

Exemple

Des algorithmes de calcul utilisent des valeurs choisies de manière uniforme entre 0 et 1. C'est-à-dire que l'on choisit (aléatoirement) une valeur réelle entre 0 et 1 telle qu'aucune des valeurs n'ait plus de chance d'apparaître qu'une autre. Pour formaliser cette expérience, il y a un espace probabilisé ${\displaystyle (\Omega ,{\mathcal {A}},\mathbb {P} )}$  non détaillé ici, cependant on se donne une variable aléatoire ${\displaystyle X}$  à valeurs dans ${\displaystyle E=[0,1]}$  muni de sa tribu borélienne ${\displaystyle {\mathcal {E}}={\mathcal {B}}([0,1])}$  ainsi que les probabilités :

${\displaystyle \mathbb {P} (X\in [a,b])=b-a}$  pour tout intervalle ${\displaystyle [a,b]}$  inclus dans ${\displaystyle [0,1]}$ .

Calculs élémentaires

 

 

 

Plusieurs formules dites élémentaires se déduisent des axiomes des probabilités (voir la section ci-dessus). Certaines sont intuitives, d'autres le sont moins.

Il est à noter que toute tribu contenant l'ensemble vide, le deuxième axiome des probabilités permet d'obtenir sa probabilité : ${\displaystyle \mathbb {P} (\emptyset )=0}$ . Un événement de probabilité nulle est appelé ensemble négligeable, ensemble ${\displaystyle \mathbb {P} }$ -négligeable, ou ensemble impossible. Il existe des ensembles négligeables autres que l'ensemble vide. Par exemple la probabilité d'obtenir le résultat pile à chaque lancer lors d'une infinité de lancers de pile ou face est nulle.

Il est possible de calculer la probabilité de la négation d'une proposition ; mathématiquement, c'est la probabilité du complémentaire d'un ensemble. Il est également possible d'obtenir la probabilité de se trouver dans une configuration ou dans une autre, cela correspond à une union de deux ensembles. Quant à la probabilité de se retrouver dans deux situations simultanément, c'est la probabilité de l'intersection des deux ensembles. Elle est nulle si et seulement si ces deux ensembles ont une intersection négligeable; c'est le cas en particulier s'ils sont disjoints. En notant ${\displaystyle A^{c}}$  le complémentaire d'un événement ${\displaystyle A}$  et respectivement ${\displaystyle A\cup B}$  et ${\displaystyle A\cap B}$  la réunion et l'intersection de deux événements ${\displaystyle A}$  et ${\displaystyle B}$ , on a :

${\displaystyle \mathbb {P} (A^{c})=1-\mathbb {P} (A),}$ 
${\displaystyle \mathbb {P} (A\cup B)=\mathbb {P} (A)+\mathbb {P} (B)-\mathbb {P} (A\cap B),}$ 
${\displaystyle \mathbb {P} (\emptyset )=0}$ .

Exemple

Reprenons l'exemple du lancer de deux dés.

La probabilité d'obtenir au moins une fois un 6 peut se calculer à partir de la probabilité de ne pas obtenir de 6 lors des deux lancers :

${\displaystyle \mathbb {P} ({\text{ obtenir au moins un 6}})=1-\mathbb {P} ({\text{ne pas obtenir de 6}})=1-\left({\frac {5}{6}}\right)^{2}={\frac {11}{36}}}$ .

Cet événement est le même qu'obtenir un 6 au premier lancer ou un 6 au deuxième lancer. Sa probabilité s'obtient également par le calcul de la probabilité de l'union :

${\displaystyle {\begin{aligned}\mathbb {P} ({{\text{obtenir un 6 au 1}}^{\text{er}}{\text{ ou au 2}}^{\text{ieme}}{\text{ lancer}}})&=\mathbb {P} ({{\text{obtenir 6 au 1}}^{\text{er}}{\text{ lancer}}})+\mathbb {P} ({{\text{obtenir 6 au 2}}^{\text{ieme}}{\text{ lancer}}})-\mathbb {P} ({{\text{obtenir 6 au 1}}^{\text{er}}{\text{ et au 2}}^{\text{ieme}}{\text{ lancer}}})\\&={\frac {1}{6}}+{\frac {1}{6}}-\left({\frac {1}{6}}\right)^{2}={\frac {11}{36}}\end{aligned}}}$ 

Indépendance

La notion d'indépendance est une hypothèse utilisée depuis longtemps en théorie des probabilités. On dit que deux événements sont indépendants lorsque le fait de connaître le résultat du premier événement ne nous aide pas pour prévoir le second et inversement. Plusieurs lancers de dés successifs sont considérés indépendants. Dans ce cas l'hypothèse est raisonnable, cependant d'autres situations d'indépendance peuvent paraître indépendantes alors qu'elles ne le sont pas. C'est le cas par exemple du problème de Monty Hall. L'indépendance n'est pas toujours intuitive et demande alors à être étudiée.

L'indépendance peut se définir sur les ensembles; deux événements A et B sont dits indépendants si la probabilité que A apparaisse ne dépend pas de la connaissance de l'obtention de B. Mathématiquement, les événements sont indépendants si et seulement si la probabilité de leur intersection est égale au produit de leur probabilité :

${\displaystyle A{\text{ et }}B{\text{ sont independants }}\Leftrightarrow \mathbb {P} (A\cap B)=\mathbb {P} (A)\mathbb {P} (B)}$ 

L'indépendance se définit également pour les variables aléatoires en utilisant la formule précédente. Les variables aléatoires X et Y sont indépendantes si :

${\displaystyle \mathbb {P} (X\in C_{1},Y\in C_{2})=\mathbb {P} (X\in C_{1})\mathbb {P} (Y\in C_{2})}$ , pour tout ${\displaystyle C_{1}\in {\mathcal {E}}}$  et tout ${\displaystyle C_{2}\in {\mathcal {E}}}$ ,

en reprenant les notations de la section variable aléatoire et ${\displaystyle {\mathcal {E}}={\mathcal {B}}(\mathbb {R} )}$  pour les variables aléatoires réelles.

De même, des tribus ${\displaystyle {\mathcal {A}}_{1}}$  et ${\displaystyle {\mathcal {A}}_{2}}$  sont dites indépendantes si :

${\displaystyle \mathbb {P} (A_{1}\cap A_{2})=\mathbb {P} (A_{1})\mathbb {P} (A_{2})}$ , pour tout ${\displaystyle A_{1}\in {\mathcal {A}}_{1}}$  et tout ${\displaystyle A_{2}\in {\mathcal {A}}_{2}}$ .

Lorsque l'on considère plusieurs événements, variables aléatoires ou tribus, il existe plusieurs notions d'indépendance. Les événements A, B et C sont dits

• indépendants deux à deux si : ${\displaystyle {\begin{cases}\mathbb {P} (A\cap B)&=\mathbb {P} (A)\mathbb {P} (B),\\\mathbb {P} (A\cap C)&=\mathbb {P} (A)\mathbb {P} (C){\text{ et }}\\\mathbb {P} (B\cap C)&=\mathbb {P} (B)\mathbb {P} (C),\end{cases}}}$ 
• mutuellement indépendants si : ils sont indépendants deux à deux et ${\displaystyle \mathbb {P} (A\cap B\cap C)=\mathbb {P} (A)\mathbb {P} (B)\mathbb {P} (C)}$ .

Ces définitions se généralisent pour plus de trois événements, variables aléatoires ou tribus, possiblement un nombre infini.

Probabilité conditionnelle et théorème de Bayes

À partir des probabilités élémentaires, il est possible de définir la probabilité conditionnelle d'un événement A sachant qu'un autre événement B est réalisé, notée ${\displaystyle \mathbb {P} (A|B)}$  ou ${\displaystyle \mathbb {P} _{B}(A)}$ . Si ${\displaystyle \mathbb {P} (B)\neq 0}$  alors la probabilité de A sachant B est définie par :

${\displaystyle \mathbb {P} (A|B)={\frac {\mathbb {P} (A\cap B)}{\mathbb {P} (B)}}}$ .

Plus mathématiquement, ${\displaystyle \mathbb {P} (\cdot |B)}$  est une nouvelle mesure de probabilité, elle permet de définir des espérances conditionnelles ou des lois conditionnelles. De manière plus générale, il est possible de définir la probabilité conditionnelle sachant une variable aléatoire, une probabilité conditionnelle sachant une tribu, une densité conditionnelle, etc.

Cette formule simple permet de faire le lien entre ${\displaystyle \mathbb {P} (A|B)}$  et ${\displaystyle \mathbb {P} (B|A)}$  par le très utile théorème de Bayes :

${\displaystyle \mathbb {P} (A|B)={\frac {\mathbb {P} (B|A)\mathbb {P} (A)}{\mathbb {P} (B)}}}$ .

 

De même que la remarque précédente, il est possible de donner d'autres versions du théorème de Bayes par un conditionnement utilisant des variables aléatoires, des tribus ou par l'intermédiaire de lois de probabilité.

Il est possible de décomposer la probabilité d'un événement en probabilités conditionnelles sachant toutes les situations possibles. C'est le rôle de la formule des probabilités totales : pour une partition d'événements ${\displaystyle B_{1},B_{2},\dots ,B_{n}}$ , possiblement infinie,

${\displaystyle \mathbb {P} (A)=\mathbb {P} (A|B_{1})\mathbb {P} (B_{1})+\mathbb {P} (A|B_{2})\mathbb {P} (B_{2})+\dots +\mathbb {P} (A|B_{n})\mathbb {P} (B_{n})}$ .

Une manière de représenter cette formule est un arbre de probabilité, chaque branche représente un cas possible.

Exemple

Reprenons l'exemple des deux dés. Considérons les deux événements ${\displaystyle A_{i}}$  : « le résultat du premier lancer est i », B : « le résultat de la somme des deux lancers est 7 » et C : « le résultat du premier lancer est pair ». Il est facile de calculer les probabilités : ${\displaystyle \mathbb {P} (A_{i})=1/6}$ , ${\displaystyle \mathbb {P} (B|A_{i})=1/6}$  et ${\displaystyle \mathbb {P} (C)=1/2}$ . La formule des probabilités totales permet d'obtenir :

${\displaystyle \mathbb {P} (B)=\sum _{i=1}^{6}\mathbb {P} (B|A_{i})\mathbb {P} (A_{i})=\sum _{i=1}^{6}{\frac {1}{6}}.{\frac {1}{6}}={\frac {1}{6}}}$  et ${\displaystyle \mathbb {P} (B|C)=\mathbb {P} (B|A_{2})\mathbb {P} (A_{2})+\mathbb {P} (B|A_{4})\mathbb {P} (A_{4})+\mathbb {P} (B|A_{6})\mathbb {P} (A_{6})={\frac {1}{12}}}$ .

Le théorème de Bayes permet d'obtenir la probabilité d'avoir eu un résultat pair au premier lancer sachant que la somme des deux résultats est de 7 :

${\displaystyle \mathbb {P} (C|B)={\frac {{\frac {1}{12}}.{\frac {1}{2}}}{\frac {1}{6}}}={\frac {1}{4}}}$ .

Lois de probabilité

Comme précisé dans les sections ci-dessus, le choix de la mesure de probabilité pour l'espace probabilisé peut se faire en donnant directement les probabilités ${\displaystyle \mathbb {P} (X\in B)}$  d'une variable aléatoire X. Ainsi la mesure de probabilité donnée par :

${\displaystyle B\mapsto \mathbb {P} _{X}(B)=\mathbb {P} (X\in B)}$ 

 

est appelée la loi de probabilité de la variable X. Elle décrit complètement le comportement de la variable X. De manière plus générale, une loi de probabilité est une mesure décrivant le comportement aléatoire d'un phénomène dépendant du hasard, c'est-à-dire qu'elle n'est pas toujours définie à partir d'une variable aléatoire. Cependant pour une loi de probabilité donnée, il existe une variable aléatoire dont la loi est la loi de probabilité précédente. La représentation d'une loi par une variable aléatoire n'est pas unique, c'est-à-dire que deux variables aléatoires différentes peuvent avoir la même loi. Comme mentionné dans les sections précédentes, il existe des lois discrètes, des lois absolument continues, mais il existe également des lois plus générales. Les lois discrètes et les lois absolument continues peuvent s'écrire respectivement sous la forme :

${\displaystyle \mathbb {P} _{\textrm {disc.}}(B)=\sum _{x\in E}p_{x}\delta _{x}(B)}$  et ${\displaystyle \mathbb {P} _{\textrm {abs.cont.}}(B)=\int _{B}f(x)\mathrm {d} x}$ 

Certaines lois de probabilité sont fréquemment rencontrées en théorie des probabilités car on les retrouve dans de nombreux processus naturels. Les lois discrètes les plus fréquentes sont la loi uniforme discrète, la loi de Bernoulli, ainsi que les lois binomiale, de Poisson et géométrique. Les lois uniforme continue, normale, exponentielle et gamma sont parmi les plus importantes lois continues.

Plusieurs outils permettent de définir et étudier ces lois. La fonction de répartition, la fonction caractéristique, la fonction génératrice, la fonction quantile, la densité de probabilité (pour les lois continues), la fonction de masse (pour les lois discrètes) en sont les exemples principaux.

Espérance et moments

L'espérance est une propriété des lois de probabilités mais elle s'écrit plus simplement en utilisant une variable aléatoire. Elle donne la moyenne de la variable aléatoire X. L'espérance de la variable aléatoire X de loi ${\displaystyle \mathbb {P} _{X}}$  est donnée par :

${\displaystyle \mathbb {E} [X]=\int _{\Omega }X(\omega )\mathbb {P} (\mathrm {d} \omega )=\int _{\mathbb {R} }x\mathbb {P} _{X}(\mathrm {d} x).}$ 

Cette expression s'écrit de manière plus simple dans le cas des variables discrètes et des variables continues (en reprenant les notations de la section Lois de probabilité) : ${\displaystyle \mathbb {E} [X]=\sum _{x\in E}xp(x)}$  pour le cas discret et ${\displaystyle \mathbb {E} [X]=\int _{E}xf(x)\mathrm {d} x}$  pour le cas continu, si les séries et intégrales convergent.

Il est possible de calculer l'espérance d'une fonction de la variable aléatoire par la formule : pour toute fonction ${\displaystyle g:E\rightarrow [0,\infty ]}$  mesurable

${\displaystyle \mathbb {E} [g(X)]=\int _{E}g(x)\mathbb {P} _{X}(\mathrm {d} x)}$ .

Lorsque la fonction ${\displaystyle g}$  est suffisamment générale, alors ${\displaystyle \mathbb {E} [g(X)]}$  permet de récupérer la loi de X. Pour la fonction indicatrice ${\displaystyle g(x)={\mathbf {1} }_{B}(x)}$ , l'espérance redonne la probabilité : ${\displaystyle \mathbb {E} [g(X)]=\mathbb {E} [{\mathbf {1} }_{B}(X))]=\mathbb {P} (X\in B)}$ . Pour les fonctions ${\displaystyle g(x)=x^{n}}$ , les valeurs ${\displaystyle \mathbb {E} [g(X)]=\mathbb {E} [X^{n}]}$  sont les moments de la loi de X.

Ces définitions sont valides pour tout espace de valeurs de la variable aléatoire. Dans le cas multidimensionnel, c'est-à-dire de vecteurs aléatoires réels, la notion d'espérance se généralise en vecteur des moyennes et la variance en matrice de variance-covariance qui donne les variances des coordonnées sur la diagonale et les covariances entre coordonnées dans le reste de la matrice.

L'espérance et les moments permettent d'obtenir des inégalités : sans préciser les conditions d'existence,

• inégalité de Markov : ${\displaystyle \mathbb {P} (|X|\geq t)\leq {\frac {\mathbb {E} [X]}{t}}}$ ,
• inégalité de Bienaymé-Tchebychev : ${\displaystyle \mathbb {P} (|X-\mathbb {E} [X]|\geq t)\leq {\frac {Var[X]}{t^{2}}}}$ .

Ces inégalités sont très utiles pour estimer la queue de la loi d'une variable aléatoire, c'est-à-dire le comportement de la variable aléatoire lorsqu'elle prend des valeurs éloignées de sa moyenne.

Convergences et résultats limites

Lorsque l'on considère un nombre infini de données aléatoires, elles sont modélisées par une suite (infinie) de variables aléatoires. Il peut être utile d'étudier le comportement limite de cette suite. Plusieurs notions de convergences de variables aléatoires ont été définies et des théorèmes limites renseignent sur les résultats asymptotiques.

 

Une suite de variables aléatoires ${\displaystyle (X_{n})_{n\in \mathbb {N} }}$ ^, :

• converge en loi vers une variable aléatoire X si la suite de leurs lois de probabilité ${\displaystyle (\mathbb {P} _{X_{n}},n\in \mathbb {N} )}$  converge étroitement vers une loi ${\displaystyle \mathbb {P} _{X}}$ . En particulier dans le cas réel, cette convergence est équivalente à la convergence des fonctions de répartition vers la fonction de répartition de X en tout point de continuité de cette dernière. Cette convergence est également équivalente à la convergence des fonctions caractéristiques, c'est le théorème de continuité de Paul Lévy.
• converge en probabilité vers une variable aléatoire X si pour tout ${\displaystyle \epsilon >0}$ , ${\displaystyle \lim _{n\rightarrow \infty }\mathbb {P} \left(\left|X_{n}-X\right|\geq \varepsilon \right)=0}$ . Cette convergence implique la convergence en loi.
• converge presque sûrement vers une variable aléatoire X si ${\displaystyle \mathbb {P} (\{\omega /\lim _{n\rightarrow \infty }X_{n}(\omega )=X(\omega )\})=1}$ . Cette convergence implique les convergences en probabilité et en loi.
• converge dans ${\displaystyle L^{p}}$  vers une variable aléatoire X si ${\displaystyle \lim _{n\rightarrow \infty }\mathbb {E} (|X_{n}-X|^{p})=0}$ . Cette convergence implique la convergence en probabilité.

Donnons quelques théorèmes limites importants :

• théorème de Borel-Cantelli : pour une suite ${\displaystyle (A_{n},n\in \mathbb {N} )}$  d'événements, si ${\displaystyle \sum \mathbb {P} (A_{n})}$  converge alors ${\displaystyle \mathbb {P} (\lim \sup A_{n})=0}$ . Réciproquement, si les événements sont indépendants et si ${\displaystyle \sum \mathbb {P} (A_{n})}$  diverge alors ${\displaystyle \mathbb {P} (\lim \sup A_{n})=1}$ .
• loi du zéro un de Kolmogorov (également appelé loi du tout ou rien) : pour une suite ${\displaystyle (X_{n},n\in \mathbb {N} )}$  de variables aléatoires, notons la tribu asymptotique ${\displaystyle {\mathcal {B}}_{\infty }=\cap _{n}{\mathcal {B}}_{n}}$  où ${\displaystyle {\mathcal {B}}_{n}=\sigma (X_{p},p\geq n)}$ , alors pour tout événements ${\displaystyle B\in {\mathcal {B}}_{\infty }}$ , ${\displaystyle \mathbb {P} (B)=}$  0 ou 1. Intuitivement, un événement qui ne dépend que d'un comportement limite est de probabilité 0 ou 1.
• loi des grands nombres (faible) : pour une suite ${\displaystyle (X_{n},n\in \mathbb {N} )}$  de variables aléatoires indépendantes, de même loi et de variance finie, alors ${\displaystyle (X_{1}+\dots +X_{n})/n}$  converge dans ${\displaystyle L^{2}}$  vers la moyenne de la loi commune ${\displaystyle \mathbb {E} [X]}$ . Les hypothèses de ce théorème peuvent être diminuées pour obtenir cette même convergence dans ${\displaystyle L^{2}}$ . Il est également possible d'obtenir une convergence presque sûre, c'est la loi forte des grands nombres. Intuitivement, ces résultats annoncent que lors d'un grand nombre d'expériences, la moyenne calculées des résultats tend à se rapprocher de la moyenne théorique du phénomène aléatoire.
• théorème central limite : pour une suite ${\displaystyle X_{n},n\in \mathbb {N} )}$  de variables aléatoires indépendantes, de même loi et de variance finie, alors ${\displaystyle (X_{1}+\dots +X_{n}-n\mathbb {E} [X_{1}])/{\sqrt {n}}}$  converge en loi vers une variable aléatoire de loi normale ${\displaystyle {\mathcal {N}}(0,Var(X_{1}))}$ . Ce théorème possède plusieurs versions : dans le cas où les variables aléatoires sont de loi de Bernoulli c'est le théorème de Moivre-Laplace, ce théorème peut s'écrire par l'intermédiaire des fonctions de répartition ou des fonctions caractéristiques. Il existe une version multidimensionnelle de ce théorème central limite pour des vecteurs aléatoires.

Pour pouvoir utiliser ces théorèmes de convergence dans les applications, notamment informatiques, il est utile de connaître leur vitesse de convergence : c'est l'étude du principe de grandes déviations.

Le calcul stochastique est l'étude des phénomènes qui évoluent au cours du temps de manière aléatoire. Le temps peut être modélisé de manière discrète, c'est-à-dire par les valeurs entières : ${\displaystyle 0,1,2,\dots }$ , dans ce cas le phénomène est représenté par une suite (infinie) de variables aléatoires : ${\displaystyle (X_{n},n\geq 0)}$ , c'est une marche aléatoire. Le temps peut également être modélisé de manière continue c'est-à-dire par des valeurs réelles ${\displaystyle t\in \mathbb {R} _{+}}$  ou ${\displaystyle t\in \mathbb {R} }$ , il s'agit alors de processus stochastique ${\displaystyle (X_{t},t\geq 0)}$ .

Marche aléatoire et chaîne de Markov

 

 

Parmi les modélisations de phénomènes aléatoires dépendant du temps, certaines l'ont été par un temps discret, c'est-à-dire à valeurs entières : ${\displaystyle n\in \mathbb {N} =\{0,1,2,\dots \}}$ . Un processus ${\displaystyle (X_{n},n\in \mathbb {N} )}$  est appelé marche aléatoire partant d'un point ${\displaystyle x}$  lorsque la variable ${\displaystyle X_{n}}$  s'écrit sous la forme d'une somme de pas aléatoires donnée par des variables :

${\displaystyle X_{0}=x}$  et ${\displaystyle X_{n}=x+Y_{1}+Y_{2}+\dots +Y_{n}}$  pour ${\displaystyle n\geq 1}$ .

L'espace de probabilité et la tribu sur lequel le processus est défini ne sont pas triviaux, et la notion de filtration a donc été introduite. C'est une suite de tribus prévue pour que la marche aléatoire puisse être définie sur chaque tribu de la suite: le processus est dit adapté.

Une propriété particulière des marches aléatoires est régulièrement utilisée. Une marche aléatoire est appelée chaîne de Markov si elle possède la propriété de Markov, c'est-à-dire que le n-ième pas ne dépend pas du comportement du processus avant ce pas. Autrement dit, le comportement à venir ne dépend que du temps présent et non du temps passé. Plusieurs expressions mathématiques traduisent cette propriété; en voici une courante grâce aux probabilités conditionnelles :

${\displaystyle \mathbb {P} (X_{n+1}=y|X_{0},\dots ,X_{n})=\mathbb {P} (X_{n+1}=y|X_{n})}$ .

La probabilité ${\displaystyle \mathbb {P} (X_{n+1}=y|X_{n}=x)}$  est appelée la probabilité de transition de l'état ${\displaystyle x}$  à l'état ${\displaystyle y}$ . Lorsque le nombre d'états possibles est fini, toutes ces probabilités sont résumées dans une matrice stochastique, ou matrice de transition. Elle représente à elle seule la chaîne de Markov. La chaîne de Markov dont les états possibles sont les valeurs entières et telle que les probabilités d'aller vers les plus proches voisins sont identiques est appelée la chaîne de Markov simple sur ${\displaystyle \mathbb {Z} }$ .

Les récurrence et transience d'une chaîne de Markov sont également étudiées. Si une marche aléatoire revient indéfiniment au point de départ, elle est dite récurrente, sinon elle est transiente. Les temps d'arrêt représentent le temps en lequel la marche possède pour la première fois une certaine propriété.

Ces notions se généralisent de plusieurs manières : les pas peuvent être des vecteurs aléatoires multidimensionnels ; les états possibles peuvent être les points d'un graphe plus général : ceci introduit, entre autres, la théorie des graphes aléatoires et la théorie de la percolation qui font partie de la théorie des systèmes dynamiques ; le n-ième pas peut être la somme d'un nombre aléatoire de variables, c'est le cas des processus de branchement.

L'étude du comportement de la marche aléatoire lorsque le temps devient grand amène à considérer des théorèmes limites sur les processus, tels que le théorème de Donsker ou le théorème de Glivenko-Cantelli très utilisés en statistique. Apparaissent alors des processus aléatoires dont le temps n'est plus discret mais continu.

Processus stochastique et processus de Markov

 

L'introduction des processus aléatoires à temps continu a été possible notamment grâce à l'axiomatique de Kolmogorov. Les processus stochastiques sont des familles de variables aléatoires indexées par un indice réel : ${\displaystyle (X_{t};t\in \mathbb {R} _{+})}$ . De même que dans le cas du temps discret, les notions de filtration et de processus adapté, permettent de définir mathématiquement le processus. Les théorèmes d'extension de Kolmogorov et d'extension de Carathéodory permettent de donner l'existence via les lois finies dimensionnelles, c'est-à-dire que le processus est défini par la donnée d'un nombre fini de ses accroissements :

la loi de ${\displaystyle (X_{t_{1}}-X_{t_{0}},X_{t_{2}}-X_{t_{1}},\dots ,X_{t_{n}}-X_{t_{n-1}})}$  peut être donnée par une matrice de variance-covariance.

Des probabilités de transitions sont données par des fonctions du type ${\displaystyle p_{s,t}(x,A)}$  qui donnent la probabilité que le processus soit dans un des états de l'ensemble A au temps ${\displaystyle t}$  sachant qu'au temps ${\displaystyle s}$  le processus était en ${\displaystyle x}$ . Elle doit vérifier l'équation de Chapman-Kolmogorov^, :

${\displaystyle p_{s,t}(x,A)=\int _{E}p_{s,u}(x,\mathrm {d} y)p_{u,t}(y,A)}$ , pour tout ${\displaystyle u\in ]s,t[}$ .

Un exemple important de processus stochastique est le mouvement brownien, il apparait comme limite (en loi) d'une suite de marches aléatoires via le théorème de Donsker, il est également un objet central puisque ses lois finies dimensionnelles sont des lois normales, c'est-à-dire que ses accroissements sont gaussiens. La loi du processus est appelée mesure de Wiener. Le mouvement brownien a été beaucoup étudié et nombreux objets mathématiques lui sont liés : bruit blanc, mouvement brownien fractionnaire, processus de Lévy, pont brownien, arbre brownien, processus stationnaire, etc. Le processus de Poisson est un processus de Markov dont les accroissements sont de loi de Poisson, ce processus de comptage est un processus de sauts.

Différentes méthodes de définition existent : le processus (en) de Feller est un processus de Markov dont les probabilités de transition possède une propriété dite de Feller, le processus d'Ornstein-Uhlenbeck est défini à partir d'une équation différentielle stochastique (voir la section ci-dessous), les processus ponctuels sont définis sur des espaces plus généraux, l'espace des excursions par exemple. Une autre manière est l'utilisation de générateurs infinitésimaux, c'est une fonctionnelle sur les fonctions continues qui décrit comment le processus se déplace de points en points. Le générateur infinitésimal d'un processus de Markov X est l'opérateur A tel que :

${\displaystyle Af(x)=\lim _{t\rightarrow 0}{\frac {1}{t}}\left(\mathbb {E} [f(X_{t})|X_{0}=x]-f(x)\right).}$ 

Les processus stochastiques sont utilisés dans de nombreux domaines : historiquement le mouvement brownien a été utilisé pour modéliser des trajectoires de particules ou pour calculer le nombre d'Avogadro, il est également utilisé pour modéliser des phénomènes tels que les marchés financiers dont les premiers travaux sont dus à Louis Bachelier ou les travaux en physique par les travaux de Sydney Chapman.

Martingales

Parmi les processus stochastiques à temps discret et à temps continu, certains possèdent une propriété liée à la filtration ${\displaystyle ({\mathcal {F}}_{n},n\in \mathbb {N} )}$  sur laquelle ils sont définis. Un processus ${\displaystyle (X_{n},n\in \mathbb {N} )}$  est appelé une martingale si :

pour tout ${\displaystyle n\in \mathbb {N} ,\mathbb {E} [X_{n+1}|{\mathcal {F}}_{n}]=X_{n}}$ .

Cette définition se généralise pour un processus stochastique en temps continu. Le processus est une sur-martingale si ${\displaystyle \mathbb {E} [X_{n+1}|{\mathcal {F}}_{n}]\leq X_{n}}$  et une sous-martingale si ${\displaystyle \mathbb {E} [X_{n+1}|{\mathcal {F}}_{n}]\geq X_{n}}$ . Intuitivement la valeur moyenne du processus à un temps futur n + 1 connaissant le passé est égale à la valeur présente du processus. C'est une représentation du bénéfice dans un jeu équitable, c'est de cette correspondance que provient le nom martingale. Une sous-martingale correspond à un jeu favorable et une sur-martingale à un jeu défavorable.

Les martingales ont donc une moyenne constante en tout temps ainsi qu'en certains temps aléatoires : les temps d'arrêt, c'est ce qu'annonce le théorème d'arrêt de Doob.

Les bonnes propriétés des martingales permettent d'obtenir des inégalités ainsi que des résultats de convergence.

Formule d'Itô et équations différentielles stochastiques

Une intégrale stochastique est soit l'intégration d'un processus aléatoire par rapport à une mesure (non aléatoire), soit l'intégration d'une fonction (localement bornée) par rapport à un processus stochastique (semi-martingale continue). Dans le cas où la fonction est étagée, l'intégrale se définit simplement par une formule du type :

${\displaystyle \int f(t)\mathrm {d} X_{t}=\sum _{i=0}^{n}f_{i}(X_{t_{i+1}}-X_{t_{i}})}$ .

De manière plus générale, l'intégrale se définit à partir d'un objet appelé crochet de martingale. L'intégrale ${\displaystyle Y_{t}=\int f(t)\mathrm {d} X_{t}}$  s'écrit alors de manière plus simple avec la notation : ${\displaystyle \mathrm {d} Y_{t}=f(t)\mathrm {d} X_{t}}$ . En particulier on obtient ${\displaystyle (dB_{t})^{2}=dt}$ .

La formule d'Itô dans sa formule générale la plus courante s'écrit sous la forme : pour une fonction ${\displaystyle t,x)\mapsto \varphi (t,x)}$  de classe C1 en ${\displaystyle t}$  et de classe C2 en ${\displaystyle x}$  :

${\displaystyle \mathrm {d} \varphi (t,X_{t})=B(t,X_{t}){\frac {\partial }{\partial x}}\varphi (t,X_{t})\mathrm {d} \beta _{t}+\left({\frac {\partial }{\partial t}}\varphi (t,X_{t})+A(t,X_{t}){\frac {\partial }{\partial x}}\varphi (t,X_{t})+{\frac {1}{2}}B^{2}(t,X_{t}){\frac {\partial ^{2}}{\partial x^{2}}}\varphi (t,X_{t})\right)\mathrm {d} t}$ 

où ${\displaystyle \beta }$  est un mouvement brownien et X est un processus stochastique solution de l'équation différentielle stochastique :

${\displaystyle \mathrm {d} X_{t}=A(t,X_{t})\mathrm {d} t+B(t,X_{t})\mathrm {d} \beta _{t}}$ .

Cette formule permet d'obtenir des formules utiles dans le cas du mouvement brownien ${\displaystyle B_{s})_{s\geq 0}}$  par exemple :

${\displaystyle \varphi (B_{t})=\varphi (B_{0})+\int _{0}^{t}\varphi '(B_{s})dB_{s}+{\frac {1}{2}}\int _{0}^{t}\varphi ''(B_{s})ds}$ , ou
${\displaystyle B_{t}^{2}-t=2\int _{0}^{t}B_{s}dB_{s}}$ .

Calcul de Malliavin

Le Calcul de Malliavin, également connu sous le nom calcul stochastique des variations, est une méthode de calculer grâce à des opérateurs différentiels de dimension infinie sur l'espace de Wiener. Il a été initié par Paul Malliavin pour étudier les propriétés des fonctionnelles appliquées au processus de Wiener. Le calcul de Malliavin comprend l'utilisation d'un opérateur différentiel, une formule d'intégration par parties liées aux intégrales stochastiques mais également la notion de matrice de covariance.

Les domaines liés avec la théories des probabilités sont nombreux, donnons ici quelques exemples.

Statistique

La statistique et la théorie des probabilités forment les sciences de l'aléatoire. Ces deux sciences utilisent les mêmes outils aléatoires (loi de probabilité, espérance, écart-type, etc), les frontières entre ces deux domaines sont assez floues. Une des différences entre statistique et probabilité vient de l'interprétation faite du hasard : c'est la différence entre probabilité a priori et probabilité a posteriori. Intuitivement, les probabilités permettent d'évaluer les chances de réalisation d'un évènement dans un cadre prédéfini alors que la statistique est l'étude et l'analyse de caractères à partir de données récoltées.

Les notions de la théorie des probabilités sont les outils à la base de la théorie statistique. Certaines lois de probabilités ont même une utilisation principalement en statistique plutôt que dans la modélisation directe d'un phénomène.

Jeux et paris

Les jeux de hasard ont été une des premières motivations pour développer le calcul des probabilités, avec notamment le problème des partis. Les raisonnements au début faits de manière peu rigoureuse sont devenus plus élaborés avec l'arrivée de l'axiomatique de Kolmogorov. Cette écriture scientifique permet dorénavant de pouvoir faire des calculs plus précis sur des questions autour des jeux de hasard : calcul de probabilité dans les jeux de dés, dans les jeux de pile ou face, pour les paris à la loterie, etc. Ces études ont alors donné naissance à une théorie : la théorie des jeux.

De nombreux paradoxes probabilistes sont devenus des jeux mathématiques : c'est le cas du problème de Monty Hall, du paradoxe des prisonniers ou encore du problème de la Belle au bois dormant.

Physique

Biologie

De nombreuses méthodes statistiques sont utilisées en biologie pour réaliser des échantillonnages d'individus et pouvoir ainsi mieux connaître la population entière. Ces données statistiques sont alors étudiées grâce au calcul des probabilités.

Économie

Le calcul des probabilités permet de mieux apprécier les risques économiques qui sont considérés comme aléatoires. C'est le cas dans les calculs d'assurances, dans la gestion des stocks ou dans la finance moderne telle que la création d'un portefeuille d'actifs ou dans les activités de spéculation.

Ouvrages