התפלגות משותפת

באיור מוצגות תצפיות רבות (בשחור) הלקוחות מהתפלגות משותפת (התפלגות רב-נורמלית). ניתן לראות גם את פונקציות הצפיפות השוליות (בכחול ובאדום).

בהינתן שני משתנים מקריים המוגדרים על אותו מרחב הסתברות, ההתפלגות המשותפת היא האופן שבו ההסתברות מתפלגת על זוגות ערכים אפשריים של שני המשתנים. באופן דומה ניתן להגדיר התפלגות משותפת לכל מספר נתון של משתנים מקריים. מתוך ההתפלגות המשותפת יניתן לקבל את ההתפלגויות השוליות, שהן ההתפלגויות של כל אחד מהמשתנים המקריים. ניתן גם לקבל את ההתפלגויות המותנות, שהן ההתפלגויות של משתנה מקרי אחד כאשר הערכים של המשתנים המקריים האחרים נתונים.

באופן פורמלי בתורת המידה, ההתפלגות המשותפת ניתנת על ידי מידה, פונקציה לא שלילית המוגדרת על מרחב המדגם.

במקרה של משתנים מקריים המקבלים ערכים ממשיים, ניתן לתאר את ההתפלגות משותפת, באמצעות פונקציית ההתפלגות המצטברת הרב-משתנית, או על-ידי פונקציית צפיפות רב-משתנית במקרה של משתנים רציפים ופונקציית הסתברות רב-משתנית במקרה של משתנים בדידים.

פונקציית התפלגות מצטברת משותפת

עבור זוג משתנים מקריים $X,Y$, פונקציית ההתפלגות המצטברת המשותפת (CDF) $F_{XY}$ ניתנת על ידי,

$$F_{XY}(x,y)=\Pr(X\leq x,Y\leq y)$$

כאשר הצד הימני מייצג את ההסתברות שהמשתנה המקרי $X$ מקבל ערך קטן או שווה ל- $x$ וגם $Y$ מקבל ערך קטן או שווה ל- $y$ .

בהינתן $n$ משתנים מקריים $X_{1},\ldots ,X_{n}$, פונקציית ההתפלגות המצטברת המשותפת $F_{X_{1},\ldots ,X_{n}}$ ניתנת ע"י,

$$F_{X_{1},\ldots ,X_{n}}(x_{1},\ldots ,x_{n})=\Pr(X_{1}\leq x_{1},\ldots ,X_{n}\leq x_{n})$$

ניתן להתייחס ל-$n$ משתנים מקריים כוקטור מקרי $\mathbf {X} =(X_{1},\ldots ,X_{n})^{T}$. במקרה כזה נהוג להשתמש בסימון,

$$F_{\mathbf {X} }(\mathbf {x} )=\Pr(X_{1}\leq x_{1},\ldots ,X_{n}\leq x_{n})^{T}$$

כאשר $\mathbf {x} =(x_{1},\ldots ,x_{n})^{T}$ הוא וקטור.

פונקציית הסתברות משותפת

במקרה של משתנים מקריים בדידים משתמשים בפונקציית ההסתברות המשותפת של שני משתנים מקריים $X,Y$,

$$p_{X,Y}(x,y)=\Pr(X=x,Y=y)$$

אם $\Omega$ הוא מרחב המדגם, $X(\Omega )$ ו-$Y(\Omega )$ הם קבוצות הערכים ש-$X$ ו-$Y$ יכולים לקבל, אז במקרה של שני משתנים מתקיים,

$$\sum _{x\in X(\Omega )}\sum _{y\in Y(\Omega )}p_{XY}(x,y)=1$$

באמצעות פונקציית ההסתברות ניתן לחשב הסתברות של כל מאורע המוגדר באמצעות $X$ ו-$Y$, $A\subseteq \Omega (X)\times \Omega (Y)$,

$$\Pr \left((X,Y)\in A\right)=\sum _{(x,y)\in A}p_{XY}(x,y)$$

באופן דומה, עבור$n\,$ משתנים אקראיים $X_{1},X_{2},\dots ,X_{n}$ קיימת פונקציית הסתברות משותפת,

$$p_{X_{1}\ldots X_{n}}(x_{1},\ldots ,x_{n})=\Pr(X_{1}=x_{1},\ldots ,X_{n}=x_{n})$$

עבורה מתקיים,

$$\sum _{x_{1}\in X_{1}(\Omega )}\cdots \sum _{x_{n}\in X_{n}(\Omega )}p_{X_{1}\ldots X_{n}}(x_{1},\ldots ,x_{n})=1$$

ועבור $A\subseteq \Omega (X_{1})\times \cdots \times \Omega (X_{n})$ מתקיים,

$$\Pr \left((X_{1},\ldots ,X_{n})\in A\right)=\sum _{(x_{1},\ldots x_{n})\in A}p_{X_{1}\ldots X_{n}}(x_{1},\ldots ,x_{n})$$

דוגמה

נתון כד עם ארבעה כדורים, שניים כחולים, אחד אדום ואחד לבן. מוציאים מהכד שני כדורים ללא החזרה. נגדיר משתנה מקרי $X$ כמספר הכדורים האדומים שהוצאו, ומשתנה מקרי $Y$ כמספר הכדורים הכחולים שהוצאו. הטבלה להלן מתארת את פונקציית ההסתברות המשותפת של $X$ ו-$Y$. למשל $p_{XY}(0,2)={\frac {1}{6}}$.

	$Y=0$	$Y=1$	$Y=2$
$X=0$	$0$	${\frac {1}{3}}$	${\frac {1}{6}}$
$X=1$	${\frac {1}{6}}$	${\frac {1}{3}}$	$0$

באמצעות פונקציית ההסתברות המשותפת ניתן לחשב מאורעות המוגדרים באמצעות $X$ ו-$Y$. למשל,

$\Pr(X+Y=2)=p_{XY}(0,2)+p_{XY}(1,1)={\frac {1}{6}}+{\frac {1}{3}}={\frac {1}{2}}$.

כהדגמה של חישוב פונקציית התפלגות מצטברת משותפת נחשב, $F_{XY}(1.5,1.5)=\Pr(X\leq 1.5,Y\leq 1.5)=p_{XY}(1,1)+p_{XY}(0,1)+p_{XY}(1,0)={\frac {1}{3}}+{\frac {1}{3}}+{\frac {1}{6}}={\frac {5}{6}}$.

פונקציית צפיפות משותפת

במקרה שהמשתנים המקריים רציפים משתמשים עבור שני משתנים מקריים בפונקציית צפיפות משותפת $f_{X,Y}(x,y)$. בתנאים מסוימים ניתן לקבלה על ידי הביטויים,

$$f_{X,Y}(x,y)={\frac {\Pr \left(x-{\frac {h}{2}}\leq X\leq x+{\frac {h}{2}},y-{\frac {h}{2}}\leq Y\leq y+{\frac {h}{2}}\right)}{h^{2}}}$$

או באמצעות נגזרות חלקיות של פונקציית ההתפלגות המצטברת המשותפת,

$$f_{X,Y}(x,y)={\frac {\partial ^{2}F_{X,Y}(x,y)}{\partial x\partial y}}$$

מתקיימים ביטויים דומים עבור יותר משני משתנים מקריים,

$$f_{X_{1},\ldots ,X_{n}}(x_{1},\ldots ,x_{n})={\frac {\Pr \left(x_{1}-{\frac {h}{2}}\leq X_{1}\leq x_{1}+{\frac {h}{2}},\ldots ,x_{n}-{\frac {h}{2}}\leq X_{n}\leq x_{n}+{\frac {h}{2}}\right)}{h^{n}}}$$

באמצעות נגזרות חלקיות מתוך ההתפלגות המצטברת המשותפת,

$$f_{X_{1},\ldots ,X_{n}}(x_{1},\ldots ,x_{n})={\frac {\partial ^{n}F_{X_{1},\ldots ,X_{n}}(x_{1},\ldots ,x_{n})}{\partial x_{1}\ldots \partial x_{n}}}$$

מכיוון שמדובר בהתפלגויות, עבור שני משתנים מתקיים,

$\int _{x}\int _{y}f_{X,Y}(x,y)\;dy\;dx=1$

ליותר משני משתנים,

$\int _{x_{1}}\ldots \int _{x_{n}}f_{X_{1}\ldots X_{n}}(x_{1},\ldots ,x_{n})\;dx_{n}\cdots \;dx_{1}=1$

לכל תחום (המקיים תנאים מסוימים) $A\subseteq \mathbb {R} ^{2}$ מתקיים

$$\Pr \left((X,Y)\in A\right)=\iint _{A}f_{XY}(x,y)dydx$$

באופן דומה נחשב עבור $A\subseteq \mathbb {R} ^{n}$

$$\Pr \left((X_{1},\ldots ,X_{n})\in A\right)=\int \cdots \int _{A}f_{X_{1}\cdots X_{n}}(x_{1},\ldots ,x_{n})dx_{n}\cdots dx_{1}$$

דוגמה

נתונים משתנים מקריים רציפים $X$ ו-$Y$ עם פונקציית צפיפות משותפת:

$f_{XY}(x,y)=\left\{{\begin{matrix}{\frac {6}{5}}(x^{2}+xy)&0\leq x,y\leq 1\\0&{\text{תרחא}}\\\end{matrix}}\right.$

נדגים את חישוב ההסתברות ש- $X+Y\leq 1$,

$$\Pr(X+Y\leq 1)=\int _{0}^{1}\int _{0}^{1-x}{\frac {6}{5}}(x^{2}+2xy)dydx=\int _{0}^{1}{\frac {6}{5}}x(1-x)dx={\frac {1}{5}}$$

הדגמה של חישוב פונקציית התפלגות מצטברת,

$$F_{XY}\left({\frac {1}{3}},{\frac {1}{2}}\right)=\Pr \left(X\leq {\frac {1}{3}},Y\leq {\frac {1}{2}}\right)=\int _{0}^{\frac {1}{3}}\int _{0}^{\frac {1}{2}}{\frac {6}{5}}(x^{2}+2xy)dydx=\int _{0}^{\frac {1}{3}}{\frac {3}{5}}\left(x^{2}+{\frac {1}{2}}x\right)dx={\frac {13}{540}}$$

תכונות נוספות

התפלגות משותפת של משתנים בלתי תלויים

באופן כללי שני משתנים מקריים $X$ ו $Y$ הם בלתי תלויים אם ורק אם פונקציית ההתפלגות המצטברת המשותפת מתקיימת

$F_{X,Y}(x,y)=F_{X}(x)\cdot F_{Y}(y)$

שני משתנים מקריים בדידים $X$ ו $Y$ הם בלתי תלויים אם ורק אם פונקציית ההסתברות המשותפת מקיימת

$P(X=x,Y=y)=P(X=x)\cdot P(Y=y)$

לכל $x$ ו $y$ .

באופן דומה, שני משתנים מקריים רציפים הם בלתי תלויים אם ורק אם

$f_{X,Y}(x,y)=f_{X}(x)\cdot f_{Y}(y)$

לכל $x$ ו $y$ .

שונות משותפת

כאשר שני משתנים מקריים מוגדרים על מרחב הסתברות, ומעוניינים למדוד את הקשר בין המשתנים. מדד מקובל לקשר בין שני משתנים מקריים הוא השונות המשותפת.

השונות המשותפת בין המשתנים המקריים $X$ ו-$Y$, המסומנת כ-$Cov(X,Y)$ היא,

$$Cov(X,Y)=E[(X-E[x])(Y-E[y])]=E[X,Y]-E[x]E[y]$$

מתאם

המתאם הוא מדד נוסף לקשר בין שני משתנים מקריים. מדד זה קל יותר לפרשנות מאשר השונות המשותפת.

המתאם מתקבל מהנירמול של השונות המשותפת באמצעות חילוק בסטיות התקן (השורש של השונות) של כל משתנה. כתוצאה מכך, המתאם הוא חסר מימד וניתן להשתמש בו כדי להשוות את הקשר הליניארי בין זוגות של משתנים המבוטאים ביחידות שונות. אם הנקודות בהתפלגות המשותפת של $X$ ו-$Y$ מקבלות הסתברות חיובית נמצאות בקרבתו קו עם שיפוע חיובי (או שלילי), $\rho _{XY}$ קרוב ל- $1$ (או $-1$). אם $\rho _{XY}$ שווה ל- $1$ או $-1$, ניתן להראות שהנקודות בהתפלגות המשותפת שמקבלות הסתברות חיובית נמצאות על ישר. שני משתנים מקריים עם מתאם שאינו אפס אמורים נקראים מתואמים. בדומה לשונות משותפת, המתאם הוא מדד לקשר הליניארי בין משתנים מקריים.

המתאם בין המשתנה המקרי $X$ ו-$Y$ ניתן על ידי

$$\rho _{XY}={\frac {cov(X,Y)}{\sqrt {Var(X)Var(Y)}}}={\frac {cov(X,Y)}{\sigma _{X}\sigma _{Y}}}$$

משפחות מוכרות של התפלגויות

משפחות מוכרות של התפלגויות משותפות כוללות את ההתפלגות הרב-נורמלית, ההתפלגות המולטינומית, ההתפלגות המולטינומית השלילית, ההתפלגות ההיפרגאומטרית הרב-משתנית וההתפלגות האליפטית.