LOADING
1869 字
9 分钟
特征函数

特征函数

一、定义与基本概念

1.1 定义

(Ω,F,P)(\Omega, \mathcal{F}, P) 是概率空间,XX 是定义在其上的实值随机变量,F(x)F(x) 为其分布函数。

定义 1.1.1(特征函数): φX(t)=E[eitX]=+eitxdF(x),tR\varphi_X(t) = E[e^{itX}] = \int_{-\infty}^{+\infty} e^{itx} dF(x), \quad t \in \mathbb{R}

其中 i=1i = \sqrt{-1} 为虚数单位,eitX=cos(tX)+isin(tX)e^{itX} = \cos(tX) + i\sin(tX)

1.1.1 特殊情况

  • 离散型随机变量:若 P(X=xk)=pkP(X = x_k) = p_kk=1,2,k = 1,2,\dots,则 φX(t)=k=1pkeitxk\varphi_X(t) = \sum_{k=1}^{\infty} p_k e^{itx_k}

  • 连续型随机变量:若 XX 有密度函数 p(x)p(x),则 φX(t)=+eitxp(x)dx\varphi_X(t) = \int_{-\infty}^{+\infty} e^{itx} p(x) dx

1.1.2 复随机变量的数学期望

ξ,η\xi, \eta 为实值随机变量,定义复随机变量 Z=ξ+iηZ = \xi + i\eta,其数学期望为: E[Z]=E[ξ]+iE[η]E[Z] = E[\xi] + iE[\eta]

1.2 存在性

定理 1.2.1:对任意随机变量 XX,其特征函数 φX(t)\varphi_X(t) 总是存在且有限。

证明:由于 eitX=1\lvert e^{itX} \rvert = 1,故 φX(t)=E[eitX]E[eitX]=E[1]=1<\lvert \varphi_X(t) \rvert = \lvert E[e^{itX}] \rvert \leq E[\lvert e^{itX} \rvert] = E[1] = 1 < \infty


二、基本性质

2.1 有界性与连续性

定理 2.1.1

  1. φX(t)φX(0)=1\lvert \varphi_X(t) \rvert \leq \varphi_X(0) = 1
  2. φX(t)\varphi_X(t) 是一致连续函数

证明

  1. 由三角不等式: φX(t)=E[eitX]E[eitX]=E[1]=1\lvert \varphi_X(t) \rvert = \lvert E[e^{itX}] \rvert \leq E[\lvert e^{itX} \rvert] = E[1] = 1

  2. 对任意 t,hRt, h \in \mathbb{R}

    φX(t+h)φX(t)=E[ei(t+h)XeitX]=E[eitX(eihX1)]E[eihX1]=E[22cos(hX)]E[min{2,hX}]\begin{aligned} \lvert \varphi_X(t+h) - \varphi_X(t) \rvert &= \lvert E[e^{i(t+h)X} - e^{itX}] \rvert \\ &= \lvert E[e^{itX}(e^{ihX} - 1)] \rvert \\ &\leq E[\lvert e^{ihX} - 1 \rvert] \\ &= E[\sqrt{2 - 2\cos(hX)}] \\ &\leq E[\min\{2, \lvert hX \rvert\}] \end{aligned}

    由控制收敛定理,当 h0h \to 0 时,上式趋于0,且收敛速度与 tt 无关,故一致连续。

2.2 对称性

定理 2.2.1φX(t)=φX(t)\varphi_X(-t) = \overline{\varphi_X(t)} 其中 z\overline{z} 表示复数 zz 的共轭。

推论:若 XX 的分布关于原点对称,则 φX(t)\varphi_X(t) 为实值函数。

2.3 线性变换

定理 2.3.1:设 Y=aX+bY = aX + b,其中 a,ba, b 为常数,则 φY(t)=eitbφX(at)\varphi_Y(t) = e^{itb} \varphi_X(at)

证明φY(t)=E[eitY]=E[eit(aX+b)]=eitbE[ei(at)X]=eitbφX(at)\varphi_Y(t) = E[e^{itY}] = E[e^{it(aX+b)}] = e^{itb} E[e^{i(at)X}] = e^{itb} \varphi_X(at)

2.4 独立随机变量的和

定理 2.4.1:若 X1,X2,,XnX_1, X_2, \dots, X_n 相互独立,则 φX1+X2++Xn(t)=k=1nφXk(t)\varphi_{X_1 + X_2 + \dots + X_n}(t) = \prod_{k=1}^n \varphi_{X_k}(t)

证明:由独立性,

φX1++Xn(t)=E[eit(X1++Xn)]=E[eitX1eitX2eitXn]=E[eitX1]E[eitX2]E[eitXn]=k=1nφXk(t)\begin{aligned} \varphi_{X_1 + \dots + X_n}(t) &= E[e^{it(X_1 + \dots + X_n)}] \\ &= E[e^{itX_1} \cdot e^{itX_2} \cdots e^{itX_n}] \\ &= E[e^{itX_1}] \cdot E[e^{itX_2}] \cdots E[e^{itX_n}] \\ &= \prod_{k=1}^n \varphi_{X_k}(t) \end{aligned}

2.5 非负定性

定义 2.5.1:函数 f(t)f(t) 称为非负定的,若对任意 nNn \in \mathbb{N},任意实数 t1,t2,,tnt_1, t_2, \dots, t_n 和复数 z1,z2,,znz_1, z_2, \dots, z_n,有: j=1nk=1nf(tjtk)zjzk0\sum_{j=1}^n \sum_{k=1}^n f(t_j - t_k) z_j \overline{z_k} \geq 0

定理 2.5.2(波赫纳-辛钦定理):φ(t)\varphi(t) 是某随机变量的特征函数当且仅当:

  1. φ(0)=1\varphi(0) = 1
  2. φ(t)\varphi(t) 连续
  3. φ(t)\varphi(t) 非负定

三、特征函数与矩的关系

3.1 矩的存在性

定理 3.1.1:若 E[Xk]<E[\lvert X \rvert^k] < \infty,则 φX(t)\varphi_X(t)t=0t = 0kk 阶可导,且: φX(k)(0)=ikE[Xk]\varphi_X^{(k)}(0) = i^k E[X^k]

推论E[Xk]=φX(k)(0)ikE[X^k] = \frac{\varphi_X^{(k)}(0)}{i^k}

证明概要:对任意 ttφX(t)=E[eitX]=E[n=0(itX)nn!]\varphi_X(t) = E[e^{itX}] = E\left[\sum_{n=0}^{\infty} \frac{(itX)^n}{n!}\right]

E[Xk]<E[\lvert X \rvert^k] < \infty,则可逐项求导 kk 次,得到: φX(k)(t)=E[dkdtkeitX]=E[(iX)keitX]\varphi_X^{(k)}(t) = E\left[\frac{d^k}{dt^k} e^{itX}\right] = E[(iX)^k e^{itX}]

t=0t = 0,即得结论。

3.2 泰勒展开

定理 3.2.1:若 E[Xn]<E[\lvert X \rvert^n] < \infty,则 φX(t)\varphi_X(t)t=0t = 0 处有 nn 阶泰勒展开: φX(t)=k=0n(it)kk!E[Xk]+o(tn)\varphi_X(t) = \sum_{k=0}^n \frac{(it)^k}{k!} E[X^k] + o(t^n)

推论:若所有阶矩都存在,则 φX(t)=k=0(it)kk!E[Xk]\varphi_X(t) = \sum_{k=0}^{\infty} \frac{(it)^k}{k!} E[X^k]

3.3 可微性与尾部性质

特征函数的光滑性反映了分布的尾部衰减速度:

  • φX(t)\varphi_X(t) 无穷次可微,则分布具有所有阶矩
  • φX(t)\varphi_X(t)t=0t=0kk 阶可导,则 E[Xk]<E[\lvert X \rvert^k] < \infty
  • 例如:标准柯西分布的特征函数为 ete^{-\lvert t \rvert},连续但不可微,对应其重尾性质

四、逆转公式与唯一性定理

4.1 逆转公式

定理 4.1.1(逆转定理):设 F(x)F(x)φ(t)\varphi(t) 分别为随机变量 XX 的分布函数和特征函数,x1<x2x_1 < x_2F(x)F(x) 的连续点,则: F(x2)F(x1)=limT12πTTeitx1eitx2itφ(t)dtF(x_2) - F(x_1) = \lim_{T \to \infty} \frac{1}{2\pi} \int_{-T}^{T} \frac{e^{-itx_1} - e^{-itx_2}}{it} \varphi(t) dt

证明

12πTTeitx1eitx2itφ(t)dt=12πTTeitx1eitx2itE[eitX]dt=E[12πTTeit(Xx1)eit(Xx2)itdt]=E[1π0Tsin(t(Xx1))sin(t(Xx2))tdt]\begin{aligned} &\frac{1}{2\pi} \int_{-T}^{T} \frac{e^{-itx_1} - e^{-itx_2}}{it} \varphi(t) dt \\ &= \frac{1}{2\pi} \int_{-T}^{T} \frac{e^{-itx_1} - e^{-itx_2}}{it} E[e^{itX}] dt \\ &= E\left[ \frac{1}{2\pi} \int_{-T}^{T} \frac{e^{it(X-x_1)} - e^{it(X-x_2)}}{it} dt \right] \\ &= E\left[ \frac{1}{\pi} \int_{0}^{T} \frac{\sin(t(X-x_1)) - \sin(t(X-x_2))}{t} dt \right] \end{aligned}

利用狄利克雷积分:

0sin(at)tdt={π2,a>00,a=0π2,a<0\int_{0}^{\infty} \frac{\sin(at)}{t} dt = \begin{cases} \frac{\pi}{2}, & a > 0 \\ 0, & a = 0 \\ -\frac{\pi}{2}, & a < 0 \end{cases}

可得结论。

4.2 唯一性定理

定理 4.2.1(唯一性定理):分布函数由其特征函数唯一确定。

推论:若两个随机变量的特征函数相同,则它们同分布。

4.3 密度函数的恢复

定理 4.3.1:若特征函数 φ(t)\varphi(t) 绝对可积,即 φ(t)dt<\int_{-\infty}^{\infty} \lvert \varphi(t) \rvert dt < \infty,则对应的分布为连续型,且密度函数为: p(x)=12πeitxφ(t)dtp(x) = \frac{1}{2\pi} \int_{-\infty}^{\infty} e^{-itx} \varphi(t) dt


五、常见分布的特征函数

分布参数特征函数 φ(t)\varphi(t)
退化分布P(X=a)=1P(X=a)=1eitae^{ita}
两点分布B(1,p)B(1,p)q+peitq + pe^{it}
二项分布B(n,p)B(n,p)(q+peit)n(q + pe^{it})^n
泊松分布P(λ)P(\lambda)eλ(eit1)e^{\lambda(e^{it}-1)}
几何分布P(X=k)=pqk1P(X=k)=pq^{k-1}peit1qeit\frac{pe^{it}}{1-qe^{it}}
负二项分布NB(r,p)NB(r,p)(peit1qeit)r\left(\frac{pe^{it}}{1-qe^{it}}\right)^r
均匀分布U(a,b)U(a,b)eitbeitait(ba)\frac{e^{itb} - e^{ita}}{it(b-a)}
指数分布Exp(λ)Exp(\lambda)λλit\frac{\lambda}{\lambda - it}
正态分布N(μ,σ2)N(\mu,\sigma^2)eitμ12σ2t2e^{it\mu - \frac{1}{2}\sigma^2 t^2}
标准正态分布N(0,1)N(0,1)e12t2e^{-\frac{1}{2}t^2}
Γ(α,λ)\Gamma(\alpha,\lambda)α>0,λ>0\alpha>0,\lambda>0(λλit)α\left(\frac{\lambda}{\lambda - it}\right)^\alpha
χ2(n)\chi^2(n)nn 自由度(12it)n/2(1 - 2it)^{-n/2}
tt 分布nn 自由度Kn/2(tn)Kn/2(0)\frac{K_{n/2}(\lvert t \rvert\sqrt{n})}{K_{n/2}(0)}
柯西分布Cauchy(0,1)Cauchy(0,1)ete^{-\lvert t \rvert}

六、多元特征函数

6.1 定义

X=(X1,X2,,Xn)T\mathbf{X} = (X_1, X_2, \dots, X_n)^Tnn 维随机向量,t=(t1,t2,,tn)TRn\mathbf{t} = (t_1, t_2, \dots, t_n)^T \in \mathbb{R}^n,则多元特征函数定义为: φX(t)=E[eitTX]=E[ei(t1X1+t2X2++tnXn)]\varphi_{\mathbf{X}}(\mathbf{t}) = E\left[e^{i\mathbf{t}^T \mathbf{X}}\right] = E\left[e^{i(t_1X_1 + t_2X_2 + \dots + t_nX_n)}\right]

6.2 性质

  1. 边缘分布φXk(tk)=φX(0,,0,tk,0,,0)\varphi_{X_k}(t_k) = \varphi_{\mathbf{X}}(0,\dots,0,t_k,0,\dots,0)

  2. 独立性:随机变量 X1,X2,,XnX_1, X_2, \dots, X_n 相互独立当且仅当: φX(t)=k=1nφXk(tk)\varphi_{\mathbf{X}}(\mathbf{t}) = \prod_{k=1}^n \varphi_{X_k}(t_k)

  3. 线性变换:设 Y=AX+b\mathbf{Y} = A\mathbf{X} + \mathbf{b},其中 AAm×nm \times n 矩阵,bRm\mathbf{b} \in \mathbb{R}^m,则: φY(s)=eisTbφX(ATs)\varphi_{\mathbf{Y}}(\mathbf{s}) = e^{i\mathbf{s}^T \mathbf{b}} \varphi_{\mathbf{X}}(A^T \mathbf{s})

  4. 多元正态分布:若 XNn(μ,Σ)\mathbf{X} \sim N_n(\boldsymbol{\mu}, \Sigma),则: φX(t)=exp(itTμ12tTΣt)\varphi_{\mathbf{X}}(\mathbf{t}) = \exp\left(i\mathbf{t}^T \boldsymbol{\mu} - \frac{1}{2} \mathbf{t}^T \Sigma \mathbf{t}\right)


七、特征函数的应用

7.1 独立随机变量和的分布

利用特征函数的乘积性质,可以方便地求独立随机变量和的分布。

:设 X1,X2,,XnX_1, X_2, \dots, X_n 独立同分布于 N(0,1)N(0,1),则 φX1++Xn(t)=(e12t2)n=en2t2\varphi_{X_1 + \dots + X_n}(t) = \left(e^{-\frac{1}{2}t^2}\right)^n = e^{-\frac{n}{2}t^2}X1++XnN(0,n)X_1 + \dots + X_n \sim N(0,n)

7.2 中心极限定理的证明

特征函数是证明中心极限定理的重要工具。设 X1,X2,X_1, X_2, \dots 独立同分布,E[Xi]=μE[X_i] = \muVar(Xi)=σ2Var(X_i) = \sigma^2,则标准化和 Zn=i=1nXinμσnZ_n = \frac{\sum_{i=1}^n X_i - n\mu}{\sigma\sqrt{n}} 的特征函数为: φZn(t)=[φX1(tσn)eiμt/(σn)]n\varphi_{Z_n}(t) = \left[\varphi_{X_1}\left(\frac{t}{\sigma\sqrt{n}}\right) e^{-i\mu t/(\sigma\sqrt{n})}\right]^n

利用泰勒展开,可证 φZn(t)e12t2\varphi_{Z_n}(t) \to e^{-\frac{1}{2}t^2},即 ZndN(0,1)Z_n \xrightarrow{d} N(0,1)

7.3 弱收敛的判别

定理 7.3.1(连续性定理):分布函数序列 {Fn(x)}\{F_n(x)\} 弱收敛于分布函数 F(x)F(x) 当且仅当对应的特征函数序列 {φn(t)}\{\varphi_n(t)\} 逐点收敛于 φ(t)\varphi(t),且 φ(t)\varphi(t)t=0t=0 处连续。

7.4 矩的计算

通过特征函数的导数可以方便地计算矩: E[Xk]=φX(k)(0)ikE[X^k] = \frac{\varphi_X^{(k)}(0)}{i^k}

7.5 分布的识别

由于特征函数与分布函数一一对应,可以通过特征函数识别分布类型。


八、与其他变换的关系

8.1 与傅里叶变换的关系

特征函数本质上是概率密度函数的傅里叶变换: φX(t)=F[p(x)](t)=eitxp(x)dx\varphi_X(t) = \mathcal{F}[p(x)](t) = \int_{-\infty}^{\infty} e^{itx} p(x) dx

8.2 与矩母函数的关系

矩母函数 MX(t)=E[etX]M_X(t) = E[e^{tX}] 与特征函数的关系为: φX(t)=MX(it)\varphi_X(t) = M_X(it)

矩母函数不一定总是存在,但特征函数总是存在。

8.3 与拉普拉斯变换的关系

对于非负随机变量,其拉普拉斯变换 LX(s)=E[esX]L_X(s) = E[e^{-sX}] 与特征函数的关系为: φX(t)=LX(it)\varphi_X(t) = L_X(-it)


九、总结

特征函数是概率论中极其重要的工具,具有以下特点:

  1. 存在性:对任意随机变量,特征函数总是存在
  2. 唯一性:特征函数与分布函数一一对应
  3. 计算便利性:独立随机变量和的特征函数等于各特征函数的乘积
  4. 理论价值:在极限定理、弱收敛理论中发挥核心作用
  5. 应用广泛性:可用于矩的计算、分布识别、参数估计等

特征函数方法由保罗·莱维(Paul Lévy)系统发展,已成为现代概率论不可或缺的分析工具。

特征函数
/posts/study/multivariate-statistical-analysis/特征函数/
作者
Xs
发布于
2026-04-29
许可协议
CC BY-NC-SA 4.0

部分信息可能已经过时