跳到主要内容

特征函数 (Characteristic Functions)

特征函数是处理随机变量分布的强大工具,它本质上是随机变量分布的 傅里叶变换。特征函数与分布函数一一对应,且在处理独立随机变量之和时具有极佳的代数性质。

1. 定义 (Definition)

对于随机变量 XX,其 特征函数 ϕX(t)\phi_X(t) 定义为复随机变量 eitXe^{itX} 的数学期望: ϕX(t)=E(eitX)=eitxdF(x),tR\phi_X(t) = E(e^{itX}) = \int_{-\infty}^\infty e^{itx} \, dF(x), \quad t \in \mathbb{R}

  • XX 为离散型,ϕX(t)=jeitxjpj\phi_X(t) = \sum_{j} e^{itx_j} p_j
  • XX 为连续型,ϕX(t)=eitxf(x)dx\phi_X(t) = \int_{-\infty}^\infty e^{itx} f(x) \, dx

2. 核心性质

  1. 存在性:对任意随机变量,eitx=1|e^{itx}| = 1,故特征函数总是存在且一致连续。
  2. 规范性ϕ(0)=1\phi(0) = 1ϕ(t)1|\phi(t)| \le 1
  3. 共轭性ϕ(t)=ϕ(t)\phi(-t) = \overline{\phi(t)}
  4. 线性变换:若 Y=aX+bY = aX + b,则 ϕY(t)=eitbϕX(at)\phi_Y(t) = e^{itb} \phi_X(at)
  5. 独立和性质:若 X1,X2,,XnX_1, X_2, \dots, X_n 相互独立,则其和 Sn=XiS_n = \sum X_i 的特征函数为: ϕSn(t)=i=1nϕXi(t)\phi_{S_n}(t) = \prod_{i=1}^n \phi_{X_i}(t) 注:这使得卷积运算转化为了简单的乘法运算。
矩与特征函数的关系

XXkk 阶矩 E(Xk)E(X^k) 存在,则 ϕ(t)\phi(t)t=0t=0 处可导至 kk 阶,且: E(Xk)=ϕ(k)(0)ikE(X^k) = \frac{\phi^{(k)}(0)}{i^k} 这为计算高阶矩提供了一种解析方法。

3. 常见分布的特征函数

分布参数特征函数 ϕ(t)\phi(t)
退化分布cceitce^{itc}
二项分布n,pn, p(peit+q)n(pe^{it} + q)^n
泊松分布λ\lambdaexp(λ(eit1))\exp(\lambda(e^{it}-1))
正态分布μ,σ2\mu, \sigma^2exp(itμ12σ2t2)\exp(it\mu - \frac{1}{2}\sigma^2 t^2)
指数分布λ\lambda(1itλ)1(1 - \frac{it}{\lambda})^{-1}

4. 逆转公式与唯一性定理

  • 唯一性定理:随机变量的分布函数与其特征函数一一对应。
  • 逆转公式 (Inversion Formula):若 ϕ(t)\phi(t) 绝对可积,则其密度函数为: f(x)=12πeitxϕ(t)dtf(x) = \frac{1}{2\pi} \int_{-\infty}^\infty e^{-itx} \phi(t) \, dt

5. 经典练习

:::info 练习 1:利用特征函数证明正态分布的再生性 设 X1N(μ1,σ12)X_1 \sim N(\mu_1, \sigma_1^2)X2N(μ2,σ22)X_2 \sim N(\mu_2, \sigma_2^2) 相互独立。证明 X1+X2N(μ1+μ2,σ12+σ22)X_1 + X_2 \sim N(\mu_1 + \mu_2, \sigma_1^2 + \sigma_2^2)。 :::

查看解析
  1. X1X_1 的特征函数为 ϕ1(t)=exp(itμ112σ12t2)\phi_1(t) = \exp(it\mu_1 - \frac{1}{2}\sigma_1^2 t^2)
  2. X2X_2 的特征函数为 ϕ2(t)=exp(itμ212σ22t2)\phi_2(t) = \exp(it\mu_2 - \frac{1}{2}\sigma_2^2 t^2)
  3. 由于独立,Y=X1+X2Y = X_1 + X_2 的特征函数为: ϕY(t)=ϕ1(t)ϕ2(t)=exp[it(μ1+μ2)12(σ12+σ22)t2]\phi_Y(t) = \phi_1(t) \cdot \phi_2(t) = \exp[it(\mu_1+\mu_2) - \frac{1}{2}(\sigma_1^2+\sigma_2^2)t^2]
  4. 根据唯一性定理,此特征函数形式恰好对应 N(μ1+μ2,σ12+σ22)N(\mu_1 + \mu_2, \sigma_1^2 + \sigma_2^2)

特征函数是现代概率论通向极限定理证明的必经之路。