概率论:参数估计——点估计

这篇具有很好参考价值的文章主要介绍了概率论:参数估计——点估计。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

首先,我们要知道点估计是什么:

概率论:参数估计——点估计

简单来讲,点估计一般就是拿出很多样本来,拿他们的均值和方差之类的当成参数,或者是通过均值和方差计算出他的参数。

概率论:参数估计——点估计

简单来说,参数空间就是这个分布的参数可以的取值。

概率论:参数估计——点估计

概率论:参数估计——点估计

先学习矩估计法:

概率论:参数估计——点估计

还记得变量的矩是什么吗?就是E(x^k)。

概率论:参数估计——点估计

可以看到,平均数就是总体期望的矩估计(k=1版本的矩)

概率论:参数估计——点估计

但这样的方法不一定准确:

概率论:参数估计——点估计

下面是总体的评价:

概率论:参数估计——点估计

现在我们来学习其他的方法:极大似然估计法:

概率论:参数估计——点估计

这是很常见的思想,那要怎么运用到参数估计上来呢?:

概率论:参数估计——点估计

概率论:参数估计——点估计

看不懂?看例子:

概率论:参数估计——点估计

这个问题就是:我知道了F(x)的形式,现在我要求这个参数是多少。现在我把所有的密度函数乘起来,获得了似然方程。现在我要做的就是找到一个参数,使得这个似然方程最大,于是要求导。因为取对数对导数的零点没有影响,所以可以用取对数再求导来规避复杂的运算。

概率论:参数估计——点估计

可以看到我这个似然函数有两个参数,那我就分别求导计算。

通用方法是什么?:

概率论:参数估计——点估计

我们求导的目的是为了求出怎样的参数可以使似然函数最大,但有的时候求不了导:

概率论:参数估计——点估计

这个显然没有办法用求到来求最大值,于是我们选择了返璞归真的做法。

最后是总结:

概率论:参数估计——点估计

估计量的评判标准:

概率论:参数估计——点估计

现在我们要评价不同方法得出的参数的好坏了。

概率论:参数估计——点估计

 首先,无偏性是什么?:

概率论:参数估计——点估计

好复杂,无偏估计是什么?:

无偏估计是用样本统计量来估计总体参数时的一种无偏推断。估计量的数学期望等于被估计参数的真实值,则称此估计量为被估计参数的无偏估计,即具有无偏性,是一种用于评价估计量优良性的准则。无偏估计的意义是:在多次重复下,它们的平均数接近所估计的参数真值。无偏估计常被应用于测验分数统计中。

现在我们就开始解决问题。

 概率论:参数估计——点估计

无偏性以u,标准差最为典型。有些分布直接以u,标准差作为参数,根据大数定理(也就是矩估计的理论基础):

概率论:参数估计——点估计

 这样可以看到,凡是以矩(也就是参数可以用E(X),E(X^2),E(X^3)之类的)表示的分布,用矩估计是无偏的。同时我们也就知道了为什么当初均匀分布用矩估计不好,它的参数不是矩。

概率论:参数估计——点估计

似然函数的解法解释:最大值为Z的概率就是“X1小于Z的概率*X2小于Z的概率····”,于是这就是把大家都乘起来。两边一起求导就得到了最大值为Z的概率密度,也就可以求他的期望是不是正确的参数了。

概率论:参数估计——点估计

可以看到我们用极大似然得出的参数,他们的期望是n/(n+1)的真实参数,只要乘n+1/n就可以无偏化。 

概率论:参数估计——点估计

有效性:

概率论:参数估计——点估计 

之前我们要求计算出的参数期望要和真实值相同,现在我们还要求方差要小。

概率论:参数估计——点估计 

概率论:参数估计——点估计 

现在学一致性:

概率论:参数估计——点估计 

概率论:参数估计——点估计 

感觉相合性是劣化版的无偏性。 文章来源地址https://www.toymoban.com/news/detail-494010.html

到了这里,关于概率论:参数估计——点估计的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 【状态估计】概率论基础

    《机器人学的状态估计》是入行SLAM的经典书籍之一,其中有大量的公式相关的内容,看起来还是比较艰涩的。最近重新读一遍,顺便将其中的一些内容记录下来,方便以后回看。 定义 定义 x x x 为区间 [ a . b ] [a.b] [ a . b ] 上的随机变量,服从某个 概率密度函数 p ( x ) p(x) p

    2024年04月11日
    浏览(51)
  • 【基础知识-概率论】似然、似然函数、极大似然估计(最大似然估计)

    在已知一些参数的情况下,预测接下来结果的可能性 在 结果产生之前 ,通过环境中的参数,预测事件发生的概率 例:抛硬币 假定硬币的材质均匀,其抛出落地结果为正面和反面的概率都是0.5 这个概率在结果发生前才有意义,在发生后,抛硬币的结果就确定了 跟概率相反,

    2024年01月23日
    浏览(42)
  • 【小呆的概率论学习笔记】抽样调查之用抽样样本估计母体数字特征

    1. 随机变量的数字特征 随机变量本质上是一个随机数,他以概率的形式取任何可能的取值,但是随机变量取值却有一定的规律,我们可以称之为随机变量的数字特征。最简明、最常用的随机变量的数字特征就是均值(或者说期望)和方差。 1.1 随机变量的均值(期望) 随机变

    2024年02月01日
    浏览(91)
  • 概率论和随机过程的学习和整理20:条件概率我知道,但什么是条件期望?可用来解决递归问题

    目录 1 目标问题: 什么是条件期望? 条件期望有什么用? 2 条件期望,全期望公式 3 条件期望,全期望公式 和 条件概率,全概率公式的区别和联系 3.1 公式如下 3.2 区别和联系 3.3 概率和随机过程 4 有什么用:---可以解决很多递归的问题 4.1 使用前有个前提:界定清楚你要求

    2024年02月15日
    浏览(44)
  • 概率论与数理统计 第一章 概率论的基本概念

    1.1.1 前言 1.研究对象: 确定性现象:必然发生或不发生 随机现象:个别试验结果呈现不确定性,大量试验结果呈现统计规律性 2.概率论与数理统计: ​ 该学科是研究和揭示随机现象统计规律性的学科。 1.1.2 随机试验 1.定义: 可以在相同条件下重复进行; 每次试验的结果可

    2024年03月20日
    浏览(52)
  • 【概率论】几何概率、条件概率及全概率公式作业

    有两箱零件,第一箱装50件,其中20件是一等品;第二箱装30件,其中18件是一等品,现从两箱中随意挑出一箱,然后从该箱中先后任取两个零件,试求第一次取出的零件是一等品的概率_____(结果小数点后保留1位) 【正确答案:0.5 或1/2】 解析: 设A₁,A₂分别表示“挑出第一箱

    2024年02月11日
    浏览(44)
  • 【概率论】条件概率与独立性题目

    已知随机事件A与B满足条件:0P(A)1,0P(B)1。则事件A,B相互独立的充要条件是( C )。 A. P ( B ∣ A ) + P ( B ∣ A ˉ ) = 1 P(B|A)+P(B|bar{A})=1 P ( B ∣ A ) + P ( B ∣ A ˉ ) = 1 B. P ( B ∣ A ) + P ( B ˉ ∣ A ) = 1 P(B|A)+P(bar{B}|A)=1 P ( B ∣ A ) + P ( B ˉ ∣ A ) = 1 C. P ( B ∣ A ) + P ( A ˉ ∣ B ˉ ) = 1 P(B|A)

    2024年02月11日
    浏览(36)
  • 概率论-1-概率机器人 Probabilistic Robotics

    基本概念 随机变量 静态的 可以做随机试验 随机过程 动态 离散随机变量 概率质量函数 probability mass function 连续随机变量 概率密度函数 probability density function PDF 联合概率 P ( X = x 且 Y = y ) = P ( x , y ) 若 X 和 Y 独立: P ( x , y ) = P ( x ) P ( y ) P(X=x 且 Y=y) = P(x,y)\\\\ 若 X 和 Y 独立:

    2024年03月22日
    浏览(52)
  • 概率论--随机事件与概率--贝叶斯公式--随机变量

    目录 随机事件与概率 概念 为什么要学习概率论 随机事件与随机事件概率 随机事件 随机事件概率 贝叶斯公式  概念 条件概率 概率乘法公式 贝叶斯公式  举个栗子 随机变量   随机变量的定义 随机变量的分类 离散型随机变量 连续型随机变量 概念 随机事件是指在一次试验

    2024年02月11日
    浏览(45)
  • 概率论:样本与总体分布,Z分数与概率

    参考书目:《行为科学统计精要》(第八版)——弗雷德里克·J·格雷维特 描述一组数据分布   描述一组样本数据的分布 描述样本数据的均值和整体数据一样,但是样本标准差的公式除以了n-1,这里引入自由度的概念 自由度:如果均值确定,那么n个数据组成的样本中,只有

    2024年02月07日
    浏览(48)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包