大数据背景下网络调查样本的建模推断问题研究——以广义Boosted模型的倾向得分推断为例

随着大数据和网络的不断发展，网络调查越来越广泛，大部分网络调查样本属于非概率样本，难以采用传统的抽样推断理论进行推断，如何解决网络调查样本的推断问题是大数据背景下网络调查发展的迫切需求。本文首次从建模的角度提出了解决该问题的基本思路：一是入样概率的建模推断，可以考虑构建基于机器学习与变量选择的倾向得分模型来估计入样概率推断总体；二是目标变量的建模推断，可以考虑直接对目标变量建立参数、非参数或半参数超总体模型进行估计；三是入样概率与目标变量的双重建模推断，可以考虑进行倾向得分模型与超总体模型的加权估计与混合推断。最后，以基于广义Boosted模型的入样概率建模推断为例演示了具体解决方法。     

概率论教学中“独立性”概念的一点注释

独立性是概率论中一个非常重要的概念;对于独立性的理解和判定正确与否直接关系到建模解题全过程。学生在初学概率论时,对独立性容易判错;有时,这种错误很难被发现,因此会导致一些看似“悖论”的结论。本文指出了在处理全概率公式与重Bernoulli试验嵌套的问题时学生容易犯的事件独立性判定错误。另外,对于随机变量的独立性判定,本文也作了一些讨论。     

证券投资组合的原理及其应用

随着人们金融意识和证券投资意识的日益增强，投资者更加注重规避投资风险。在传统的投资分析中，大都以定性的方法来说明证券组合的收益和风险。本文利用概率论原理对证券投资组合作一探讨，以便投资者从定量的角度对证券投资组合的风险大小有较深刻的了解。一、证券组合收街与风险的计葬在证券投资中，假定资金12OO元全部投资于证券甲或证券己或证券丙，收益正、负300元的概率分别为：二。”““”””—”—“—”“”“’”“”“‘”“7”且3”则证券甲、或证券乙、或证券丙的收益都是一随机变量，如用xl、x2、23表示，它们的平均收益…     

深得民心的量先进

胡建学在山东泰安当政期间，除了贪得无厌地收受贿赂外，他也是一个热衷于靠吹牛浮夸，搞花架子来捞政绩、树形象的行家里手，致使他治下的泰安一度浮夸风盛行，群众深受其苦。据报道，新的泰安领导班子为了刹住这股歪风，转变干部的作风而采取了一系列行之有效的措施，其中最值得称道的就是把多年来实行的评先进改成了“量先进”，哪个企业上缴利税最多，自己报上来的数字不算，要有财政局长、国税局长、地税局长报来的数字为据；哪个乡镇交售的棉花最多，自己报上来的数字不算，要有供销社收购棉花的原始单据为证；哪个部门引进的外资最多…     

学会用概率知识解析生活

这个题目似乎有故弄玄虚之嫌,其实不然。概率的概念与我们日常生活紧密关联,因为概率理论产生于人们的社会实践活动,而生活中处处都有“可能”“或许”的事件需要用概率的方法去推断估算。概率方法可以拨去笼罩在事物表面的重重迷雾,显露出事物内在的数量特征,使我们更加理智地对待生活。在美国有一份家喻户晓的征兵广告,其内容如示:“来当兵吧!当兵其实并不可怕。应征入伍后你无非有两种可能:有战争或者没有战争,没有战争有啥可怕的?有战争后又有两种可能:上前线或者不上前线,不上前线有啥可怕的?上前线后又有两种可能:受伤或者不受伤,不受…     

对信息经济测度中“知识测度”方法的思考

 信息经济方法测度研究中有一种“知识测度”的倾向。本文从方法论的角度，对这类研究予以剖析，进而认为：“知识测度”作为测度信息经济的一个技术手段或替代方案，本身是不成立的；这类研究会导致信息经济测度的研究走上方法哲学的“迷途”。     

各种抽样调查方法的比较

抽样方法分为两类，概率抽样和非概率抽样。在抽样时如能得知总体中每一个单位被选为样品的概率，就是一种概率抽样，如其概率为不可知，则是非概率抽样。一、非概率抽样非概率抽样主要有下列四种：l、便利抽样——仅考虑方便的抽样方法，样品的选择只考虑到接近或衡量的便利，访问过路的行人便是一例。2、配额抽样——此法是最常用的一种非概率抽样方法。（1）选择“控制特征”，将总体按其控制特征细分成几个子总体；（2）决定各子总体的样本大小（按比例分配）；（3）选取洋本。配额抽样和分层抽样不同，后者是以随机抽样法从各子总体中…     

畅销书推荐

《中西智慧的贯通》 编辑推荐：从历史的经验来看，西方哲学是把感性的世界，包括伦理道德问题“接纳”到哲学——形而上学里来；而中国哲学就传统问题来看，是把富有感性世界内容的资料《如何“升华”到哲学——形而上学的层面上，就不同的发展道路来看，中西哲学是“异”。而就是其内容和问题来看，它们又是“同”，     

对关于统计推断性质的十四个难以理解和有待澄清的问题的思考（下）

十四、概率上限和概率下限在理论和实际中有什么作用?　　由于具体的或认识上的概率的上、下限产生于不同的环境,短语概率“上限”和概率“下限”可以从不同的角度来解释。在格罗宁根,从20世纪70年代中期以来,就有一种对后验概率构造置信区间的传统[126,4]。在罗吉斯蒂回归中,即使对比例风险回归模型,也可得到类似的结果,见[70,17]。标准误和置信限加深了评估中涉及的统计不确定性的印象。除了这些统计不确定性外,还存在系统误差引起的不确定性:参数模型在某种程度上总是错误的。因此将精力集中在这些统计不确定性上多少是一种误导。然而在…     

畅销书推荐

《中西智慧的贯通》 编辑推荐：从历史的经验来看，西方哲学是把感性的世界，包括伦理道德问题“接纳”到哲学——形而上学里来；而中国哲学就传统问题来看，是把富有感性世界内容的资料《如何“升华”到哲学——形而上学的层面上，就不同的发展道路来看，中西哲学是“异”。而就是其内容和问题来看，它们又是“同”，     

小概率事件与新股配售发行

所谓“小概率事件”是指发生概率很小的事件，由于小概率事件出现的概率很小，因而人们通常对其发生忽略不计。例如，行人发生交通事故是一个小概率事件，所以，庶民百姓日常在决策是否出行时，并不把发生交通事故的风险纳入考虑的范围内。小概率事件原理在科学认识上具有重要作用，如统计假设检验就是根据小概率事件的原理而设计的。假设检验的基本思想是，在假设总体具有某种分布特征的条件之下，可知某一事件必定为小概率事件，它在一次观察中几乎是不可能出现的。倘若这种小概率事件在样本中出现了，那么，人们有理由认为原先对总体所作…     

国家标准《常规控制图》判异准则的问题及其改进——兼谈判异准则的概率计算

探讨了国家标准GB／T4091—2001《常规控制图》（等同采用国际标准ISO8258：1991）判别过程偏离统计控制状态，即发生异常的准则。通过对发生异常的事件的概率的精确计算，发现准则8，即“连续8点在中心线两侧，但无一点在C区中”的发生概率远小于前7个准则所对应的事件的发生概率。建议将该准则改为“连续5点在中心线两侧，但无一点在C区中”，以使对应事件发生的概率与其他准则相匹配。     

统计调查方法体系的改革要与“社会环境”的变化互补共进

统计调查方法体系的改革要与“社会环境”的变化互补共进蒋萍统计调查方法有全面调查和非全面调查之分。其中，全面调查包括普查和全面统计报表，非全面调查包括概率抽样调查与非概率抽样调查（如重点调查、典型调查等），任何国家采用的统计调查方法不外乎这几种。那么为...     

概率神经网络在判别分析中的比较优势

判别分析是多元统计分析的三大支柱之一。传统的判别分析方法,如距离判别法、贝叶斯判别法、费希尔判别法等在判别分析中误判率较高,因此有必要引入概率神经网络(PNN)进行判别分析。文章对传统判别方法的基本思想与假设条件及PNN的建模机制与判别原理进行了介绍;用两个案例比较了常用判别分析与PNN判别分析的效率。     

对“PPS”中文译名的质疑及建议

“PPS”抽样是抽样方法大家族中的一员。与其他成员所不同的是,惟独他的中文译名最为拗口,也最容易引起歧意。无从知道“PPS”抽样的最初译文出自哪里,比较权威的,是吴辉先生翻译的科克伦的《抽样技术》。在那本书里,他把“PPS”抽样翻译成“按照与单位大小成比例的概率抽样”。以后人们都一直沿用了这个译名,只是简化成了“与规模成比例的概率抽样”。可以说,吴辉先生是现代统计学方面的翻译权威,但仅就这个抽样方法名称的译法来说,却有值得商榷的地方。在该书中有一节的题目就叫做“按照与单位大小成比例的概率抽样”,对此描述的翻译…     

美哉 劳动力调查员

<正>题记：“美”不止在诗和远方，也闪耀在调查的平凡岁月。有这样一群人，迎着朝阳、踏着晨光，奔波在大街小巷，用数字描绘发展的盛景；有这样一群人，顶着烈日、冒着风雨，穿梭于学校工厂，用数字谱写勤劳的赞歌；有这样一群人，披着星芒、伴着月影，辗转在千家万户，用数字写就劳动的华章。他们身着同一套“国家调查”蓝色背心，佩戴着劳动力调查证，     

科学的统计精神:给我一双慧眼吧

大别山深处有这样一个小山村,七十年代以前占半数以上的男人全是“瘌痢头”,那是真菌引起的皮肤病,得此病的人整个头部溃烂发臭,最后在头顶结上一层厚厚的永久性白痂,头发部分或全部落光。那时山村医疗条件非常落后,儿童得病或夭折的概率比较大,但“瘌痢头”得病和夭折的概率比     

世界知名企业的经营哲学

世界知名企业的经营哲学西大荣哲学：“人才盘点”以经营连锁店而久负盛名的日本大荣公司，始终坚持每隔半年就要让各层次的干部、职工实行一次内部调动，他们称之为“人才盘点”。“人才盘点”包含了两层意思：其一，它打破了以往的那种职位、工种的等级观念，强调每一个...     

统计人员业务运作警示探例70条

我们选用这篇文章,并不仅在于体裁与内容的新颖,目的还在于引导大家用哲学的思考、逆向的思维去品味统计的内涵和哲理,说不定,你会有“暮然回首,那人竟在灯火阑珊处”的惊奇感觉!     

妙用贝叶斯统计三则

提到贝叶斯统计,人们就会立刻想到“逆概率”,然而在20世纪初,统计学家们都非常谨慎地避免使用“逆概率”。在一次皇家统计学会上,学者们对费歇尔的一篇早期论文进行讨论时,有人质疑他运用了“逆概率”,他坚定地为自己辩护,否认这项可怕的指控。在费歇尔的研究过程中,曾有好几次他差点儿就建立起一门新的统计学分支学科,但每次他都半途而废。“逆概率”的思想起源于18世纪后期,由英国牧师托马斯·贝叶斯发明,但就连贝叶斯本人也把相关的论文和分析结果搁置起来,直到其去世之后,这些论文才得以发表。可以说贝叶斯统计是在与经典统计的争论中…