科学网

 找回密码
  注册
搜索
热搜: 科学 论文
搜索
应邀发表了一篇科学哲学长文:P-T概率框架用于语义通信,证伪,确证和贝叶斯推理
热度 1 鲁晨光 2020-10-6 14:15
这篇文章英文版应Philosophies的特刊Logic anf Science的客座编辑Dr. Fabien Paillusson的邀请而写(不收版面费)。他邀请我是因为看到我发表在Entropy上关于确证的文章: https://www.mdpi.com/1099-4300/22/4/384 . 应邀文章是一个大统一文章: 1. 统计和逻辑的统一 ———了解人工智能中统计学派和逻辑学派的 ...
个人分类: 信息的数学和哲学|874 次阅读|5 个评论 热度 1
关于确证和乌鸦悖论的英文终于发表了
鲁晨光 2020-8-18 11:18
确证目的是评价一个大前提的可信度。 比如: “如果x是乌鸦, 则x是黑的”; “如果医学检验呈阳性, 则被检者有病”; “春雾雨, 夏雾热,秋雾凉风, 冬雾雪”(多个大前提)。 流行的确证度公式有很多。哪个合理,存在长期争论。 乌鸦悖论是因为: 在经典逻辑中“如果x是乌鸦,则x是黑的”(大前 ...
个人分类: 信息的数学和哲学|481 次阅读|没有评论
信道确证和预测确证——从医学检验到乌鸦悖论
鲁晨光 2020-2-2 01:04
这是关于归纳和确证的完整文章。原来解释医学检验和乌鸦悖论需要两种不同确证测度。新的确证测度c*终于能清晰澄清确证悖论即乌鸦悖论。两个确证测度竟然和Popper的证伪理论兼容,这再好不过了。由来已久的归纳和证伪问题终于得到相互协调的解释。 全文见: http://www.surv ...
个人分类: 信息的数学和哲学|551 次阅读|没有评论
发表了一篇英文长文:语义信息G理论和逻辑贝叶斯推理for统计学习
热度 1 鲁晨光 2019-8-21 01:04
这是我近五年研究的总结, 也基于我以前的研究结果。 发表的期刊是:Information: https://www.mdpi.com/journal/information 文章是: https://www.mdpi.com/2078-2489/10/8/261 英文open access 期刊, 不限长度。 我用的方法——语义信息方法——与众不同, Information正好适合我。同行评论要过两关,要老实按re ...
个人分类: 信息的数学和哲学|1440 次阅读|2 个评论 热度 1
用第三种贝叶斯定理求多标签分类——有简单方法何必用复杂的?
鲁晨光 2018-6-12 12:01
作者以前研究语义信息论,最近研究了多标签分类基本方法,觉得,从语义通信的角度 看, 结合已有的方法,应该能得到更简单更合理的方法。下面是最近研究的一个总结。、 本文使用交叉熵方法,即用样本分布代替样本序列。 参考文献:  Wikipedia 的多标签学习介绍: https://en.wikipedia.org/wiki/M ...
个人分类: 信息的数学和哲学|1767 次阅读|没有评论
我捡到大漏了——发现混合模型收敛严格证明方法
热度 1 鲁晨光 2018-4-2 13:11
我一直说EM算法收敛证明有问题,我把它改进为CM算法。我以前提供的CM算法收敛证明要比EM算法的收敛证明好得多,但是还不严格。 现在发现,采用分析Shannon的信息率失真函数用到的变分和迭代方法,可以严格严格证明CM迭代方法收敛。 EM算法的问题和CM算法收敛证明详见: http://survivor99.com/lcg/CM/EMwayout.pd ...
个人分类: 信息的数学和哲学|2636 次阅读|2 个评论 热度 1
一个新的数学框架用于机器学习——挑战流行的贝叶斯主义推理...
鲁晨光 2018-3-14 00:58
我想写一篇《一个新的数学框架用于机器学习——挑战流行的贝叶斯主义推理》, 在人工智能会议上交流。这里是一个提要, 希望赢得知音, 得到知音支持,从而有机会大会发言。 最近两年多, 我一直在努力用语义信息方法改造挑战流行的Bayesian Inference方法。语义信息方法包括: 1)语义信息准 ...
个人分类: 信息的数学和哲学|1859 次阅读|没有评论
交叉熵是谁最早提出和应用的?
鲁晨光 2018-3-1 14:31
交叉熵 (cross-entropy, 或 CE) 最简单形式就是 H=-∑P(xi)logP(xi|θ). log 后面是似然度或预测的概率。下面是 wikipedia 介绍: https://en.wikipedia.org/wiki/Cross_entropy 我在一个群里说,人工智能需要一个像物理学中“能量”那样的贯穿很多公式的概念,这个概念应该是信息。我用语义信息方法优 ...
个人分类: 信息的数学和哲学|4172 次阅读|1 个评论
兼容Shannon, Popper, Fisher, Zadeh思想的语义信息论
热度 3 鲁晨光 2017-8-11 14:09
不久的一个报告,希望把我的语义信息方法讲得更清楚。 PPT见 http://survivor99.com/lcg/semantic.ppt 简单说来就是用反映语义的真值函数产生似然度, 把似然度带进Shannon信息公式, 这样Shannon信息测度就变为语义信息测度, 能够反映Popper和Fisher的假设验思想。 反过来, 用这样的信息测度可以优化真值函数或Za ...
个人分类: 信息的数学和哲学|2849 次阅读|8 个评论 热度 3

本页有 1 篇博文因作者的隐私设置或未通过审核而隐藏

Archiver|手机版|科学网 ( 京ICP备07017567号-12 )

GMT+8, 2020-10-24 05:14

Powered by ScienceNet.cn

Copyright © 2007- 中国科学报社

返回顶部