科学网

 找回密码
  注册
置顶 · 首次发表的评论文章:《回顾学习函数和语义信息测度的进化——进而理解深度学习》
2023-7-14 11:40
Entropy 是MDPI出版公司出版的一个专业期刊,汇集了全球许多对熵和信息感兴趣的作者和读者。这篇是我在Entropy上面发表的第4篇文章。这篇文章经过4位审稿人审稿 (可见编辑重视),一致同意修改发表。主要修改:更改了前两章结构;重要文献和述评集中于Introduction部分;添加了本人研究介绍和实验结果。 英文版见: ...
个人分类: 信息的数学和哲学|1550 次阅读|没有评论
置顶 · 我关于鸟和性选择的发现—— 一篇英文介绍含有更多有趣图片
2021-10-27 12:16
最近英文杂志Research Features介绍了我关于鸟、美感和性选择的发现。我以前在博文中介绍过一些,这篇文章包含我对美和性选择难题最简洁也是最严谨的叙述,还包含我最近发现的几个有趣例子。 曾有专家审查了我的有关专著摘要和部分章节,竭力反对,建议我看他的书——看他怎样用鸟雀的食物解释鸟雀羽毛颜色。但是他如何解 ...
个人分类: 美感,需求和进化|3195 次阅读|没有评论
置顶 · 鲁晨光的色觉译码模型和流行的阶段模型比较
2007-6-5 06:26
流行的阶段模型: http://survivor99.com/lcg/books/color/zonemodel/ 我的译码模型: http://survivor99.com/lcg/my/colormodel.htm 和阶段模型相比, 译码模型简洁, 对称,解释色觉变化, 色盲和色觉进化更加简单。 用译码模型解释色盲和色觉进化: 人眼本来只有一种塞敏感细胞, 后来分 ...
个人分类: 色觉问题和分析哲学|6342 次阅读|没有评论
置顶 · 应邀发表了一篇科学哲学长文:P-T概率框架用于语义通信,证伪,确证和贝叶斯推理
热度 1 2020-10-6 14:15
这篇文章英文版应Philosophies的特刊Logic anf Science的客座编辑Dr. Fabien Paillusson的邀请而写(不收版面费)。他邀请我是因为看到我发表在Entropy上关于确证的文章: https://www.mdpi.com/1099-4300/22/4/384 . 应邀文章是一个大统一文章: 1. 统计和逻辑的统一 ———了解人工智能中统计学派和逻辑学派的 ...
个人分类: 信息的数学和哲学|4342 次阅读|5 个评论 热度 1
色觉理论:革新者遇到卫道士
热度 1 鲁晨光 2024-8-31 17:22
某个群在讨论科学发现和诺贝尔奖,我贴了个色觉进化图—— 说这是我的发现,没说别的。不到一分钟,群友徐晓就表示不以为然(我也不知道他看懂了多少),然后要我看他的文章: https://blog.sciencenet.cn/blog-731678-695801.html 好像他是颜色理论权威,他在文中特别表示了对“物理民科”的看不起( ...
个人分类: 信息的数学和哲学|1018 次阅读|8 个评论 热度 1
基于语义信息论的求解隐含变量方法——挑战流行的变分贝叶斯
鲁晨光 2024-7-20 23:28
我推广的语义信息论(Shannon-Lu理论或G理论)已经用来解释和改进机器学习。以前改进过多标签分类,最大互信息分类, 混合模型,贝叶斯确证,约束控制...(参看我主页: http://survivor99.com ). 现在介绍最新进展:语义变分贝叶斯——用以挑战贝叶斯主义的变分贝叶斯。有比较才能鉴别! 语义变分贝叶斯 ——从 ...
个人分类: 信息的数学和哲学|788 次阅读|没有评论
澄清关于语义信息的一些问题 ——兼比较各种语义信息理论
鲁晨光 2024-7-10 09:40
1. 序言 信息论是优化信息传输的数学理论,香农信息论是代表。关于信息的更广范围研究,我们称之为信息科学。我研究语义信息论30多年,现在终于看到有更多人加入语义信息论研究。在我之前有北邮的吴伟陵教授和钟义信教授。钟义信教授最有名气,不过他研究范围更广的信息科学和哲学较多, ...
个人分类: 信息的数学和哲学|913 次阅读|5 个评论
语义信息论新进展——用语义信息测度优化最大熵控制
鲁晨光 2024-6-1 03:13
摘要:深度学习学习最近进展提示我们:我们需要同时最大最小化两种不同信息。信息的最大最小 (IMM)方法不仅已经用于深度学习,也已经用于强化学习和最大熵控制。香农提出的信息率失真函数是最小化互信息和数据压缩的理论基础,但是不足以解决 IMM 问题。作者曾提出语义信息 G 理论(即 Shannon-Lu 理论)——包括语义信息 ...
个人分类: 信息的数学和哲学|983 次阅读|没有评论
语义信息论用于有监督、半监督、无监督和强化学习
鲁晨光 2024-3-3 01:17
英国的Floridi教授和我国的钟义信教授的语义信息论研究影响较大。 不过他们的研究一直处于方向性指引阶段,参看钟义信教授的文章: http://html.rhhz.net/tis/html/202103042.htm 。 而我的语义信息论(应该说Shannon-Lu理论)已经很实用了。下面是我最近的一个报告,PPT文件转成PDF文件,比较详细,应该容 ...
个人分类: 信息的数学和哲学|1119 次阅读|1 个评论
根据现代科学和信息论改进反映论——一篇交流文章
热度 1 鲁晨光 2023-7-19 10:02
了解现代色觉理论和信息论的人很容易接受赫尔姆霍茨的符号论,但是对于搞哲学的人,即使是研究信息哲学的人来说,这是很难的。一个奇怪的事情是:很多人说信息科学带来哲学转折,但是,却很少讨论信息论对哲学基本问题的冲击。 我研究色觉理论也研究语义信息论,我支持唯物论,也支持符号论。这篇2023IS4IS交流文章就是讲 ...
1568 次阅读|3 个评论 热度 1
[转载]因果确证测度:从辛普森悖论到COVID-19
鲁晨光 2023-4-5 02:48
这是一篇关于因果确证的文章。发表于Entropy, 中英文见: 因果确证测度:从辛普森悖论到COVID-19 摘要: 用统计数据比较两种原因对结果的影响时,如果我们得到的合并结论和分组结论相反,这被称之为辛普森悖论 ( 英文是 Simpson Paradox, 缩写为 SP) 。现在流行的因果推断理论(英文是 Popular Causal ...
个人分类: 信息的数学和哲学|1849 次阅读|没有评论
深度学习大牛们用我30年前提出的语义信息测度了
鲁晨光 2023-1-20 14:02
摘要:最近几年,深度学习领域出现了不少声称通过最大互信息优化神经网络的方法。目标函数被称之为:互信息估计,神经信息,对比学习负损失函数…等,而它们原来都是笔者30年前提出的语义互信息的一种特例(真值函数同时作为相似函数的特例)。更重要的,笔者30年前就解决了语义信息和香农互信息的匹配关系——通过 ...
个人分类: 信息的数学和哲学|3145 次阅读|1 个评论
新冠无症状比例问题——比较机器学习西瓜分类
热度 1 鲁晨光 2023-1-9 09:30
摘要:为澄清新冠无症状比例减少问题,本文拿机器学习中典型的西瓜分类问题做比较。通过图解医学检验和西瓜分类原理,本文得出结论:新冠检测的特异性不够高以及基础概率增大是假阳性和无症状比例由大变小的主要原因。而核酸检测特异性不够高和我们为提高敏感性(为了清零)而增大 CT 划分点有关。最后文中提出一 ...
个人分类: 疫情分析|2302 次阅读|1 个评论 热度 1

Archiver|手机版|科学网 ( 京ICP备07017567号-12 )

GMT+8, 2024-9-26 00:15

Powered by ScienceNet.cn

Copyright © 2007- 中国科学报社

返回顶部