科学网

 找回密码
  注册
熵、概率、随机性
赵海 2026-5-31 15:00
在上帝高维视角下:熵即是世界混乱程度的度量,也是被遮蔽的高维结构的体积。当能量(温度)趋向于没有差别时,当信息趋向于没有秩序时,系统则趋向于熵最大(死寂)。 众所周知,系统论追求的是牺牲局部最佳而获得全局最佳。然而,熵增论则是用全局的混乱换得局部的有序。“概率是人类视角造成的信息缺失”,所以概率并 ...
个人分类: 思考点滴|1115 次阅读|没有评论
网络科学
热度 1 赵海 2026-5-30 12:05
网络科学(Netology)思考问题时探究结构约束,分析系统关注整体结构而非局部因素。至今以来,人类历史上共有超过650人从太空回望地球并亲历了“总观效应”(Overview Effect)。 视角升维触发认知系统的永久性重构: 1 世界观的解构与重塑边界消失; 2 脆弱性觉醒; 3 人类千年纷争在宇宙视角下退化为“蜗角之争”( ...
个人分类: 思考点滴|1195 次阅读|2 个评论 热度 1
马尔可夫性
赵海 2026-5-30 12:00
无穷的过去都以现在为归宿,无穷的未来都以现在为渊缘。即,所谓马尔可夫性,指系统当前状态足以推演未来。然而,现代物理缺乏第一性原理解释为何宇宙必须具备该马尔可夫性。 马尔科夫性的物理意义核心,在于用当前状态浓缩历史信息,实现复杂系统的降维建模。其本质是通过“无记忆性”假设,将随机系统的演化简化为相邻 ...
个人分类: 思考点滴|1105 次阅读|没有评论
投影
赵海 2026-5-22 14:21
在上帝高维视角下:熵即是世界混乱程度的度量,也是被遮蔽的高维结构的体积。当能量(温度)趋向于没有差别时,当信息趋向于没有秩序时,系统则趋向于熵最大(死寂)。众所周知,系统论追求的是牺牲局部最佳而获得全局最佳。然而,熵增论则是用全局的混乱换得局部的有序。“概率是人类视角造成的信息缺失”,所以概率并非 ...
个人分类: 思考点滴|1001 次阅读|没有评论
涌现是复制的误差
赵海 2026-5-22 13:07
《普适计算》的核心就是注意力问题 正如Transformer的两种核心逻辑,恰好对应着人注意力的两种状态,这也是技术与人性最奇妙的共鸣。传统神经网络的逻辑,像人年轻时的注意力模式:被动接收所有外部输入,按顺序响应,被权威、主流、外界评价牵着走,就像RNN、CNN,只能顺着既定顺序处理信息,没有自主选择的空间。 这种 ...
个人分类: 思考点滴|913 次阅读|没有评论
能量流动,秩序自生
赵海 2026-5-22 12:56
就方法论而言,如果一个模型是硬性地取出一堆token,强行的对其进行训练,美其名曰硬蒸,本质上就是抄袭。那么,软蒸在商业上看起来似乎更道德一些? 吾人从记住存储到搜索引擎,又从搜索引擎到人工智能。AI for Science成立的核心不是AI进入科学,而是AI让不同学科首次拥有统一表达世界的工具: 1. 过去各学科模型语言 ...
个人分类: 思考点滴|827 次阅读|没有评论

Archiver|手机版|科学网 ( 京ICP备07017567号-12 )

GMT+8, 2026-8-16 22:00

Powered by ScienceNet.cn

Copyright © 2007- 中国科学报社

返回顶部