科学网

 找回密码
  注册
《AI浪潮:LLM 凭什么能“涌现”超级能力?》
李维 2023-2-6 13:14
为民: “惨痛的教训”和ChatGPT的规模优势 写了一篇短文,属于无病呻吟,希望各位指正 。有些想法之前在群里请教过;也借用了白老师的“对接派”和“冷启派”之说。 立委:先提一句,zero-shot 等,翻译成“零下、一下、几下”不大好理解,主要是 “下” 是个太常用的汉字,感觉不如 “零样例、单样例、多样例”,或 ...
个人分类: 立委科普|3802 次阅读|没有评论
《AI浪潮:chatGPT 帮你写应用文》
李维 2023-1-29 11:33
立委按:自从chatGPT横空出世,这类应用文辅助写作案例已经水漫金山,见奇不怪了。但这不改变辅助写作是一个具有巨大应用场景和价值的方向,虽然大概率与机器翻译也差不多,最后作为行业可能被做死,或成为白菜价。下面是我自己前一阵子做的一些试验,光顾玩,未能及时记录,摘录如下。 其一:推荐信 请帮助 ...
个人分类: 立委科普|2680 次阅读|没有评论
《AI浪潮:因为见从而信,见证奇迹的时刻》
李维 2023-1-16 08:15
立委:我们只知道在出现一种可以把任何东西encode,变成(decode)任何其他东西的变形金刚(transformer)架构发明以后 大数据大算力驱动的“老流氓”(llm: large language model)就开始搞怪。也才几年?主席说,搅得周天寒彻: 而今我谓llm不管这高不管这多雪安得倚天抽宝剑把它裁为 ...
个人分类: 立委科普|1645 次阅读|没有评论
《AI浪潮:玩不死的 chatGPT (之二)》
李维 2023-1-7 07:04
语言学家也玩不死语言大模型吗? 做一只小白鼠,咱们开玩。chatGPT,看你有多牛?气有多长?掉不掉链子。 一切从我熟悉的主题开始,也是语言学的化石级理论基础:计算语言学。 虽然它的发挥有些偏离了我的原意,但夸夸其谈的教授风度还在。这个起点不错。改成英文: 嗯,中规中矩,似是不非,虽然比较空洞。 ...
个人分类: 立委科普|3359 次阅读|没有评论
《AI浪潮:关于chatGPT 的 思维链能力 》
李维 2023-1-6 07:22
立委:chain-of-thought (CoT,思维链)也可以翻译为不掉链子。这个能力我们在玩 chatGPT 的时候常常能体会到。相比于以前的模型,它不掉链子的表现令人印象深刻。 为民:我觉得 Google 的 LaMDA 可能也不弱,特别是他们的 Chain of Thought 技术, 看看他们是否可以像当时的搜索一样后来居上。但 OpenAI 目前占有先机: O ...
个人分类: 立委科普|4274 次阅读|没有评论
《AI浪潮:n-shot 是训练还是指令》
李维 2023-1-6 03:26
【立委按:NLP技术大喷发,以 chatGPT 为里程碑,石破天惊,让人目不暇给。社媒上圈内圈外,奔走相告,简直就是AI全民狂欢节的气氛。在这个当口,《AI浪潮》立委微信群组有幸请来诸多大咖,高谈阔论,蓬荜生辉。挂一漏万,拣有趣主题略记之,权作科普,以飨同好。】 刘群:现在nlp已经被ml冲击得差不多了,很多术 ...
个人分类: 立委科普|2038 次阅读|没有评论
AIGC 潮流扑面而来,是顺应还是(无谓)抵抗呢?
李维 2022-11-5 05:42
画不好美少女吃面的 AI,让二次元怒了 这个视频科普很不错,值得推荐。应该是常识了,但还需要加强普及,quote:「我们的 AI 不是复制和混合现有图像,而是在深度学习算法的帮助下,从头开始生成原始图像,AI 基本上已经学会了如何创建图像——就像人一样。」 面对AIGC(AI Generated Content)大潮,可以理解艺术家 ...
个人分类: 立委科普|2237 次阅读|没有评论
漫谈AI 模型生成图像
李维 2022-10-5 06:56
漫谈AI 模型生成图像 中的 视频人物美术作品,全部是AI模型生成的。不同风格,以及不同风格的碰撞。 AI 生成并高清化的肖像 (8 MB) AI 生成肖像作品(2MB) txt2img 乍一看 也没啥,花里胡哨的,好像都是闹着玩的。不少“作品”感觉在前AI生成模型阶段,通过抄袭(侵犯版权)加PS也 ...
个人分类: 立委科普|2420 次阅读|没有评论
图灵测试其实已经过时了
李维 2022-5-12 11:03
图灵测试的实质就是要让人机交互在限定时间内做到真假莫辨。玩过GPT3的同学们都清楚,其实这一点已经做到了。从这个角度看,图灵测试已经过时了。区别人和机器,需要寻找其他的标准。 今天就唠一唠正在风口上的预训练语言大模型。大模型标志着NLP的新方向。这是只有大投资或大厂才能玩得起的游戏,目前推出了30多款大模型 ...
个人分类: 立委科普|2693 次阅读|没有评论
《立委科普:自注意力机制解说》
李维 2022-5-8 09:28
【立委按】这阵子研读NLP当前最核心的transformer框架及其注意力机制入迷。注意力机制是主流AI最给力的transforner框架的核心,神一般的存在。这个框架是当前最火的预训练超大模型的基石,被认为是开启了NLP新纪元。网络时代的好处是,只要你对一个专题真感兴趣,就会有源源不断的信息奔涌而来, ...
个人分类: 立委科普|3794 次阅读|没有评论

Archiver|手机版|科学网 ( 京ICP备07017567号-12 )

GMT+8, 2024-9-21 03:04

Powered by ScienceNet.cn

Copyright © 2007- 中国科学报社

返回顶部