从文小说

手机浏览器扫描二维码访问

本站广告仅展示一次,尽可能不去影响用户体验,为了生存请广大读者理解

大模型:“人工智能+”的核心引擎(第1页)

提到“人工智能+”,现在最火、最核心的技术就是“大模型”。不管是聊天机器人、AI绘画,还是医疗诊断、工业质检,背后都离不开大模型的支撑。它就像“人工智能+”的“发动机”,决定了整个技术体系能跑多快、能覆盖多少场景。接下来咱们就从技术原理、发展格局、能力边界三个方面,用大白话把大模型讲明白,看看它到底是怎么工作的,又能在哪些地方发挥作用。

一、技术原理:Transformer架构+“预训练-微调”,大模型的“两大法宝”

大模型之所以能理解咱们说的话、生成想要的内容,核心靠的是两个技术支撑:一个是“Transformer架构”(相当于大模型的“骨架”),另一个是“预训练-微调”模式(相当于大模型的“学习方法”)。这两个“法宝”结合起来,才让大模型具备了从“读数据”到“拥有能力”的跨越。

先说说“Transformer架构”,这东西是2017年谷歌公司提出来的,最大的创新点叫“自注意力机制”。咱们可以把这个机制理解成大模型的“眼睛”——它在看一段文字、一张图片的时候,能自动“盯”住里面关联紧密的部分,搞清楚谁和谁有关系。

举个例子,当大模型处理“人工智能推动产业变革”这句话时,“自注意力机制”会立刻发现:“人工智能”是“推动”这个动作的发出者,“产业变革”是这个动作的接收者,三者之间存在“谁做了什么、影响了谁”的逻辑关系。有了这个能力,大模型就不会像以前的AI那样,只能逐字逐句读文字,而是能真正理解句子的语义,就像咱们人类读句子时会自动梳理逻辑一样。

而且,Transformer架构还有个很大的优势——“并行计算能力强”。以前的AI模型(比如RNN循环神经网络)处理数据,得像咱们读小说一样,从第一句读到最后一句,一句没读完就没法读下一句,效率很低。但Transformer架构能同时处理一整段数据,比如同时分析一句话里的所有词语,或者一张图片里的所有像素,就像很多人一起干活,速度比一个人干快多了。正因为有这个能力,现在才能训练出千亿、万亿参数的超大模型(参数越多,模型能记住的知识和处理的任务越复杂),要是还靠以前的架构,可能训练一次模型就得花好几年,根本没法实用。

再看“预训练-微调”模式,这个模式解决了大模型的一个关键矛盾:既要“啥都会”(通用性),又要“某方面很精通”(场景适配性)。咱们可以把这个过程类比成“上学+实习”,特别好理解。

第一步是“预训练阶段”,相当于让大模型“上大学,广泛学知识”。这个阶段,工程师会给大模型喂海量的“无标注数据”——就是没经过人工标记的原始数据,比如整个互联网的公开文本(新闻、小说、论文)、海量的图片库、音频文件等等。大模型在这个阶段会“疯狂读书”,从数据里学到通用的语言规律(比如中文的语法、常用搭配)、基础的知识图谱(比如“北京是中国的首都”“苹果既是水果也是手机品牌”),还有简单的逻辑推理能力(比如“因为下雨,所以地面会湿”)。这个阶段结束后,大模型就有了“基础知识储备”,能处理一些通用任务,比如回答常识问题、写简单的句子。

第二步是“微调阶段”,相当于让大模型“去实习,专攻某一行”。虽然预训练后的大模型啥都懂点,但面对具体行业的需求,还是不够专业——比如让它看病历、给病人提诊断建议,它就会“犯懵”,因为预训练时没学过医疗知识。这时候,工程师就会用“少量场景化标注数据”来调整模型,比如医疗领域的病历数据(标注了“症状-疾病-治疗方案”的对应关系)、金融领域的交易数据(标注了“交易行为-风险等级”)。大模型通过学习这些专业数据,就能快速掌握行业知识,适配特定场景。比如把预训练大模型用医疗数据微调后,它就能辅助医生看CT片、分析病历;用金融数据微调后,就能识别可疑交易、预测市场风险。

这个模式最大的好处是“省钱、高效”。如果每个场景都要从零开始训练大模型,比如为医疗、金融、教育分别建一个模型,那需要的算力和数据会是现在的好几倍,成本高到大多数企业都承受不起。而“预训练-微调”模式能实现“一次预训练,多次微调”——一个基础的预训练模型,稍微改改就能用到多个行业,大大降低了开发成本,也让大模型能更快地落地到各个领域。

二、发展格局:通用大模型+垂直大模型,“全能选手”和“专业高手”互补

现在大模型的发展已经不是“一刀切”了,而是分成了两大阵营:“通用大模型”和“垂直领域大模型”。这就像职场里的“全能选手”和“专业高手”——前者啥都会,能应对各种基础需求;后者在某一行做到顶尖,能解决专业难题。两者各有优势,又能互相配合,一起推动“人工智能+”落地到各行各业。

本小章还未完,请点击下一页继续阅读后面精彩内容!

先看“通用大模型”,它的定位是“全领域覆盖”,目标是成为大模型里的“万能工具”。为了实现这个目标,通用大模型的训练数据会覆盖互联网的多个领域,从新闻、科技到娱乐、生活,啥数据都学;参数规模也特别大,通常在千亿以上(比如GPT-4的参数规模就达到了万亿级别),参数越多,能处理的任务越复杂。咱们平时听说的GPT-4、百度文心一言、阿里通义千问,都属于通用大模型。

通用大模型的核心优势是“通用性强,适配快”。它就像一个多才多艺的人,不用专门培训,就能快速上手各种基础任务。比如用通用大模型,企业可以很快开发出聊天机器人(用来做客服)、内容生成工具(用来写营销文案、短视频脚本)、代码辅助编写系统(帮程序员写代码、找bug)。这些任务不用针对每个场景单独研发模型,只要在通用大模型的基础上简单调整,就能用起来,大大节省了时间和成本。

但通用大模型也有明显的短板——“专业能力不足”。面对需要深度行业知识的场景,它就显得“力不从心”了。比如让它看肺部CT片,判断病人是不是有肺癌,它可能会把炎症当成肿瘤,因为它没学过专业的医学影像知识;让它检测工业零件的缺陷,它可能会漏掉细微的裂痕,因为它不了解生产制造的专业标准。简单说,通用大模型是“啥都懂一点,但啥都不精通”,没法满足垂直领域的高精度需求。

再看“垂直领域大模型”,它的定位是“场景深度适配”,目标是成为某一行业的“顶尖专家”。和通用大模型相反,垂直大模型的训练数据主要是“行业专用数据”,比如工业大模型学的是设备运行数据、产品质检数据;医疗大模型学的是病历、医学文献、影像数据;教育大模型学的是教材、题库、教学案例。而且它的参数规模相对较小,通常在百亿以下——因为不用覆盖所有领域,只要把某一行的知识学透就行,参数太多反而会增加冗余。

热门小说推荐
养个竹马当老婆

养个竹马当老婆

①虞母因工作,想将小婴儿虞澜送到好友家暂住。 好友乐意至极,唯一需要担心的是她的儿子薄静时。 薄静时不久前被诊断疑似高功能孤独症,从小冷漠、拒绝交友与交流,是潜在的危险小孩。 婴儿房传出哭闹,她们看到薄静时冷脸站在婴儿床边。 就在她们以为薄静时会伤害小婴儿虞澜时,他伸手拿掉柜子上的机器人。 小婴儿虞澜这才不哭了,湿润着眼好奇地看他。 这是薄静时第一次出声与人交流:“我可以抱抱他吗?” ②小虞澜身体不好,刚离开母亲半夜总哭。 大家都以为薄静时会厌烦小虞澜,可面对委屈大哭的小宝宝,冰块脸小酷哥满脸焦急神色。 他学着给小宝宝泡奶粉、换纸尿裤,主动开口哄。 薄家人这才明白,他们这是给薄静时找了个小祖宗。 后来他总会黏在虞澜身边,能抱着绝不让虞澜走路。 再后来,所有人都知道薄静时有一个小祖宗。 从小养大的那种。 虞澜(受)视角:(成年后) ①有记忆以来,虞澜身边就有一个邻居哥哥,薄静时对谁都一副冷脸,唯独对他百依百顺。 他从小身体不好,薄静时有什么好东西都会给他。 如果薄静时有100块,其中96块都会给他花,剩下4块一起坐公交车回家。 ②他一直以为他们是好哥们儿,也会做一辈子好兄弟。 直到某天,他才意识到薄静时对他好得有些过分。 哄他的样子简直没有底线,任何无理的要求都会答应。 他觉得薄静时可能别有所图,比如想找他借钱之类的。 面对他的质问,薄静时很冷静,边帮他穿袜子边问:“你发现我喜欢你了?” 虞澜大惊失色:“??!” 可我是直男啊! ③虞澜认为薄静时只是错认情感,并不是真正喜欢他。 让人迅速下头的方式无非以下几点。 一:乱发脾气、作天作地; 二:过分黏人,不给私人空间; 三:找他借钱。 虞澜做了个遍。 原以为薄静时会烦了厌了,没想到薄静时乐在其中,上交全部存款,毫无底线地纵容他。 再后来,他发现被惯坏的感觉太香了。 #这直男不做也罢!# *撒娇粘人精vs酷哥妻奴; *竹马日常流/前期主养崽/成年之后才有感情线 *预收一:《我能听见直男室友的心声》 谢凝很苦恼。 他似乎……能听见某室友的心声。 谢凝是公认的高岭之花,哪怕和室友都保持一定距离。 ——他有很严重的肌肤饥渴症。幸好他意志力强,又有洁癖,一直能够忍受。 他的室友攻是体育学院的校草,钢铁直男,模样英俊,恐同又孤僻,拒人于千里之外。 他们基本没有交集。 直到某天暴雨,谢凝推开宿舍大门,浑身湿透,衬衣湿漉漉贴在身躯,滴滴答答往下淌水。 一直沉默寡言、不喜和人接触的直男校草一反往常起身,在谢凝即将摔倒的一瞬间,伸手扶了他一把。 谢凝刚要道谢,就听到攻说:“好乖,想超。” 谢凝一愣:“你说什么?” 只见攻那张冷酷的脸更加迷惑:“我没有说话。” 那谢凝听到的是什么? * 为了搞清楚这是怎么回事,谢凝和攻成了朋友。 攻表面冷淡,心声却特别热闹。 “画画的样子专注,可爱,想超。” “手也好漂亮,舔舔,哧溜哧溜。” “睡觉的样子好乖……斯哈斯哈。” 谢凝脸蛋涨红起身,丢下一句“有事先走了”匆匆离开。 背后传来攻的心声。 “……他发现我喜欢他了?” 谢凝落荒而逃。 * 后来,谢凝的肌肤饥渴症越来越严重。 他回到宿舍,身后传来反锁的声音,攻把他堵在角落,神情受伤:“你躲我?” 攻看到的是一张绯红克制、美到让人失语的脸。 为了帮助谢凝,攻主动献身,勾肩搭背搂搂抱抱,夜里还主动地洗干净上床。 再后来,攻得知心声一事,他一边将谢凝的双手腕制在头顶,一边哑声问:“我现在在想什么?” 谢凝抿唇不语。 他说不出口…… 但没关系,攻会哄着谢凝说。 对谢凝,他最有耐心。...

厨娘当家

厨娘当家

厨娘当家情节跌宕起伏、扣人心弦,是一本情节与文笔俱佳的其他类型小说,厨娘当家-爱好种田的吃货-小说旗免费提供厨娘当家最新清爽干净的文字章节在线阅读和TXT下载。...

花重锦官城

花重锦官城

【注意】:文名虽叫花重锦官城,但与成都无关。 【阅读提示】 故事背景:长安街头巷尾的各类诡异故事,一卷一个妖怪或鬼物。 男主傲娇世子,女主貌美小道姑。 双处,HE。 本文虽然参考了唐朝背景,但整体来说是个架空的朝代,所以切莫当真,切莫当真,切莫当真…...

走过这段路吧

走过这段路吧

女神级别前女友,霸道女总裁,古灵精怪的美女房东,不离不弃的温柔女咖啡师。想创业?美女资助就是了,想打架?兄弟陪着,想要爱情?随你挑选,你还在等什么?欢迎大家来看年度极品爽文,一切尽在!!!!......

假戏[娱乐圈]

假戏[娱乐圈]

三金大佬X十八岁小新人 影帝方骆北30岁这年接了一部奔着拿奖去的同志片 对手戏的男演员名叫简临 简临年纪小,片场经验丰富,演技尚可,就是感情戏奇烂无比 导演心说这不是办法,找到方骆北,要他在感情戏里带带简临 方骆北带了 带的时候,他放任纵容了简临的入戏 简临受,方骆北攻,年上差12岁,雷者绕路 娱乐圈背景相关自娱自乐,无原型...

七零海岛养娃日常

七零海岛养娃日常

《七零海岛养娃日常》七零海岛养娃日常目录全文阅读,主角是秦柔张城北小说章节完整质量高,包含结局、番外。?七零海岛养娃日常作者:松鼠醉鱼简介:秦柔是个幼师,性格绵软,为了保护幼儿园中的孩子,被持刀行凶的恶人刺中后背,却意外穿成了年代文中与她性格相反的嚣张妖艳作精女配。炮灰女配秦柔是一本七零文工团年代文的做精女配,是女主薛婷婷的对照组,薛婷婷温柔善良,而她长得妖艳,作天作地,一心攀高枝,最终沦落成众人笑柄,遭...