学会区分大模型——大模型的分类,让你更清晰的认识大模型
创作时间:
作者:
@小白创作中心
学会区分大模型——大模型的分类,让你更清晰的认识大模型
引用
1
来源
1.
http://www.360doc.com/content/24/0818/23/528292_1131710557.shtml
乱花渐欲迷人眼,学会从根本上认识问题。
现在市面上大模型如百花齐放,对很多人来说一堆大模型带来的不是简单方便,而是乱七八糟以及迷茫。因为不知道不同的大模型之间有什么区别,也不知道自己需要什么样的大模型;就拿huggingface来说,上面的模型有几十万,有几个人能弄明白它们都是干什么的?
因此,我们首先需要学会的就是大模型的分类,对大模型分门别类之后就知道哪些大模型是做什么的,自己需要的是什么了。
大模型的分类
事实上直接说大模型并不是特别准确,大模型指的是具有庞大参数的机器学习或者深度学习模型。根据模型的参数量可以分为大/中/小三种类型,不同的模型对资源要求不同,应用的场景也不同;比如一些小模型可能会安装到移动设备之上。
按任务类型分类
根据任务类型,大模型可以分为生成式模型,判别式模型和混合模型。
- 生成式模型:这种模型主要用于生成内容,包括文本,图像,音视频等;典型的比如GPT模型。
- 判别式模型:判别式模型主要应用于分类,预测等任务;如图像分类,文本分类等;比如Bert模型。
- 混合模型:混合模型结合生成式和判别式模型的能力,能够在生成内容的同时进行分类或判别任务。
当然,这个按任务分类只是进行简单的分类,如果再细化还有更多的分类方式,比如情感分析等。
按数据模态分类
根据数据模态,大模型主要分为两类,一类是单模态模型,一类是多模态模型。
- 单模态模型:单模态就是仅支持一种模态数据的模型,比如支持文本或者图片等类型的模型;如ResNet处理图像,BERT模型处理文本。
- 多模态模型:能够同时处理多种类型的数据,如文本,图像,音视频等;如CLIP模型结合了文本和图像处理的功能。
按训练方法分类
按训练方法进行分类,主要有预训练模型,从零训练模型和迁移学习模型。
- 预训练模型:通常在大规模数据集上进行预训练,然后通过微调适应特定任务,如GPT,BERT等。
- 从零训练模型:从头开始训练的模型,通常在特定任务上训练,数据集要求较高。
- 迁移学习模型:迁移学习通常是指在一个任务中学习的知识迁移到另一个相关任务中;能够减少训练时间并提升性能。
按应用领域分类
按照应用领域分类,主要分为自然语言处理,计算机视觉模型,以及语音处理模型等。
- 自然语言处理模型:专门用于处理和理解人类的语言,如文本生成,翻译,情感分析等任务。
- 计算机视觉模型:用于处理和理解图像或视频数据,如图像分类,目标检测,图像生成等任务。
- 语音处理模型:用于处理语音信号,包括语音识别,合成,情感分析等任务。
基于自然语言处理的人工智能机器人:
按模型架构分类
按模型架构分类,主要分为transformer架构,卷积神经网络和循环神经网络以及长短期记忆网络。
- transformer架构:transformer架构应该就不用多说了,大名鼎鼎的GPT就是基于Transformer架构,广泛应用于自然语言处理和多模态任务中。
- 卷积神经网络:主要应用于计算机视觉任务中。
- 循环神经网络和长短期记忆网络:传统上用于处理时间序列数据或语音处理任务。
当然,大模型的分类还有多种不同的形式,以上分类方式是目前比较主流的方式而已。比如说有应用于代码开发的代码生成模型,用于数据处理的数据分析模型等。
弄清楚模型的分类,有助于加深对模型的理解;比如说有人提到GPT,你就能知道它是一个基于Transformer架构的,能够进行自然语言处理与生成的预训练模型。
热门推荐
“一场重病” : 如何才能找到适合自己的修行道路?
道家修行的好处与道家思想的主张
夫妻增进信任感的十个实用方法
连锁酒店加速布局低线城市,春节旅游热潮推动房价上涨
石墨烯电池使用寿命全解析:最长可达40个月,这些使用技巧让你省心省钱
新型中距弹搭配歼-35A,增加“弹匣深度”,治愈“火力恐惧”
螺矿比的数值是多少?螺矿比的变化反映了什么市场情况?
泰安美食全攻略:必尝的泰安传统美食
各国跨国婚姻移民政策详解:从签证到永久居留
如何准备与外国人结婚的材料
十六岁孩子后脑睡平应该如何处理
宝宝后脑勺扁平怎么办?这些矫正方法请收好
小“狮子头” 有大来头!
冷凝香珠DIY,香气四溢暖人心
红枫什么品种耐寒
止咳化痰双管齐下?这个用药误区可能加重病情
碳水循环减脂周期:原理、周期及注意事项全解析
深度解析电池管理系统BMS:工作原理、流程及主要电子配件
从指甲看健康!什么样的指甲才是健康的?哪些情况需要注意?
中药煎煮小技巧与注意事项
这些「翻车」历史告诉CEO,失败没那么可怕
揭秘人性密码:社会心理学带你透视行为的隐秘动因
当心,你可能中了职场PUA的套路!
肠胃老是有状况,却找不到原因?医:可能是「肠脑互动异常」!
韦小宝的女伴是谁?谁先怀孕了?
美利曲辛片的功效与作用是什么
探索心情之匙:氟哌噻吨美利曲辛片的日常应用
伯南克:从大萧条研究到诺贝尔经济学奖
甘草陈皮合用的功效
极品飞车系列,寻找最好玩的版本