学会区分大模型——大模型的分类,让你更清晰的认识大模型
创作时间:
作者:
@小白创作中心
学会区分大模型——大模型的分类,让你更清晰的认识大模型
引用
1
来源
1.
http://www.360doc.com/content/24/1021/10/5144993_1137225025.shtml
“乱花渐欲迷人眼,学会从根本上认识问题”
现在市面上大模型如百花齐放,对很多人来说一堆大模型带来的不是简单方便,而是乱七八糟以及迷茫。因为不知道不同的大模型之间有什么区别,也不知道自己需要什么样的大模型;就拿huggingface来说,上面的模型有几十万,有几个人能弄明白它们都是干什么的?
因此,我们首先需要学会的就是大模型的分类,对大模型分门别类之后就知道哪些大模型是做什么的,自己需要的是什么了。
大模型的分类
事实上直接说大模型并不是特别准确,大模型指的是具有庞大参数的机器学习或者深度学习模型。根据模型的参数量可以分为大/中/小三种类型,不同的模型对资源要求不同,应用的场景也不同;比如一些小模型可能会安装到移动设备之上。
按任务类型分类
根据任务类型,大模型可以分为生成式模型,判别式模型和混合模型。
- 生成式模型:这种模型主要用于生成内容,包括文本,图像,音视频等;典型的比如GPT模型。
- 判别式模型:判别式模型主要应用于分类,预测等任务;如图像分类,文本分类等;比如Bert模型。
- 混合模型:混合模型结合生成式和判别式模型的能力,能够在生成内容的同时进行分类或判别任务。
当然,这个按任务分类只是进行简单的分类,如果再细化还有更多的分类方式,比如情感分析等。
按数据模态分类
根据数据模态,大模型主要分为两类,一类是单模态模型,一类是多模态模型。
- 单模态模型:单模态就是仅支持一种模态数据的模型,比如支持文本或者图片等类型的模型;如ResNet处理图像,BERT模型处理文本。
- 多模态模型:能够同时处理多种类型的数据,如文本,图像,音视频等;如CLIP模型结合了文本和图像处理的功能。
按训练方法分类
按训练方法进行分类,主要有预训练模型,从零训练模型和迁移学习模型。
- 预训练模型:通常在大规模数据集上进行预训练,然后通过微调适应特定任务,如GPT,BERT等。
- 从零训练模型:从头开始训练的模型,通常在特定任务上训练,数据集要求较高。
- 迁移学习模型:迁移学习通常是指在一个任务中学习的知识迁移到另一个相关任务中;能够减少训练时间并提升性能。
按应用领域分类
按照应用领域分类,主要分为自然语言处理,计算机视觉模型,以及语音处理模型等。
- 自然语言处理模型:专门用于处理和理解人类的语言,如文本生成,翻译,情感分析等任务。
- 计算机视觉模型:用于处理和理解图像或视频数据,如图像分类,目标检测,图像生成等任务。
- 语音处理模型:用于处理语音信号,包括语音识别,合成,情感分析等任务。
基于自然语言处理的人工智能机器人:
按模型架构分类
按模型架构分类,主要分为transformer架构,卷积神经网络和循环神经网络以及长短期记忆网络。
- transformer架构:transformer架构应该就不用多说了,大名鼎鼎的GPT就是基于Transformer架构,广泛应用于自然语言处理和多模态任务中。
- 卷积神经网络:主要应用于计算机视觉任务中。
- 循环神经网络和长短期记忆网络:传统上用于处理时间序列数据或语音处理任务。
当然,大模型的分类还有多种不同的形式,以上分类方式是目前比较主流的方式而已。比如说有应用于代码开发的代码生成模型,用于数据处理的数据分析模型等。
弄清楚模型的分类,有助于加深对模型的理解;比如说有人提到GPT,你就能知道它是一个基于Transformer架构的,能够进行自然语言处理与生成的预训练模型。
热门推荐
北京人最爱的羊蝎子家常做法
一文掌握数据库测试:四大维度保障数据安全与性能
上海到恩施:5天1000元旅游攻略,含省钱购票方案
上海到恩施无直达列车,汉口南京南两大中转方案
权威发布:一级消防工程师报考条件及备考指南
别盲目追捧3.5分餐厅:差评君带你理性看待餐厅评分
跟着燕子导游玩转潮州古城:两天一夜精华游
辅酶Q10:抑郁症治疗的新希望
新冠康复期,辅酶Q10守护心血管健康
古天乐捐建135所希望小学,4000万善款播撒教育火种
王羲之兰亭序:自然、生命与虚无的书法表达
《兰亭序》:王羲之的书法巅峰与人生感悟
兰亭景区:书法圣地焕发新生,从千年古迹到文化创新
皮肤肿块莫轻视:脂肪瘤囊肿的诊断与治疗指南
一文读懂脂肪瘤和囊肿:从症状到治疗全解析
网球肘康复全攻略:从物理治疗到日常护理
香菜不止是调味:秋冬季节的养生食材搭配指南
香菜:营养超柠檬番茄,8大功效但非人人可食
巨细胞病毒肺炎:最新研究进展
李嘉欣投身教育公益:惠灵顿筹款到贫困生资助
香菜牛肉烹饪指南:从食材选购到创新搭配
李嘉诚大动作!7.6折甩卖北京一项目,房价较地价猛涨50倍
手指甲劈裂是怎么回事 八种方法保护你的美甲
双十一剁手党必备:移动支付让你秒变购物达人
喝红茶真的能拯救你的心血管?
红茶中的抗氧化成分真的这么牛?
夏季钓鲢鳙,这些技巧让你爆护满满
冬季新手钓鲢鳙实用指南
阿斯美治疗哮喘效果显著,四类人群禁用需警惕
算法推荐系统深刻改变信息分发逻辑,重塑消费体验与内容生态