训练和评估模型
创作时间:
作者:
@小白创作中心
训练和评估模型
引用
1
来源
1.
https://learn.microsoft.com/zh-cn/training/modules/custom-name-entity-recognition/4-train-evaluate-your-model
训练和评估模型是一个迭代过程,用于向训练数据集添加数据和标记,以便更准确地训练模型。 若要了解需要改进的数据和标记类型,Language Studio 在左侧窗格的“查看模型详细信息”页中提供评分。
单个实体和整体模型分数分为三个指标,以说明它们的性能以及需要改进之处。
指标 | 说明 |
|---|---|
精度 | 成功识别实体次数与尝试的所有识别次数的比率。 高分数意味着只要识别实体,它就已正确标记。 |
召回率 | 成功识别实体次数与文档中实际存在的实体数的比率。 高分数意味着它能够很好地查找实体,无论它是否为其分配正确的标签 |
F1 分数 | 将精准率和召回率组合可提供单个评分指标 |
分数可按各实体提供,也可提供整个模型的分数。 你可能会发现某个实体分数很高,但整个模型分数却不高。
如何解释指标
理想情况下,我们希望模型在精准率和召回率方面获得高分,这意味着实体识别效果良好。 如果这两个指标分数都低,则意味着模型很难识别文档中的实体,并且当它确实提取该实体时,它不会为其分配置信度高的正确标签。
如果精准率低,但召回率高,则表示模型能够很好地识别实体,但不将其标记为正确的实体类型。
如果精准率高,但召回率低,则表示模型并不总是识别实体,而是在模型提取实体时应用了正确的标签。
混淆矩阵
在同一“查看模型详细信息”页上,“混淆矩阵”顶部还有另一个选项卡。 此视图提供所有实体的可视表以及每个实体的表现,以全面了解模型及其不足之处。
使用混淆矩阵,可以直观地发现在何处添加数据可提高模型的性能。
热门推荐
大学生考初级会计优势,这4大优势很吸引人
探索分形理论在自然界中的神秘应用与美学
徽州天路自驾游线路图,入冬3日游攻略 探寻徽州天路的绝美
耳石复位术:有效解决眩晕困扰的精准治疗
如何进行一级、二级、三级调色-调色步骤和技巧详解
岷县当归:千年药乡的道地瑰宝
板绘入门:16个实用上色技巧详解
LPL格局大变天!T1与BLG全部爆冷,IG压力骤增,败者组沦为炼狱场
脑血管造影检查前能否吃药?医生提醒:这些注意事项要记牢
合同违约和合同诈骗的认定标准区别
每天了解一个城市—山东·日照,风景秀丽的滨海城市
过敏性鼻炎如何应对?自救指南来了
AI写作的秘密:智能文本生成技术全解析
喝水后很快小便和很久不去厕所的人,哪种更健康?哪些排尿不正常
应对脸部过敏肿胀的有效方法与注意事项大总结
Excel曲线拟合函数计算方法详解
昔日国民快餐"顶流"黄焖鸡,为啥没人吃了?
八皇后问题:完整解析与代码优化
数学建模中的常用插值算法与代码实践
首个“世界激素日”官宣!内分泌学家提出10项建议
网卡故障原因及解决方法(探究网卡故障的原因)
在界面设计中什么是层次感 怎样增加层次感
脸部保湿怎么做?5个步骤让你摆脱干燥,脸部保湿不油腻!
从宇宙大爆炸开始到遥远的未来,宇宙所有的故事都在这里!
新能源汽车T-BOX介绍
这些空间如此惊艳,全因植物艺术装置!
海参哪里的最好?海参人工养殖技术详解
热点事件深度解析:社会影响力与媒体反应
专家支招:如何科学应对“开学焦虑”
如何合理规划和获取所需的资金?这些资金的使用和管理需要注意什么?