秒懂：图解人工智能训练及工作过程（中文流程图）天天要闻 - 欧洲能源网

当前位置：首页>关注 >

秒懂：图解人工智能训练及工作过程（中文流程图）天天要闻

2023-06-26 15:08:21 来源：AI新动力

【资料图】

为了方便大家从整体了解人工智能训练的过程，避免因为过多的概念影响对整体的理解，我们绘制了这张流程图。

人工智能训练过程图

数据收集：收集用于训练的数据，输出原始数据（未经处理的数据集）数据预处理：清洗和格式化数据，输出预处理数据（适合模型训练的数据）模型初始化：设定模型的初始参数，输出初始化模型（设定初始参数的模型）模型训练：使用数据训练模型，输出训练模型（经过一轮训练的模型）模型评估：评估模型的性能，输出评估结果（模型的性能指标）模型优化：根据评估结果优化模型，输出优化模型（经过优化的模型）模型部署：将模型应用于实际环境，输出最终模型（满足要求的模型）

下图是ChatGPT的工作流程简图：

ChatGPT工作流程简图

一、用户输入：用户提供的原始输入。

二、输入处理：处理用户的输入，准备送入模型。

分词器：将输入的文本分解为可以被模型理解的小块（token）。Tokenization：将输入的文本转换为token的过程。

三、ChatGPT模型：接收处理后的输入，开始生成回复。

Transformer模型：ChatGPT模型的核心部分，用于理解输入和生成回复。自注意力机制：Transformer模型的关键部分，用于理解输入中的各个部分之间的关系。多头注意力：自注意力机制的一部分，允许模型同时关注输入的多个部分。缩放点积注意力：多头注意力的一部分，计算输入部分之间的关系。生成回复：根据理解的输入和学习到的模式，生成回复。

四、输出处理：处理模型生成的输出，准备展示给用户。

反分词器：将模型生成的token重新组合成人类可读的文本。Detokenization：将token转换回文本的过程。

五、用户看到回复：用户看到最终的回复。

Token样例

关键词：

推荐内容

产业

油气

1

河北深州警方打掉一暴力催债团伙 36名嫌犯被刑拘

2

寒潮降温破冰点如何保障温暖过冬？探访北京城管及供热

3

莆田致2死3伤案嫌犯拒捕并畏罪自杀经抢救无效死亡

4

福建福州一在建摩天轮发生垮塌事故原因正在调查中

5

为什么对张恒处3227万元罚款？其违法事实有哪些？

6

山西民政部门支出超2亿元捐款保障受灾困难民众基本生活

7

张恒被税务部门依法处以3227万元罚款

8

湖北赛武当国家级自然保护区监测到珍稀动物

9

首届“优秀长江协助巡护员”评选颁奖

10

今年火灾事故已超6000起！电动自行车为何频频爆炸？

经济

国家一级保护动物梅花鹿误入羊群内蒙古警方及时救助

　　中新网通辽10月18日电 (记者张林虎)18日，记者从内蒙古自治区通辽市奈曼旗公安局获悉，国家一级保护动物--梅花鹿误入当地村民羊群，

浙江杭州西湖首次推“环湖游线” 重现灵隐天竺上香水路

　　中新网杭州10月18日电 (王题题胡燕婕)云天收夏色，浅秋正渐浓。10月18日，浙江杭州市西湖游船有限公司推出的惠民多站点“西湖环湖游

税务机关处罚一名艺人经纪人

　　中国税务机关处罚一名艺人经纪人　　中新社北京10月18日电 (记者赵建华)上海市税务局第一稽查局前期在艺人郑爽偷逃税案件检查过程中

【母亲河畔的中国】黄河润泽甘肃：沿岸城市兴文旅

　　中新网兰州10月18日电 (闫姣艾庆龙吉翔)“红山白土头，黄河向西流。”不少人疑问，天下黄河向东流，为何甘肃永靖县这段黄河却向西

《清华城市健康设施指数》：城市健康设施状况与其经济发

　　中新网北京10月18日电《清华城市健康设施指数》18日在北京发布。报告成果显示，城市健康设施指数领先城市以中心城市和东部沿海城市