logo
5

【评测】千帆大模型平台数据训练-大模型调优上手实操

产品定义

从百度官方给出的定义来看,千帆大模型平台是面向企业开发者的一站式大模型开发及服务运行平台。该平台提供了包括文心一言底层模型(ERNIE-Bot)和第三方开源大模型,也提供了各种AI开发工具和整套开发环境,方便客户轻松使用和开发大模型应用。

应用场景

此外,百度官方也提供了其应用场景,面向不同的企业需求,千帆提供不同的功能服务。
例如,智能对话、智能输入法等通用应用场景,可在千帆大模型平台直接体验文心一言企业级推理云服务,并进行业务集成;
细分领域电销场景的商品介绍、推广文章等需要对推理结果进行定制调整,则可在文心千帆使用模型在线微调训练功能,快速生产行业场景定制模型服务,满足用户特定需求。

场景一:对话沟通

匹配场景:智能营销、智能客服、情感沟通等需要沟通对话的场景。
在实际生活中,针对用户需求提供快速应答,精准匹配用户需求,完成营销商拓、及时响应、正向心理辅导等内容,提升客户体验。
具体案例:针对用户需求,输出结果。例如,用户需要平台帮忙推荐一下四大名著,如下图所示:

场景二:内容创作

匹配场景:剧本、故事、诗歌等文本创作场景。
根据用户的需求,生成精准匹配的创作文本,为用户提供视频编排的剧本来源;润色成型的故事、诗歌等文本内容,给用户创造提升文本能力的文化环境。
具体案例:用户下发自定义指令,创作成型的文本内容。例如,用户需要平台按要求写一首藏头诗,如下图所示:

场景三:分析控制

匹配场景:所谓分析控制是包含代码生成、数据报表、内容分析等深度学习的文本场景。
根据用户的需求快速生成可执行的代码或者根据用户的需求,平台结合自身已具备的多种数据,生成匹配度更高的应答内容。
具体案例:用户临时遇到需处理的问题,平台生成解决方案。例如,开发工程师利用平台生成具体代码,完成代码的优化,如下图所示:

其他场景

  • 政务服务:多轮智能交互,带来有温度的民生服务;
  • 金融服务:能力媲专业人士,辅助科学金融决策;
  • 旅行服务:一站式行程规划预定,每次都是定制游;
  • 电商服务:自动生成带货脚本,数字人主播一键开播;
  • 企业办公-PPT制作:告别反复格式调节,分钟级制作专业PPT;
  • 企业办公-石墨文档 :轻松完成多种类型写作,释放无限创造力。

使用方式

千帆大模型平台提供了两种部署方式。包括开箱即用、简单高效的公有云服务,和私有化部署的方式。

申请使用流程

申请内测

官方链接:https://login.bce.baidu.com/。如果没有百度账号的注册一个!如果有直接登录!
申请内测,然后等待审核,三个小左右!

审核通过后,会发放测试用的代金券!
链接如下:
https://console.bce.baidu.com/finance/#/finance/coupon/list

注意:
存在代⾦券,且适⽤产品包含⽂⼼千帆⼤模型平台
订单类型须为: 通⽤或者后付费

开通付费

访问开通产品⻚⾯
https://console.bce.baidu.com/ai/?#/ai/wenxinworkshop/create/home

点击立即使用

将滚动条拉到底。然后,点击同意并继续。
点击下一步

点击下一步

恭喜你,开通了!
然后,在主页面看到已下单的产品里面包含文心千帆大模型了。

创建应⽤


点击文心千帆大模型平台,进入到平台内部。

下面的红框可以看到我们刚才开通的服务。点击,上面的红框,创建应用!
输入名称,名字自己定义就好,还有下面的简介,随意填写!默认的接口已经包含了大模型,我们不用修改该!
然后点击立即创建。

恭喜你,已经完成创建!

大模型推理

使用方式有三种,包括:在线测试、
打开链接:https://ai.baidu.com/wenxinworkshop/app/overview,界面如下:

上图中的界面就是千帆的整个功能平台,有测试、训练、数据集管理等。

点击在线测试,就可以开始对话了。右侧是模型和我们刚才创建的应用!
先上一个送命题!

关于鲁迅和周树人这个问题,很多大模型都回答错误了!这个居然没有难倒文心千帆!
下一题:

难不倒啊!再来一道题:

这个模型有点猛!

发布部署

点击服务管理进入发布页面

选择部署方式和模型,模型版本,填写服务名称和接口地址。然后,点击下一步!

选择时间,申请发布即可!不过,好贵!!!点之前一定要摸摸兜!

数据集

制作数据集

[{"prompt": "类型#上衣*材质#牛仔布*颜色#白色*风格#简约*图案#刺绣*衣样式#外套*衣款式#破洞", "response": [["简约而不简单的牛仔外套,白色的衣身十分百搭。衣身多处有做旧破洞设计,打破单调乏味,增加一丝造型看点。衣身后背处有趣味刺绣装饰,丰富层次感,彰显别样时尚。"]]}]
[{"prompt": "类型#裙*材质#针织*颜色#纯色*风格#复古*风格#文艺*风格#简约*图案#格子*图案#纯色*图案#复古*裙型#背带裙*裙长#连衣裙*裙领型#半高领", "response": [["这款BRAND针织两件套连衣裙,简约的纯色半高领针织上衣,修饰着颈部线,尽显优雅气质。同时搭配叠穿起一条背带式的复古格纹裙,整体散发着一股怀旧的时髦魅力,很是文艺范。"]]}]
[{"prompt": "类型#上衣*风格#嘻哈*图案#卡通*图案#印花*图案#撞色*衣样式#卫衣*衣款式#连帽", "response": [["嘻哈玩转童年,随时<UNK>,没错,出街还是要靠卫衣来装酷哦!时尚个性的连帽设计,率性有范还防风保暖。还有胸前撞色的卡通印花设计,靓丽抢眼更富有趣味性,加上前幅大容量又时尚美观的袋鼠兜,简直就是孩子耍帅装酷必备的利器。"]]}]
[{"prompt": "类型#裤*风格#英伦*风格#简约", "response": [["裤子是简约大方的版型设计,带来一种极简主义风格而且不乏舒适优雅感,是衣橱必不可少的一件百搭单品。标志性的logo可以体现出一股子浓郁的英伦风情,轻而易举带来独一无二的<UNK>体验。"]]}]
[{"prompt": "类型#裙*裙下摆#弧形*裙腰型#高腰*裙长#半身裙*裙款式#不规则*裙款式#收腰", "response": [["这款来自梵凯的半身裙富有十足的设计感,采用了别致的不规则设计,凸显出时尚前卫的格调,再搭配俏皮的高腰设计,收腰提臀的同时还勾勒出优美迷人的身材曲线,而且还帮你拉长腿部比例,释放出优雅娇俏的小女人味。并且独特的弧形下摆还富有流畅的线条美,一颦一动间展现出灵动柔美的气质。"]]}]
[{"prompt": "类型#上衣*版型#宽松*版型#显瘦*图案#线条*衣样式#衬衫*衣袖型#泡泡袖*衣款式#抽绳", "response": [["这件衬衫的款式非常的宽松,利落的线条可以很好的隐藏身材上的小缺点,穿在身上有着很好的显瘦效果。领口装饰了一个可爱的抽绳,漂亮的绳结展现出了十足的个性,配合时尚的泡泡袖型,尽显女性甜美可爱的气息。"]]}]
[{"prompt": "类型#裙*材质#蕾丝*风格#宫廷*图案#刺绣*图案#蕾丝*裙型#大裙摆*裙下摆#花边*裙袖型#泡泡袖", "response": [["宫廷风的甜美蕾丝设计,清醒的蕾丝拼缝处,刺绣定制的贝壳花边,增添了裙子的精致感觉。超大的裙摆,加上精细的小花边设计,上身后既带着仙气撩人又很有女人味。泡泡袖上的提花面料,在细节处增加了浪漫感,春日的仙女姐姐。浪漫蕾丝布满整个裙身,美丽明艳,气质超仙。"]]}]
[{"prompt": "类型#裤*版型#显瘦*颜色#黑色*风格#简约*裤长#九分裤", "response": [["个性化的九分裤型,穿着在身上,能够从视觉上拉长你的身体比例,让你看起来更加的有范。简约的黑色系列,极具时尚的韵味,充分凸显你专属的成熟韵味。修身的立体廓形,为你塑造修长的曲线。"]]}]
[{"prompt": "类型#裙*版型#显瘦*风格#文艺*风格#简约*图案#印花*图案#撞色*裙下摆#压褶*裙长#连衣裙*裙领型#圆领", "response": [["文艺个性的印花连衣裙,藏青色底蕴,低调又大气,撞色太阳花分布整个裙身,绚丽而美好,带来时尚减龄的气质。基础款的舒适圆领,简约不失大方,勾勒精致脸庞。领后是一粒包布扣固定,穿脱十分方便。前片立体的打褶设计,搭配后片压褶的做工,增添层次和空间感,显瘦又有型。"]]}]
[{"prompt": "类型#裙*颜色#蓝色*风格#清新*图案#蝴蝶结", "response": [["裙身处采用立体蝴蝶结装饰辅以蓝色条带点缀,令衣身造型饱满富有层次的同时为其注入一丝甜美气息。将女孩清新娇俏的一面衬托而出。"]]}]
[{"prompt": "类型#裙*颜色#白色*风格#清新*图案#碎花*裙腰型#松紧腰*裙长#长裙*裙衣门襟#拉链*裙款式#拉链", "response": [["这条颜色素雅的长裙,以纯净的白色作为底色,辅以印在裙上的点点小碎花,<UNK>勾勒出一幅生动优美的“风景图”,给人一种大自然的清新之感,好似吸收新鲜空气的那种舒畅感。腰间贴心地设计成松紧腰,将腰线很好地展现出来,十分纤巧,在裙子的侧边,有着一个隐形的拉链,能够让你穿脱自如。"]]}]
[{"prompt": "类型#裤*材质#羊毛*裤长#九分裤*裤口#微喇裤", "response": [["不同于一般的西服裤。这款<UNK>小喇叭羊毛裤在样式上显得更加时髦优雅,特地采用微微的九分喇叭裤腿设计,视觉上将脚踝处显得更加纤细。并且特地甄选柔软的羊毛材质,就算直接贴肤穿着,也不会觉得寒冷,比较适合初秋穿噢。"]]}]
[{"prompt": "类型#上衣*风格#简约*衣门襟#拉链*衣款式#口袋*衣款式#拉链", "response": [["上衣与裤子的连体式设计从整体看起来十分的具有大牌的风范。简约,没有任何的其他装饰,把自己的独特尽情展现。上衣胸口两边设有两个加大口袋,更增添了层次感。衣襟<UNK>了拉链,让穿脱更加的方便,轻轻<UNK>一点,显得更加时尚。”"]]}]
[{"prompt": "类型#上衣*版型#宽松*风格#英伦*风格#复古*图案#格子*图案#复古*图案#线条*衣样式#外套*衣样式#西装*衣领型#翻领", "response": [["这件西装外套选用了经久不衰的格纹元素,通过色彩的明暗对比,展现出丰富的视觉层次,又缔造了英伦风的复古气息。法式的大翻领,延长颈部线条,彰显出女性帅气干练的特殊魅力。宽松舒适的版型完美掩藏了身材的小秘密,给身体自由活动空间。"]]}]
[{"prompt": "类型#裙*版型#显瘦*材质#蕾丝*颜色#纯色*风格#知性*风格#高贵*风格#性感*图案#纯色*图案#蕾丝*裙型#背带裙*裙型#包臀裙*裙型#鱼尾裙*裙长#连衣裙*裙袖型#喇叭袖", "response": [["蕾丝喇叭袖上衣,搭配鱼尾包臀背带裙,整体造型给人甜美可人的感觉。偏爱蕾丝的浪漫柔情,流露别致女人味。喇叭袖的设计凸显别样浪漫,透露隐约小性感。两件套连衣裙,平添视觉层次感。鱼尾的设计修身显瘦,喇叭袖时尚减龄,纯色设计更加凸显女性知性高贵的气质。"]]}]
[{"prompt": "类型#裙*风格#淑女*风格#清新*风格#性感*图案#碎花*图案#线条*裙型#大裙摆*裙下摆#荷叶边", "response": [["性感的挂脖领设计,展现出迷人的肩部线条,尽显女人的妩媚气息。清新的碎花点缀裙身,凸显出秀雅温柔的韵味,衬的人很是气质不俗。灵动的荷叶边装饰,让整件上衣多了一些柔美和俏皮。散开的大摆裙剪裁,修饰出身材的小缺陷,行走间尽显温婉的淑女气质。"]]}]
[{"prompt": "类型#裙*材质#网纱*图案#蝴蝶结*裙下摆#层叠*裙长#半身裙*裙衣门襟#系带", "response": [["层叠网纱,仙气飘飘,却不会过于膨胀。腰间的蝴蝶结系带,恰到好处的增添了柔美感。膝盖以下,长度刚刚好的半身裙,比起“一览无遗魅力尽显”,专注于“完美隐藏”"]]}]
[{"prompt": "类型#裙*版型#宽松*颜色#焦糖色*风格#简约*风格#ol*风格#职场*裙型#百褶*裙长#连衣裙*裙领型#翻领*裙款式#腰带*裙款式#衬衫式", "response": [["来自<UNK>自制的连衣裙采用今年大热的焦糖色,就像巧克力一样,甜蜜又不腻人。腰带的贴心设计,让宽松的版型也能拥有s曲线。上身简约的衬衫式翻领,衬托小v脸,带来一股职场ol风,加以百褶下摆的点缀,一起述说无尽温柔。"]]}]
[{"prompt": "类型#裙*裙型#鱼尾裙*裙款式#收腰", "response": [["率性大方的裙身,加上经典百搭的收腰版型,轻松打造出了时尚大方感呢。更有着俏皮可爱的鱼尾裙摆以及靓丽打眼的鹅黄色裙身,尽显元气少女风范,减龄效果特别好还特别的有青春活力气息,适合各个年龄阶段的女生们穿着。"]]}]
[{"prompt": "类型#上衣*颜色#红色*风格#青春*衣样式#外套*衣长#短款*衣款式#口袋", "response": [["这款外套对于个子矮小的妹纸来说就是福音了,短款穿在身上搭配起起来,立马就能变成大长腿,把整体身长比例拉长,呈现出黄金比例效果。鲜艳活泼的红色,穿在身上,视觉上给人呈现出青春的活力,元气满满的少女,还能衬托出肌肤的白皙,拥有一整天的好气色。大大的口袋,既可以作为装饰,出门携带东西也是非常的方便,还能增加整体的层次感。"]]}]
[{"prompt": "类型#上衣*材质#牛仔布*颜色#浅蓝色*颜色#深蓝色*风格#休闲*风格#潮*衣样式#外套*衣款式#拼接*衣款式#口袋*衣款式#纽扣", "response": [["层叠网纱,仙气飘飘,却不会过于膨胀。腰间的蝴蝶结系带,恰到好处的增添了柔美感。膝盖以下,长度刚刚好的半身裙,比起“一览无遗魅力尽显”,专注于“完美隐藏"]]}]
[{"prompt": "类型#裙*材质#网纱*图案#蝴蝶结*裙下摆#层叠*裙长#半身裙*裙衣门襟#系带", "response": [["BRAND牛仔外套,浅蓝色的衣身和深蓝色形成拼接的设计,充满了潮流的时尚感,翻折的领口造型,衬托在颈部肌肤,能修饰脸型。领口下有单排金属的纽扣门襟,开合很方便,很实用可以保暖。两侧有翻盖的口袋和斜插的口袋,在视觉上很有层次感。看起来很休闲。"]]}]
[{"prompt": "类型#裙*版型#显瘦*材质#蕾丝*图案#蝴蝶结*图案#蕾丝*裙下摆#花边*裙下摆#压褶*裙长#半身裙*裙袖长#长袖*裙领型#立领*裙款式#拼接*裙款式#钉珠", "response": [["成熟韵味和优雅气质并存的时尚两件套。上衣立领系蝴蝶结造型,俏皮优雅。喇叭长袖拼接压褶蕾丝花边,气质减龄。高腰包臀半身裙,修身效果特别好,收腹<UNK>展示曼妙的身材曲线。两侧手工钉珠装饰,时髦立体,视觉拉长腿型,整体上身彰显成熟女人魅力。显瘦百搭。"]]}]
[{"prompt": "类型#裙*材质#蕾丝*图案#刺绣*图案#蕾丝*裙衣门襟#拉链*裙款式#拉链*裙款式#吊带*裙款式#收腰", "response": [["蕾丝吊带显露出精致的锁骨,让颈部显得更加修长。腰部采用款腰围收腰的方式,小蛮腰更诱人。裙摆上大朵刺绣花朵,非常逼真,仿佛真正的花朵撒在裙子上摇曳生姿。背后贴心的珍珠扣,美观的同时又避免了生活中忘记拉拉链的尴尬情况,精致不失优雅。"]]}]
[{"prompt": "类型#裙*版型#显瘦*图案#线条*裙下摆#花边*裙腰型#松紧腰*裙长#连衣裙", "response": [["连衣裙采用了松紧腰的设计,凸显出腰部纤细的线条,再加上过膝的长度,可以遮掩掉大腿上的小肉肉,更加显瘦,走路飘逸十足。采用了圆形领口的设计,修饰颈部线条,衣身上加了层次感分明的荷叶花边作为装饰,颇显甜美气质。"]]}]
将数据集保存为data.jsonl文件,保存到本地!

导入数据集

点击数据集管理,进入创建数据集界面

定义数据集名称,选择文本对话,非排序,然后创建并导入。进入导入数据的界面。
选择有标注信息,本地导入,文件格式是jsonl。然后,点击上传jsonl文件。

选择数据集文件data.jsonl。

点击确定,然后就可以将数据集上传到千帆平台上。

预览这些数据,数据比较少!方便微调和训练。

数据清洗

在训练之前,还需要对数据做清洗,点击数据处理,进入数据清洗界面。

选择数据集和版本,然后选择清洗的配置。每个清洗都有例子,方便大家查看效果!

数据增强

和数据清洗并列的是数据增强,我们也可以创建数据增强任务。

点击创建任务,进入数据增强界面。

然后,选择数据集和增强方式。

发布数据集


做完数据清洗和增强后,打开数据集管理,将我们刚才的数据集发布出去。

大模型调优

点击大模型调优,进入大模型调优界面,开启大模型的微调。

点击创建调优任务

开通付费。

选择7B局部调优!这个是最便宜的。

点击下一步!

然后等待开通调优任务,等待开通后就可以点击创建调优任务了。

点击创建调优任务。
设置命令和应用场景,然后点击创建并训练。

选择模型、微调方式、数据集,然后点击确定。

任务创建完成,正在训练。

训练中。
点击详情,可以查看训练的情况。

RLHF训练

奖励模型训练

奖励模型训练需要用到多轮对话数据集,所以我们首先创建多轮对话数据集。

输入数据集名称,选择含排序,然后创建标注数据。

我没有对论对话数据集,就上传了官方的数据集。然后,继续数据清洗,增强,在发布数据集。有了数据集就可以开展奖励模型训练了。

点击船舰训练任务。
输入名称、行业,应用场景,然后,点击创建并训练。

选择,刚才上传的数据集,然后,点击确定。

等待一会就可以运行完成。

强化学习训练

强化训练,需要用到query问题集。所以我们需要上传一份query问题集。数据集如下:
[{"prompt": "类型#上衣*材质#牛仔布*颜色#白色*风格#简约*图案#刺绣*衣样式#外套*衣款式#破洞"}]
[{"prompt": "类型#裙*材质#针织*颜色#纯色*风格#复古*风格#文艺*风格#简约*图案#格子*图案#纯色*图案#复古*裙型#背带裙*裙长#连衣裙*裙领型#半高领"}]
[{"prompt": "类型#上衣*风格#嘻哈*图案#卡通*图案#印花*图案#撞色*衣样式#卫衣*衣款式#连帽"}]
[{"prompt": "类型#裤*风格#英伦*风格#简约"}]
[{"prompt": "类型#裙*裙下摆#弧形*裙腰型#高腰*裙长#半身裙*裙款式#不规则*裙款式#收腰"}]
[{"prompt": "类型#上衣*版型#宽松*版型#显瘦*图案#线条*衣样式#衬衫*衣袖型#泡泡袖*衣款式#抽绳"}]
[{"prompt": "类型#裙*材质#蕾丝*风格#宫廷*图案#刺绣*图案#蕾丝*裙型#大裙摆*裙下摆#花边*裙袖型#泡泡袖"}]
[{"prompt": "类型#裤*版型#显瘦*颜色#黑色*风格#简约*裤长#九分裤"}]
[{"prompt": "类型#裙*版型#显瘦*风格#文艺*风格#简约*图案#印花*图案#撞色*裙下摆#压褶*裙长#连衣裙*裙领型#圆领"}]
[{"prompt": "类型#裙*颜色#蓝色*风格#清新*图案#蝴蝶结"}]
[{"prompt": "类型#裙*颜色#白色*风格#清新*图案#碎花*裙腰型#松紧腰*裙长#长裙*裙衣门襟#拉链*裙款式#拉链"}]
[{"prompt": "类型#裤*材质#羊毛*裤长#九分裤*裤口#微喇裤"}]
[{"prompt": "类型#上衣*风格#简约*衣门襟#拉链*衣款式#口袋*衣款式#拉链"}]
[{"prompt": "类型#上衣*版型#宽松*风格#英伦*风格#复古*图案#格子*图案#复古*图案#线条*衣样式#外套*衣样式#西装*衣领型#翻领"}]
[{"prompt": "类型#裙*版型#显瘦*材质#蕾丝*颜色#纯色*风格#知性*风格#高贵*风格#性感*图案#纯色*图案#蕾丝*裙型#背带裙*裙型#包臀裙*裙型#鱼尾裙*裙长#连衣裙*裙袖型#喇叭袖"}]
[{"prompt": "类型#裙*风格#淑女*风格#清新*风格#性感*图案#碎花*图案#线条*裙型#大裙摆*裙下摆#荷叶边"}]
[{"prompt": "类型#裙*材质#网纱*图案#蝴蝶结*裙下摆#层叠*裙长#半身裙*裙衣门襟#系带"}]
[{"prompt": "类型#裙*版型#宽松*颜色#焦糖色*风格#简约*风格#ol*风格#职场*裙型#百褶*裙长#连衣裙*裙领型#翻领*裙款式#腰带*裙款式#衬衫式"}]
[{"prompt": "类型#裙*裙型#鱼尾裙*裙款式#收腰"}]
[{"prompt": "类型#上衣*颜色#红色*风格#青春*衣样式#外套*衣长#短款*衣款式#口袋"}]
[{"prompt": "类型#上衣*材质#牛仔布*颜色#浅蓝色*颜色#深蓝色*风格#休闲*风格#潮*衣样式#外套*衣款式#拼接*衣款式#口袋*衣款式#纽扣"}]
[{"prompt": "类型#裙*材质#网纱*图案#蝴蝶结*裙下摆#层叠*裙长#半身裙*裙衣门襟#系带"}]
[{"prompt": "类型#裙*版型#显瘦*材质#蕾丝*图案#蝴蝶结*图案#蕾丝*裙下摆#花边*裙下摆#压褶*裙长#半身裙*裙袖长#长袖*裙领型#立领*裙款式#拼接*裙款式#钉珠"}]
[{"prompt": "类型#裙*材质#蕾丝*图案#刺绣*图案#蕾丝*裙衣门襟#拉链*裙款式#拉链*裙款式#吊带*裙款式#收腰"}]
[{"prompt": "类型#裙*版型#显瘦*图案#线条*裙下摆#花边*裙腰型#松紧腰*裙长#连衣裙"}]
[{"prompt": "类型#上衣*材质#牛仔布*颜色#白色*风格#简约*图案#刺绣*衣样式#外套*衣款式#破洞"}]
[{"prompt": "类型#裙*材质#针织*颜色#纯色*风格#复古*风格#文艺*风格#简约*图案#格子*图案#纯色*图案#复古*裙型#背带裙*裙长#连衣裙*裙领型#半高领"}]
[{"prompt": "类型#上衣*风格#嘻哈*图案#卡通*图案#印花*图案#撞色*衣样式#卫衣*衣款式#连帽"}]
[{"prompt": "类型#裤*风格#英伦*风格#简约"}]
[{"prompt": "类型#裙*裙下摆#弧形*裙腰型#高腰*裙长#半身裙*裙款式#不规则*裙款式#收腰"}]
[{"prompt": "类型#上衣*版型#宽松*版型#显瘦*图案#线条*衣样式#衬衫*衣袖型#泡泡袖*衣款式#抽绳"}]
[{"prompt": "类型#裙*材质#蕾丝*风格#宫廷*图案#刺绣*图案#蕾丝*裙型#大裙摆*裙下摆#花边*裙袖型#泡泡袖"}]
[{"prompt": "类型#裤*版型#显瘦*颜色#黑色*风格#简约*裤长#九分裤"}]
[{"prompt": "类型#裙*版型#显瘦*风格#文艺*风格#简约*图案#印花*图案#撞色*裙下摆#压褶*裙长#连衣裙*裙领型#圆领"}]
[{"prompt": "类型#裙*颜色#蓝色*风格#清新*图案#蝴蝶结"}]
[{"prompt": "类型#裙*颜色#白色*风格#清新*图案#碎花*裙腰型#松紧腰*裙长#长裙*裙衣门襟#拉链*裙款式#拉链"}]
[{"prompt": "类型#裤*材质#羊毛*裤长#九分裤*裤口#微喇裤"}]
[{"prompt": "类型#上衣*风格#简约*衣门襟#拉链*衣款式#口袋*衣款式#拉链"}]
[{"prompt": "类型#上衣*版型#宽松*风格#英伦*风格#复古*图案#格子*图案#复古*图案#线条*衣样式#外套*衣样式#西装*衣领型#翻领"}]
[{"prompt": "类型#裙*版型#显瘦*材质#蕾丝*颜色#纯色*风格#知性*风格#高贵*风格#性感*图案#纯色*图案#蕾丝*裙型#背带裙*裙型#包臀裙*裙型#鱼尾裙*裙长#连衣裙*裙袖型#喇叭袖"}]
[{"prompt": "类型#裙*风格#淑女*风格#清新*风格#性感*图案#碎花*图案#线条*裙型#大裙摆*裙下摆#荷叶边"}]
[{"prompt": "类型#裙*材质#网纱*图案#蝴蝶结*裙下摆#层叠*裙长#半身裙*裙衣门襟#系带"}]
[{"prompt": "类型#裙*版型#宽松*颜色#焦糖色*风格#简约*风格#ol*风格#职场*裙型#百褶*裙长#连衣裙*裙领型#翻领*裙款式#腰带*裙款式#衬衫式"}]
[{"prompt": "类型#裙*裙型#鱼尾裙*裙款式#收腰"}]
[{"prompt": "类型#上衣*颜色#红色*风格#青春*衣样式#外套*衣长#短款*衣款式#口袋"}]
[{"prompt": "类型#上衣*材质#牛仔布*颜色#浅蓝色*颜色#深蓝色*风格#休闲*风格#潮*衣样式#外套*衣款式#拼接*衣款式#口袋*衣款式#纽扣"}]
[{"prompt": "类型#裙*材质#网纱*图案#蝴蝶结*裙下摆#层叠*裙长#半身裙*裙衣门襟#系带"}]
[{"prompt": "类型#裙*版型#显瘦*材质#蕾丝*图案#蝴蝶结*图案#蕾丝*裙下摆#花边*裙下摆#压褶*裙长#半身裙*裙袖长#长袖*裙领型#立领*裙款式#拼接*裙款式#钉珠"}]
[{"prompt": "类型#裙*材质#蕾丝*图案#刺绣*图案#蕾丝*裙衣门襟#拉链*裙款式#拉链*裙款式#吊带*裙款式#收腰"}]
[{"prompt": "类型#裙*版型#显瘦*图案#线条*裙下摆#花边*裙腰型#松紧腰*裙长#连衣裙"}]

点击数据集管理,输入数据集名称,标注类型为query问题集。然后点击创建并导入

本地导入、格式为jsonl,然后,上传文件。 上传完成,接着做数据清洗、增强,然后发布数据。

开通强化学习训练,创建训练任务,然后开通业务。

选择强化学习,然后下一步。

继续下一步
恭喜你!开通成功!

然后,继续创建训练任务!

输入名字,所属行业、应用场景,然后点击创建并训练!

选择刚才创建的数据集,选择微调的模型和奖励模型。然后,点击确定。

等待运行完成!!!
评论
用户头像