咨询电话
400-123-4567
手 机:13988999988
电 话:400-123-4567
传 真:+86-123-4567
邮 箱:[email protected]
地 址:广东省广州市天河区88号
电 话:400-123-4567
传 真:+86-123-4567
邮 箱:[email protected]
地 址:广东省广州市天河区88号

微信扫一扫
中国联通开源元景文生图模型:业界首款支持长
作者:[db:作者]日期:2024/12/26 14:58浏览:
克日,联通数据智能无限公司重磅开源首个完整在国产昇腾AI基本软硬件平台上实现练习跟推理的中文原生文生图模子,实现多项自立翻新冲破——在架构上,经由过程在SDXL架构中融会复合言语编码模块,实现了对中文长文本、多属性对应跟中文特点词汇的准确语义懂得,对应图像的天生后果失掉了极年夜晋升。在昇腾AI年夜范围算力集群上实现了中文原生文生图模子的练习跟推理,并将模子跟代码对业界开源,以推进文生图范畴的国产化过程。以后的文生图主流模子以英文输入为主,中文原生的文生图模子研发则绝对比拟迟缓,这招致了模子对中文语义的懂得才能缺乏,中文特点图片天生才能无限。中国联通作为数字信息经营效劳国度队、数字技巧融会翻新排头兵,临时存眷中文原生年夜模子的开展,并走出了一条夯实基本、自立研发的技巧翻新冲破之路。现在,元景文生图模子已在联通表里部多个名目中胜利利用,成为助力企业降本增效、智能化进级的主要一环。架构翻新:引入复合言语编码模块,支撑中文长文本输入原始SDXL的言语编码器仅应用了英文CLIP模子,招致其一方面仅支撑英文文本作为输入,另一方面在输入长度上也存在重大限度(最长77个token)。对此,元景文生图模子一方面将英文CLIP模子调换成中文CLIP,使得模子中文漫笔本输入存在更好的懂得才能;同时,引入复合言语编码架构,将基于encoder-decoder架构的言语模子引入了言语编码器局部,这使得模子能支撑超越CLIP长度限度的长文本,实现更正确的中文语义懂得跟断定。元景中文文生图架构中文原生模子:支撑中文原生语义懂得跟中文特点图像天生经由过程引入复合言语编码模块,元景文生图模子实现了原生中文语义懂得,防止了传统的应用翻译插件等作为中介挪用英文文生图模子的方式所带来的中文信息丧失。同时经由过程引入海量中文图文对数据停止预练习,模子对中文专属名词,如鼠标-老鼠、仙鹤-吊车等英文模子易混杂的工具,以及中文菜谱等英文模子无奈懂得的名词,都可能正确懂得并天生对应的高品质图片。提醒词:鼠标 提醒词:老鼠(在英文中均翻译成mouse,易混杂)提醒词:仙鹤 提醒词:吊车(在英文中均翻译成crane,易混杂)提醒词:佛跳墙 提醒词:妻子饼(中文特点词汇) 提醒词:一单身体毛发彩色相间的兔子正在草丛间啃胡萝卜 提醒词:在绿色的丛林中,暗藏着一座白色的哥特式教堂,教堂的尖塔直指蓝色的天空,教堂四周是五彩斑斓的野花跟浅黄色的草坪(中文长文本)支撑国产全栈训推,打造数十个行业标杆案例中国联通在国产昇腾AI基本软硬件平台上实现了元景文生图模子从微调练习到推理的一体化适配。在微调练习方面,用户可应用自界说数据集,实现从别的平台至昇腾的腻滑切换;在模子推理方面,接口与Diffusers对齐,简略易用,支撑单卡跟多卡,单卡推理支撑UNet Cache减速。经由过程架构翻新、中文原生语义支撑、硬件适配等多项冲破性结果,联通元景中文文生图模子为宽大开辟者供给了研发中订婚制文生图模子跟利用的全栈支撑。该模子已在联通的多个表里部名目中赋能文创、打扮、产业计划等诸多范畴,支持了中华器灵、打扮年夜模子等数十个行业标杆案例,在天生跟计划范畴为企业降本增效奉献主要力气,并在寰球数字经济年夜会、“数据因素X”年夜赛、白塔杯等赛事中获奖。 联通元景文生图模子赋能打扮计划 联通元景文生图模子赋能文物活化 联通元景文生图模子在寰球数字经济年夜会上获奖中国联通踊跃规划策略性新兴工业跟将来工业,落实“人工智能+”举动,依靠算网基本设备与天下渠道笼罩上风,发展年夜模子基本跟个性才能研发,构建元景“1+1+M”年夜模子系统。在基本年夜模子方面,已规划言语、多模态、视觉、语音等多类模子,构成一套自立可控、模态丰盛、机能进步、性价比高、保险可托的元景基本模子,粗放化赋能千行百业模子跟利用打造,助力实体经济高品质开展。将来,中国联通将在天生式人工智能技巧上一直翻新,进级模子才能,深入与国产算力的配合,为企业供给更多、更好、更智能的信息效劳,连续推进海内人工智能跟AIGC的国产化、智能化开展。现在,元景文生图模子已在GitHub、Hugging Face、魔搭、始智等社区片面开源,地点如下:GitHub:https://github.com/UnicomAI/UniT2IXL.gitHuggingFace:https://huggingface.co/UnicomAI/UniT2IXL魔搭:https://www.modelscope.cn/UnicomAI/UniT2IXL.git始智:https://wisemodel.cn/models/UnicomAI/UniT2IXL
]article_adlist-->
申明:新浪网独家稿件,未经受权制止转载。 -->
相关文章
- 2024/12/26中国联通开源元景文生图模型:业界首款
- 2024/12/26TCL小蓝翼C7新风空调斩获中国首批“睡眠
- 2024/12/25杀疯了!一加 Ace 5 Pro继风驰游戏内核后再
- 2024/12/25女主人翁游戏推荐哪个 热门女主人翁游戏