USO— 字节跳动推出的内容与风格解耦与重组统一框架

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

微软文字转语音 微软文字转语音

微软文本转语音,支持选择多种语音风格,可调节语速。

微软文字转语音0 查看详情 微软文字转语音

USO是什么

uso(unified style-subject optimized)是字节跳动 uxo 团队推出的内容与风格解耦与重组统一框架。能将任何主题与任何风格在任何场景中自由组合,生成具有高度主体一致性、强烈风格保真度且自然、非塑料感的图像。uso 通过构建大规模三元组数据集,采用解耦学习方案同时对齐风格特征并分离内容与风格,引入风格奖励学习(srl)来进一步提升模型性能。uso 发布了 uso-bench 基准测试,用于综合评估风格相似性和主体保真度。实验表明,uso 在主体一致性和风格相似性两个维度上均达到了开源模型的顶尖水平。

USO— 字节跳动推出的内容与风格解耦与重组统一框架

USO的主要功能

风格与主体融合:能将任意主题与任意风格自由组合,生成既保留主体特征又符合指定风格的图像,解决了风格与主体难以融合的问题。高保真度生成:在生成图像时,能保持高度的主体一致性和风格保真度,确保生成的图像自然且具有高质量。多场景应用:适用于多种场景,可广泛应用于艺术创作、广告设计、游戏开发等领域。开源支持:项目全面开源,包括训练代码、推理脚本、模型权重和数据集,为研究者和开发者提供了丰富的资源。性能领先:在主体一致性和风格相似性两个维度上均达到了开源模型的顶尖水平,通过大规模三元组数据集和解耦学习方案实现性能提升。基准测试:发布了 USO-Bench 基准测试,用于综合评估风格相似性和主体保真度,为后续模型提供统一的比拼标准。

USO的技术原理

大规模三元组数据集构建:创建了包含内容图像、风格图像和对应风格化图像的三元组数据集,为模型训练提供了丰富的数据基础。解耦学习方案:通过风格对齐训练和内容 – 风格解耦训练两个阶段,同时对齐风格特征并分离内容与风格,避免特征串扰,实现精准融合。风格奖励学习(SRL):引入奖励信号优化生成质量,平衡风格相似性与主体一致性,进一步提升模型性能。统一框架:将风格驱动和主体驱动两类任务合并到单一模型框架中,解决了传统方法中两者对立的问题,实现了风格与主体的协同优化。两阶段训练流程:第一阶段通过风格对齐训练使模型具备风格复现能力;第二阶段通过内容 – 风格解耦训练实现联合条件生成,最终通过风格奖励学习监督整个训练过程。

USO的核心价值

提出了创新的协同解耦范式:打破了风格和主体生成任务各自为战的局面,证明了通过跨任务的联合学习可以实现更彻底的内容-风格解耦,并相互促进。构建了强大的统一生成模型:USO是首个在单一框架内同时实现SOTA级别主体一致性和风格相似性的模型,其效果和通用性都令人印象深刻。引入了奖励学习增强:将奖励学习范式成功应用于风格生成,为进一步提升生成模型的精细控制力和美学质量提供了有效途径。发布了首个联合评估基准:USO-Bench填补了该领域在综合评估上的空白,为后续研究提供了公平、全面的比较平台。

USO的项目地址

项目官网:http://bytedance.github.io/USO/Github仓库:http://github.com/bytedance/USOarXiv技术论文:http://arxiv.org/pdf/2508.18966

USO的模型效果

风格迁移精准:能将不同风格精准地迁移到新的内容上,生成的图像在保留原始风格的笔触和色彩的同时,不会使主体变形,风格相似度高。主体特征保留:在风格变化时,能锁定主体特征,适配多种风格,保持人物或物体的原样,主体一致性好。联合生成能力强:可以同时满足风格和主体的双需求,一步生成既符合指定风格又完整保留主体布局的图像,实现风格与主体的完美融合。生成质量高:在主体驱动生成、风格驱动生成以及联合风格 – 主体驱动生成任务上均取得了 SOTA(State-of-the-Art)效果,生成的图像自然、逼真,具有高质量。适应性强:模型对不同的主体和风格具有很强的适应性,能够处理多种类型的内容,如人物、动物、场景等,以及多种风格,如油画、水墨、漫画等。定量比较:在USO-Bench上,无论是在主体驱动任务还是风格驱动任务中,USO的各项指标(如CLIP-I, DINO, CSD)均显著优于现有的所有开源SOTA模型。在更具挑战性的风格-主体联合驱动任务上,USO同样大幅领先,证明了其强大的统一生成能力。

USO的应用场景

艺术创作:艺术家可以用USO将不同的艺术风格应用到同一主体上,快速生成多种风格的草图或成品,激发创作灵感,提高创作效率。广告设计:广告设计师可以借助USO根据不同的广告主题和目标受众,快速生成具有特定风格和主体特征的广告图像,提升广告的吸引力和针对性。游戏开发:游戏开发者可以用USO为游戏角色和场景生成不同风格的图像,丰富游戏的视觉效果,增强游戏的沉浸感。例如,将游戏角色的外观风格从写实风格转换为卡通风格。影视制作:在影视特效制作中,USO可以用于快速生成具有特定风格的场景或角色形象,辅助特效师进行创意构思和效果预览。比如,为一部科幻电影生成具有未来感风格的角色形象。教育领域:在艺术教育和设计教育中,USO可以作为教学工具,帮助学生更好地理解和掌握不同艺术风格的特点,以及如何将这些风格应用到实际创作中。例如,教师可以用USO展示同一幅作品在不同风格下的表现。

以上就是USO— 字节跳动推出的内容与风格解耦与重组统一框架的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/22500.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年11月1日 19:07:35
下一篇 2025年11月1日 19:12:44

相关推荐

  • HTML、CSS 和 JavaScript 中的简单侧边栏菜单

    构建一个简单的侧边栏菜单是一个很好的主意,它可以为您的网站添加有价值的功能和令人惊叹的外观。 侧边栏菜单对于客户找到不同项目的方式很有用,而不会让他们觉得自己有太多选择,从而创造了简单性和秩序。 今天,我将分享一个简单的 HTML、CSS 和 JavaScript 源代码来创建一个简单的侧边栏菜单。…

    2025年12月24日
    200
  • 前端代码辅助工具:如何选择最可靠的AI工具?

    前端代码辅助工具:可靠性探讨 对于前端工程师来说,在HTML、CSS和JavaScript开发中借助AI工具是司空见惯的事情。然而,并非所有工具都能提供同等的可靠性。 个性化需求 关于哪个AI工具最可靠,这个问题没有一刀切的答案。每个人的使用习惯和项目需求各不相同。以下是一些影响选择的重要因素: 立…

    2025年12月24日
    300
  • 带有 HTML、CSS 和 JavaScript 工具提示的响应式侧边导航栏

    响应式侧边导航栏不仅有助于改善网站的导航,还可以解决整齐放置链接的问题,从而增强用户体验。通过使用工具提示,可以让用户了解每个链接的功能,包括设计紧凑的情况。 在本教程中,我将解释使用 html、css、javascript 创建带有工具提示的响应式侧栏导航的完整代码。 对于那些一直想要一个干净、简…

    2025年12月24日
    000
  • 布局 – CSS 挑战

    您可以在 github 仓库中找到这篇文章中的所有代码。 您可以在这里查看视觉效果: 固定导航 – 布局 – codesandbox两列 – 布局 – codesandbox三列 – 布局 – codesandbox圣杯 &#8…

    2025年12月24日
    000
  • 隐藏元素 – CSS 挑战

    您可以在 github 仓库中找到这篇文章中的所有代码。 您可以在此处查看隐藏元素的视觉效果 – codesandbox 隐藏元素 hiding elements hiding elements hiding elements hiding elements hiding element…

    2025年12月24日
    400
  • 居中 – CSS 挑战

    您可以在 github 仓库中找到这篇文章中的所有代码。 您可以在此处查看垂直中心 – codesandbox 和水平中心的视觉效果。 通过 css 居中 垂直居中 centering centering centering centering centering centering立即…

    2025年12月24日 好文分享
    300
  • 如何在 Laravel 框架中轻松集成微信支付和支付宝支付?

    如何用 laravel 框架集成微信支付和支付宝支付 问题:如何在 laravel 框架中集成微信支付和支付宝支付? 回答: 建议使用 easywechat 的 laravel 版,easywechat 是一个由腾讯工程师开发的高质量微信开放平台 sdk,已被广泛地应用于许多 laravel 项目中…

    2025年12月24日
    000
  • 如何在移动端实现子 div 在父 div 内任意滑动查看?

    如何在移动端中实现让子 div 在父 div 内任意滑动查看 在移动端开发中,有时我们需要让子 div 在父 div 内任意滑动查看。然而,使用滚动条无法实现负值移动,因此需要采用其他方法。 解决方案: 使用绝对布局(absolute)或相对布局(relative):将子 div 设置为绝对或相对定…

    2025年12月24日
    000
  • 移动端嵌套 DIV 中子 DIV 如何水平滑动?

    移动端嵌套 DIV 中子 DIV 滑动 在移动端开发中,遇到这样的问题:当子 DIV 的高度小于父 DIV 时,无法在父 DIV 中水平滚动子 DIV。 无限画布 要实现子 DIV 在父 DIV 中任意滑动,需要创建一个无限画布。使用滚动无法达到负值,因此需要使用其他方法。 相对定位 一种方法是将子…

    2025年12月24日
    000
  • 移动端项目中,如何消除rem字体大小计算带来的CSS扭曲?

    移动端项目中消除rem字体大小计算带来的css扭曲 在移动端项目中,使用rem计算根节点字体大小可以实现自适应布局。但是,此方法可能会导致页面打开时出现css扭曲,这是因为页面内容在根节点字体大小赋值后重新渲染造成的。 解决方案: 要避免这种情况,将计算根节点字体大小的js脚本移动到页面的最前面,即…

    2025年12月24日
    000
  • Nuxt 移动端项目中 rem 计算导致 CSS 变形,如何解决?

    Nuxt 移动端项目中解决 rem 计算导致 CSS 变形 在 Nuxt 移动端项目中使用 rem 计算根节点字体大小时,可能会遇到一个问题:页面内容在字体大小发生变化时会重绘,导致 CSS 变形。 解决方案: 可将计算根节点字体大小的 JS 代码块置于页面最前端的 标签内,确保在其他资源加载之前执…

    2025年12月24日
    200
  • Nuxt 移动端项目使用 rem 计算字体大小导致页面变形,如何解决?

    rem 计算导致移动端页面变形的解决方法 在 nuxt 移动端项目中使用 rem 计算根节点字体大小时,页面会发生内容重绘,导致页面打开时出现样式变形。如何避免这种现象? 解决方案: 移动根节点字体大小计算代码到页面顶部,即 head 中。 原理: flexível.js 也遇到了类似问题,它的解决…

    2025年12月24日
    000
  • 形状 – CSS 挑战

    您可以在 github 仓库中找到这篇文章中的所有代码。 您可以在此处查看 codesandbox 的视觉效果。 通过css绘制各种形状 如何在 css 中绘制正方形、梯形、三角形、异形三角形、扇形、圆形、半圆、固定宽高比、0.5px 线? shapes 0.5px line .square { w…

    2025年12月24日
    000
  • 有哪些美观的开源数字大屏驾驶舱框架?

    开源数字大屏驾驶舱框架推荐 问题:有哪些美观的开源数字大屏驾驶舱框架? 答案: 资源包 [弗若恩智能大屏驾驶舱开发资源包](https://www.fanruan.com/resource/152) 软件 [弗若恩报表 – 数字大屏可视化组件](https://www.fanruan.c…

    2025年12月24日
    000
  • 网站底部如何实现飘彩带效果?

    网站底部飘彩带效果的 js 库实现 许多网站都会在特殊节日或活动中添加一些趣味性的视觉效果,例如点击按钮后散发的五彩缤纷的彩带。对于一个特定的网站来说,其飘彩带效果的实现方式可能有以下几个方面: 以 https://dub.sh/ 网站为例,它底部按钮点击后的彩带效果是由 javascript 库实…

    2025年12月24日
    000
  • 网站彩带效果背后是哪个JS库?

    网站彩带效果背后是哪个js库? 当你访问某些网站时,点击按钮后,屏幕上会飘出五颜六色的彩带,营造出庆祝的氛围。这些效果是通过使用javascript库实现的。 问题: 哪个javascript库能够实现网站上点击按钮散发彩带的效果? 答案: 根据给定网站的源代码分析: 可以发现,该网站使用了以下js…

    好文分享 2025年12月24日
    100
  • 产品预览卡项目

    这个项目最初是来自 Frontend Mentor 的挑战,旨在使用 HTML 和 CSS 创建响应式产品预览卡。最初的任务是设计一张具有视觉吸引力和功能性的产品卡,能够无缝适应各种屏幕尺寸。这涉及使用 CSS 媒体查询来确保布局在不同设备上保持一致且用户友好。产品卡包含产品图像、标签、标题、描述和…

    2025年12月24日
    100
  • 如何利用 echarts-gl 绘制带发光的 3D 图表?

    如何绘制带发光的 3d 图表,类似于 echarts 中的示例? 为了实现类似的 3d 图表效果,需要引入 echarts-gl 库:https://github.com/ecomfe/echarts-gl。 echarts-gl 专用于在 webgl 环境中渲染 3d 图形。它提供了各种 3d 图…

    2025年12月24日
    000
  • 如何在 Element UI 的 el-rate 组件中实现 5 颗星 5 分制与百分制之间的转换?

    如何在el-rate中将5颗星5分制的分值显示为5颗星百分制? 要实现该效果,只需使用 el-rate 组件的 allow-half 属性。在设置 allow-half 属性后,获得的结果乘以 20 即可得到0-100之间的百分制分数。如下所示: score = score * 20; 动态显示鼠标…

    2025年12月24日
    100
  • CSS 最佳实践:后端程序员重温 CSS 时常见的三个疑问?

    CSS 最佳实践:提升代码质量 作为后端程序员,在重温 CSS/HTML 时,你可能会遇到一些关于最佳实践的问题。以下将解答三个常见问题,帮助你编写更规范、清晰的 CSS 代码。 1. margin 设置策略 当相邻元素都设置了 margin 时,通常情况下应为上一个元素设置 margin-bott…

    2025年12月24日
    000

发表回复

登录后才能评论
关注微信