Menu

  • Home
  • Trending
  • Recommended
  • Latest

分类目录

  • AI 工具
  • AI新势力
  • XiaoHu.AI 学院
    • AI 教程
    • AI 课程
  • XiaoHu.AI日报
  • 开源项目案例库
    • AI 论文
    • AI 资源
    • AI 项目
XiaoHu.AI学院
  • Home
  • AI 工具
  • XiaoHu.AI 学院
    • AI 教程
    • AI 课程
  • XiaoHu.AI日报
  • 开源项目案例库
    • AI 论文
    • AI 资源
    • AI 项目
  • 加入会员
  • →社群
No Result
View All Result
  • Login
XiaoHu.AI学院
No Result
View All Result
Home 开源项目案例库 AI 项目

Alchemist:能够在真实图像中随意改变物体的材料属性(粗糙度、金属度、透明度)

by 小互
2024年7月29日
in AI 项目
0 0
0
Alchemist:能够在真实图像中随意改变物体的材料属性(粗糙度、金属度、透明度)
0
SHARES
232
VIEWS
Share on FacebookShare on Twitter

谷歌研究团队开发了一种名为“Alchemist”的方法,允许用户在保持照片真实感的同时,对图像中对象的材料属性(如颜色、光泽和透明度)进行参数化编辑。也就是能够在真实图像中线性改变材料属性(粗糙度、金属度、反照率、透明度)。

该方法通过使用合成数据集对文本到图像(T2I)生成模型进行微调,实现了对材料属性的精确控制。模型被训练成在保持对象几何形状不变的情况下,仅编辑特定的材料属性,并保持其他属性的一致性。

Alchemist的功能特点

  • 精确材料属性编辑:能够对图像中的物体进行细致的材料属性调整,如增加或减少物体的光滑度、改变物体的金属光泽、调整颜色和透明度等。

    7月29日(4)
  • 保持其他图像属性不变:在编辑材料属性的同时,保持图像中的其他属性(如物体的形状和背景)不变,确保编辑后的图像看起来自然且真实。

    7月29日(5)
  • 高度真实感:Alchemist 使用文本到图像(T2I)生成模型,并通过合成数据进行微调,确保编辑后的图像保持高度的真实感。即使是对透明度的调整,模型也能正确填充背景并生成逼真的光影效果。

  • 无需额外辅助信息:不同于传统方法,Alchemist不需要额外的3D几何数据、深度图或环境贴图,只需要输入图像和编辑指令即可进行材料属性的调整。

  • 合成数据训练与泛化:通过使用生成的合成数据进行训练,Alchemist能够将其学习到的材料属性编辑能力有效地应用于真实图像。

  • 多属性同时编辑:支持在单次操作中同时编辑多个材料属性,使用户能够更加灵活地对图像中的物体进行复杂的材料调整。

  • 用户友好:Alchemist 的编辑操作简单直观,无需专业的图像处理技能。用户只需输入所需的编辑指令和强度值,模型即可自动完成复杂的材料属性调整。

  • 应用于3D重建:Alchemist不仅适用于静态图像,还可以将其编辑能力扩展到3D重建技术(如NeRF),对3D场景中的材料属性进行控制。

    • 室内设计:用户可以轻松模拟不同颜色和材质的房间效果,帮助做出装修决策。
    • 产品设计:设计师可以快速生成不同材料和颜色的产品效果图,方便产品开发和市场测试。
    • 3D 渲染:通过与NeRF(神经辐射场)结合,Alchemist 能够生成一致的3D渲染图像,支持下游的3D任务。

材料编辑示例:

  • 粗糙度:改变各种物体的粗糙度,如鸡蛋、花瓶和陶器。
    7月29日
  • 透明度:调整物体的透明度,如尤达、南瓜和花瓶。
    7月29日(1)
  • 金属度:修改物品的金属属性,如茶壶、苹果和玩具。
    7月29日(2)
  • 反照率:改变物体的反照率,如苹果、鞋子和雕像。
    7月29日(3)
  • Support authors and subscribe to content

    This is premium stuff. Subscribe to read the entire article.

    Login if you have purchased

    加入会员

    加入会员查看更多会员内容和教程。
    超过1000+的会员内容,每天更新。
    开通会员

Related Posts

Meta AI提出了一种新的语言模型架构“Large Concept Model (LCM)  让模型更像人类思考
XiaoHu.AI日报

Meta AI提出了一种新的语言模型架构“Large Concept Model (LCM) 让模型更像人类思考

2024年12月25日
485
阿里巴巴推出QVQ-72B 一个基于Qwen2-VL-72B的新型多模态推理模型
XiaoHu.AI日报

阿里巴巴推出QVQ-72B 一个基于Qwen2-VL-72B的新型多模态推理模型

2024年12月25日
341
Fireworks AI新功能 能够将图像或PDF等非文本内容转化为LLM可理解的结构化文本
AI 工具

Fireworks AI新功能 能够将图像或PDF等非文本内容转化为LLM可理解的结构化文本

2024年12月24日
455
Hume AI推出全能文本与语音引擎 OCTAVE 根据文本实时生成特定人格特质的声音
XiaoHu.AI日报

Hume AI推出全能文本与语音引擎 OCTAVE 根据文本实时生成特定人格特质的声音

2024年12月24日
281
Anthropic 公布了一种全新的 AI 越狱技术 可以轻松破解所有前沿模型
AI 论文

Anthropic 公布了一种全新的 AI 越狱技术 可以轻松破解所有前沿模型

2024年12月23日
621
INFP:基于音频驱动的双人对话中的互动头像生成  能自动区分谁在说话,谁在听
AI 项目

INFP:基于音频驱动的双人对话中的互动头像生成 能自动区分谁在说话,谁在听

2024年12月22日
432

Recommendeds

ReFlux:一次使用多个微调的 FLUX.1 模型在一个无限大的画布上生成图像

ReFlux:一次使用多个微调的 FLUX.1 模型在一个无限大的画布上生成图像

322 VIEWS
2024年9月3日
AudioNotes:音视频内容转笔记系统 快速提取音视频的内容并转成Markdown笔记

AudioNotes:音视频内容转笔记系统 快速提取音视频的内容并转成Markdown笔记

259 VIEWS
2024年7月22日
生数科技的 Vidu 视频模型开放 Sora架构 可模仿真实物理世界 开放了API申请

生数科技的 Vidu 视频模型开放 Sora架构 可模仿真实物理世界 开放了API申请

333 VIEWS
2024年7月30日
NVIDIA 推出的 AI Blueprint:可以帮你观看数小时的视频并提供摘要总结和问答

NVIDIA 推出的 AI Blueprint:可以帮你观看数小时的视频并提供摘要总结和问答

328 VIEWS
2024年11月10日
ACE Studio :AI人声合成引擎 制作像真人一样歌唱的AI歌手

ACE Studio :AI人声合成引擎 制作像真人一样歌唱的AI歌手

1.8k VIEWS
2024年4月2日
HivisionIDPhotos :轻量级且高效的AI证件照制作工具 可以生成各种标准证件照

HivisionIDPhotos :轻量级且高效的AI证件照制作工具 可以生成各种标准证件照

784 VIEWS
2024年8月31日
使用 ChatGPT 像专业人类分析师一样 进行财务报表分析

使用 ChatGPT 像专业人类分析师一样 进行财务报表分析

800 VIEWS
2024年5月23日
ChatGPT-Plus:一套完整的AI助手开源方案 自带运营管理后台

ChatGPT-Plus:一套完整的AI助手开源方案 自带运营管理后台

433 VIEWS
2024年5月6日
Command R 系列更新 编码、数学、推理和延迟方面进行了显著提升

Command R 系列更新 编码、数学、推理和延迟方面进行了显著提升

114 VIEWS
2024年9月3日
Extropic 发布一种全新的热力学计算机  利用物质随机波动驱动计算

Extropic 发布一种全新的热力学计算机 利用物质随机波动驱动计算

340 VIEWS
2024年4月28日

Copyright (c) 2024 by Xiaohu.AI.

  • About
  • Contact

Welcome Back!

Login to your account below

Forgotten Password?

Retrieve your password

Please enter your username or email address to reset your password.

Log In

Add New Playlist

No Result
View All Result
  • Home
  • AI 工具
  • XiaoHu.AI 学院
    • AI 教程
    • AI 课程
  • XiaoHu.AI日报
  • 开源项目案例库
    • AI 论文
    • AI 资源
    • AI 项目
  • 加入会员
  • →社群
  • Login

© 2024 Xiaohu.AI

Are you sure want to unlock this post?
Unlock left : 0
Are you sure want to cancel subscription?
转到手机版