Menu

  • Home
  • Trending
  • Recommended
  • Latest

分类目录

  • AI 工具
  • AI新势力
  • XiaoHu.AI 学院
    • AI 教程
    • AI 课程
  • XiaoHu.AI日报
  • 开源项目案例库
    • AI 论文
    • AI 资源
    • AI 项目
XiaoHu.AI学院
  • Home
  • AI 工具
  • XiaoHu.AI 学院
    • AI 教程
    • AI 课程
  • XiaoHu.AI日报
  • 开源项目案例库
    • AI 论文
    • AI 资源
    • AI 项目
  • 加入会员
  • →社群
No Result
View All Result
  • Login
XiaoHu.AI学院
No Result
View All Result
Home AI 工具

Hedra:上传人物照片+任意语音 可实现人物唱歌、说话

by 小互
2024年6月19日
in AI 工具, XiaoHu.AI日报
0 0
0
Hedra:上传人物照片+任意语音 可实现人物唱歌、说话
0
SHARES
2.7k
VIEWS
Share on FacebookShare on Twitter

Hedra Labs 推出了 Character-1 的研究预览版。支持根据任意人物照片和语音内容生成个人会说话和唱歌的动态视频,也就是能让一张照片说话或者唱歌,同时保持唇形和表情、姿态和语音内容相匹配。

  • 可在桌面和移动设备上使用。
  • 功能包括:
    • 无限时长(30秒开放预览)。
    • 如果 H100 供应充足,每 60 秒生成 90 秒内容。
    • 支持表达性对话、歌唱和说唱角色。
hedra-character-1-1080-ytshorts.savetube.me

主要功能和特点

  1. 上传人物照片:
    • 用户可以上传任意人物的照片,Hedra的AI技术能够识别并处理这些图像。
  2. 添加语音:
    • 用户可以上传任何语音文件,Hedra的系统将语音与人物照片结合,实现人物说话或唱歌的效果。
  3. 生成生动的视频:
    • Hedra的核心产品之一是Character-1,这个工具可以生成具有表现力和可控人类角色的视频。通过Character-1,用户可以将静态照片和音频文件转化为生动的动画视频。Character-1 能生成视频和动态3D内容,特别注重表现丰富的人物。
  4. 易于使用:
    • Hedra提供的工具界面友好,用户无需专业技能即可轻松上手。
  5. 高质量输出:
    • 通过先进的AI技术,Hedra能够生成高质量、逼真的视频内容。同时保持唇形和表情、姿态和语音内容相一致。
X2Twitter.com_1803100417728880640(512p)

使用方法:

访问:https://www.hedra.com/

可以直接文字转语音,目前有6个语音

输入或粘贴你的文本并选择一个预设的声音。

也可以直接上传音频

输入你的角色描述,Hedra 会生成角色。

满意后按“生成”。

X2Twitter.com_1803100458229108740(720p)

一些案例:

部分案例来自:Heather Cooper

角色保持高度一致性。

X2Twitter.com_1803100541947416576(512p)

模型能够生成会唱歌、演戏和表现不同情绪的角色。

来自 Midjourney 图像

X2Twitter.com_1803100568480583681(512p)

Midjourney 图像+ ElevenLabs 的声音

X2Twitter.com_1803100592052572169(512p)

Hedra 生成的图像+ ElevenLabs声音

X2Twitter.com_1803100646834376711(512p)

模型不仅限于人类角色 – 它还可以生成表现丰富的无生命物体。

如果有明显的嘴巴、鼻子和眼睛效果最好。虽然不是完美,但我对这个结果感到惊喜。

X2Twitter.com_1803100669991129093(512p)

 

更多案例

表情、姿态很自然

X2Twitter.com_1803127423950561280(512p)

动态视频

X2Twitter.com_xPdy2zB1vYqecGzr(512p)

对话视频

X2Twitter.com_1803005420631404544(720p)

唱歌视频

X2Twitter.com_1803251150290071552(512p)
X2Twitter.com_1803141288222437376(512p) (1)

特殊图像

X2Twitter.com_ciYLs3TP18bNKYIE(512p)
X2Twitter.com_1803168337930694656(512p)

更多类型

X2Twitter.com_1803216411818356737(512p)
X2Twitter.com_neY-DoAR_43pbfEo(512p)

Related Posts

Meta AI提出了一种新的语言模型架构“Large Concept Model (LCM)  让模型更像人类思考
XiaoHu.AI日报

Meta AI提出了一种新的语言模型架构“Large Concept Model (LCM) 让模型更像人类思考

2024年12月25日
485
阿里巴巴推出QVQ-72B 一个基于Qwen2-VL-72B的新型多模态推理模型
XiaoHu.AI日报

阿里巴巴推出QVQ-72B 一个基于Qwen2-VL-72B的新型多模态推理模型

2024年12月25日
341
Fireworks AI新功能 能够将图像或PDF等非文本内容转化为LLM可理解的结构化文本
AI 工具

Fireworks AI新功能 能够将图像或PDF等非文本内容转化为LLM可理解的结构化文本

2024年12月24日
454
Hume AI推出全能文本与语音引擎 OCTAVE 根据文本实时生成特定人格特质的声音
XiaoHu.AI日报

Hume AI推出全能文本与语音引擎 OCTAVE 根据文本实时生成特定人格特质的声音

2024年12月24日
280
Anthropic 公布了一种全新的 AI 越狱技术 可以轻松破解所有前沿模型
AI 论文

Anthropic 公布了一种全新的 AI 越狱技术 可以轻松破解所有前沿模型

2024年12月23日
621
INFP:基于音频驱动的双人对话中的互动头像生成  能自动区分谁在说话,谁在听
AI 项目

INFP:基于音频驱动的双人对话中的互动头像生成 能自动区分谁在说话,谁在听

2024年12月22日
431

Recommendeds

TRANSAGENTS: 一个专门用于进行文学翻译的多智能体虚拟翻译出版公司

TRANSAGENTS: 一个专门用于进行文学翻译的多智能体虚拟翻译出版公司

818 VIEWS
2024年5月23日
ElevenLabs推出新的 AI 音频模型 能够根据文本生成各种音效和声音

ElevenLabs推出新的 AI 音频模型 能够根据文本生成各种音效和声音

233 VIEWS
2024年6月1日
Stable AI 为 Stable Assistant 添加了两个新功能 搜索替换图像中的对象 生成3分钟音频

Stable AI 为 Stable Assistant 添加了两个新功能 搜索替换图像中的对象 生成3分钟音频

188 VIEWS
2024年7月10日
Google DeepMind 将Gemini 1.5 Pro安装到机器人上 实现机器人的记忆导航能力

Google DeepMind 将Gemini 1.5 Pro安装到机器人上 实现机器人的记忆导航能力

164 VIEWS
2024年7月12日
VimTS:自动识别图像或视频序中的文本信息并精确提取内容

VimTS:自动识别图像或视频序中的文本信息并精确提取内容

97 VIEWS
2024年5月13日
Streamer-Sales:一个直播卖货大模型 能自动卖货 实时回答客户任何问题

Streamer-Sales:一个直播卖货大模型 能自动卖货 实时回答客户任何问题

735 VIEWS
2024年6月25日
Google发布 2024年值得关注的Chrome扩展程序

Google发布 2024年值得关注的Chrome扩展程序

536 VIEWS
2024年12月16日
Claude 引入上下文检索技术 大幅提高RAG的性能和检索准确率

Claude 引入上下文检索技术 大幅提高RAG的性能和检索准确率

163 VIEWS
2024年9月20日
新工具可检测人工智能制作的虚假科学论文

新工具可检测人工智能制作的虚假科学论文

105 VIEWS
2024年9月9日
Magnific Relight 教程:通过一个提示和参考图像来改变任何图像场景的照明和背景

Magnific Relight 教程:通过一个提示和参考图像来改变任何图像场景的照明和背景

342 VIEWS
2024年6月30日

Copyright (c) 2024 by Xiaohu.AI.

  • About
  • Contact

Welcome Back!

Login to your account below

Forgotten Password?

Retrieve your password

Please enter your username or email address to reset your password.

Log In

Add New Playlist

No Result
View All Result
  • Home
  • AI 工具
  • XiaoHu.AI 学院
    • AI 教程
    • AI 课程
  • XiaoHu.AI日报
  • 开源项目案例库
    • AI 论文
    • AI 资源
    • AI 项目
  • 加入会员
  • →社群
  • Login

© 2024 Xiaohu.AI

Are you sure want to unlock this post?
Unlock left : 0
Are you sure want to cancel subscription?
转到手机版