Menu

  • Home
  • Trending
  • Recommended
  • Latest

分类目录

  • AI 工具
  • AI新势力
  • XiaoHu.AI 学院
    • AI 教程
    • AI 课程
  • XiaoHu.AI日报
  • 开源项目案例库
    • AI 论文
    • AI 资源
    • AI 项目
XiaoHu.AI学院
  • Home
  • AI 工具
  • XiaoHu.AI 学院
    • AI 教程
    • AI 课程
  • XiaoHu.AI日报
  • 开源项目案例库
    • AI 论文
    • AI 资源
    • AI 项目
  • 加入会员
  • →社群
No Result
View All Result
  • Login
XiaoHu.AI学院
No Result
View All Result
Home AI 工具

Hedra:上传人物照片+任意语音 可实现人物唱歌、说话

by 小互
2024年6月19日
in AI 工具, XiaoHu.AI日报
0 0
0
Hedra:上传人物照片+任意语音 可实现人物唱歌、说话
0
SHARES
2.7k
VIEWS
Share on FacebookShare on Twitter

Hedra Labs 推出了 Character-1 的研究预览版。支持根据任意人物照片和语音内容生成个人会说话和唱歌的动态视频,也就是能让一张照片说话或者唱歌,同时保持唇形和表情、姿态和语音内容相匹配。

  • 可在桌面和移动设备上使用。
  • 功能包括:
    • 无限时长(30秒开放预览)。
    • 如果 H100 供应充足,每 60 秒生成 90 秒内容。
    • 支持表达性对话、歌唱和说唱角色。
hedra-character-1-1080-ytshorts.savetube.me

主要功能和特点

  1. 上传人物照片:
    • 用户可以上传任意人物的照片,Hedra的AI技术能够识别并处理这些图像。
  2. 添加语音:
    • 用户可以上传任何语音文件,Hedra的系统将语音与人物照片结合,实现人物说话或唱歌的效果。
  3. 生成生动的视频:
    • Hedra的核心产品之一是Character-1,这个工具可以生成具有表现力和可控人类角色的视频。通过Character-1,用户可以将静态照片和音频文件转化为生动的动画视频。Character-1 能生成视频和动态3D内容,特别注重表现丰富的人物。
  4. 易于使用:
    • Hedra提供的工具界面友好,用户无需专业技能即可轻松上手。
  5. 高质量输出:
    • 通过先进的AI技术,Hedra能够生成高质量、逼真的视频内容。同时保持唇形和表情、姿态和语音内容相一致。
X2Twitter.com_1803100417728880640(512p)

使用方法:

访问:https://www.hedra.com/

可以直接文字转语音,目前有6个语音

输入或粘贴你的文本并选择一个预设的声音。

也可以直接上传音频

输入你的角色描述,Hedra 会生成角色。

满意后按“生成”。

X2Twitter.com_1803100458229108740(720p)

一些案例:

部分案例来自:Heather Cooper

角色保持高度一致性。

X2Twitter.com_1803100541947416576(512p)

模型能够生成会唱歌、演戏和表现不同情绪的角色。

来自 Midjourney 图像

X2Twitter.com_1803100568480583681(512p)

Midjourney 图像+ ElevenLabs 的声音

X2Twitter.com_1803100592052572169(512p)

Hedra 生成的图像+ ElevenLabs声音

X2Twitter.com_1803100646834376711(512p)

模型不仅限于人类角色 – 它还可以生成表现丰富的无生命物体。

如果有明显的嘴巴、鼻子和眼睛效果最好。虽然不是完美,但我对这个结果感到惊喜。

X2Twitter.com_1803100669991129093(512p)

 

更多案例

表情、姿态很自然

X2Twitter.com_1803127423950561280(512p)

动态视频

X2Twitter.com_xPdy2zB1vYqecGzr(512p)

对话视频

X2Twitter.com_1803005420631404544(720p)

唱歌视频

X2Twitter.com_1803251150290071552(512p)
X2Twitter.com_1803141288222437376(512p) (1)

特殊图像

X2Twitter.com_ciYLs3TP18bNKYIE(512p)
X2Twitter.com_1803168337930694656(512p)

更多类型

X2Twitter.com_1803216411818356737(512p)
X2Twitter.com_neY-DoAR_43pbfEo(512p)

Related Posts

Meta AI提出了一种新的语言模型架构“Large Concept Model (LCM)  让模型更像人类思考
XiaoHu.AI日报

Meta AI提出了一种新的语言模型架构“Large Concept Model (LCM) 让模型更像人类思考

2024年12月25日
476
阿里巴巴推出QVQ-72B 一个基于Qwen2-VL-72B的新型多模态推理模型
XiaoHu.AI日报

阿里巴巴推出QVQ-72B 一个基于Qwen2-VL-72B的新型多模态推理模型

2024年12月25日
331
Fireworks AI新功能 能够将图像或PDF等非文本内容转化为LLM可理解的结构化文本
AI 工具

Fireworks AI新功能 能够将图像或PDF等非文本内容转化为LLM可理解的结构化文本

2024年12月24日
444
Hume AI推出全能文本与语音引擎 OCTAVE 根据文本实时生成特定人格特质的声音
XiaoHu.AI日报

Hume AI推出全能文本与语音引擎 OCTAVE 根据文本实时生成特定人格特质的声音

2024年12月24日
276
Anthropic 公布了一种全新的 AI 越狱技术 可以轻松破解所有前沿模型
AI 论文

Anthropic 公布了一种全新的 AI 越狱技术 可以轻松破解所有前沿模型

2024年12月23日
607
INFP:基于音频驱动的双人对话中的互动头像生成  能自动区分谁在说话,谁在听
AI 项目

INFP:基于音频驱动的双人对话中的互动头像生成 能自动区分谁在说话,谁在听

2024年12月22日
423

Recommendeds

MenteeBot :能够听懂人类指令并能通过视觉模仿自我学习的机器人

MenteeBot :能够听懂人类指令并能通过视觉模仿自我学习的机器人

126 VIEWS
2024年4月18日
Google  NotebookLM推出 “Audio Overview” 的功能 可以将任意文档转换成播客对话

Google NotebookLM推出 “Audio Overview” 的功能 可以将任意文档转换成播客对话

907 VIEWS
2024年9月27日
AtomoVideo:高保真图像到视频生成 符合真实世界运动状态

AtomoVideo:高保真图像到视频生成 符合真实世界运动状态

58 VIEWS
2024年3月6日
使用 ChatGPT 像专业人类分析师一样 进行财务报表分析

使用 ChatGPT 像专业人类分析师一样 进行财务报表分析

800 VIEWS
2024年5月23日
电影配音工种集体失业 全球第一部由 AI 完全翻译配音的电影即将上映

电影配音工种集体失业 全球第一部由 AI 完全翻译配音的电影即将上映

347 VIEWS
2024年7月18日
麻省理工开发出 AI 聊天机器人 可以让你和60岁的自己进行对话

麻省理工开发出 AI 聊天机器人 可以让你和60岁的自己进行对话

587 VIEWS
2024年6月22日
Design2Code:利用大语言模型将视觉设计自动转换为前端代码

Design2Code:利用大语言模型将视觉设计自动转换为前端代码

62 VIEWS
2024年3月7日
GitHub 发布 Copilot Workspace 可通过自然语言编程并测试和运行代码

GitHub 发布 Copilot Workspace 可通过自然语言编程并测试和运行代码

569 VIEWS
2024年4月30日
Stable Diffusion 3论文:一种新的多模态扩散变换器(MMDiT)架构

Stable Diffusion 3论文:一种新的多模态扩散变换器(MMDiT)架构

76 VIEWS
2024年3月6日
OpenAI 宣布推出Whisper large-v3-turbo 语音转录模型 速度提高了8倍

OpenAI 宣布推出Whisper large-v3-turbo 语音转录模型 速度提高了8倍

551 VIEWS
2024年10月2日

Copyright (c) 2024 by Xiaohu.AI.

  • About
  • Contact

Welcome Back!

Login to your account below

Forgotten Password?

Retrieve your password

Please enter your username or email address to reset your password.

Log In

Add New Playlist

No Result
View All Result
  • Home
  • AI 工具
  • XiaoHu.AI 学院
    • AI 教程
    • AI 课程
  • XiaoHu.AI日报
  • 开源项目案例库
    • AI 论文
    • AI 资源
    • AI 项目
  • 加入会员
  • →社群
  • Login

© 2024 Xiaohu.AI

Are you sure want to unlock this post?
Unlock left : 0
Are you sure want to cancel subscription?
转到手机版