Menu

  • Home
  • Trending
  • Recommended
  • Latest

分类目录

  • AI 工具
  • AI新势力
  • XiaoHu.AI 学院
    • AI 教程
    • AI 课程
  • XiaoHu.AI日报
  • 开源项目案例库
    • AI 论文
    • AI 资源
    • AI 项目
XiaoHu.AI学院
  • Home
  • AI 工具
  • XiaoHu.AI 学院
    • AI 教程
    • AI 课程
  • XiaoHu.AI日报
  • 开源项目案例库
    • AI 论文
    • AI 资源
    • AI 项目
  • 加入会员
  • →社群
No Result
View All Result
  • Login
XiaoHu.AI学院
No Result
View All Result
Home XiaoHu.AI日报

Snap 发布第五代 Spectacles AR 眼镜 内置AI 可通过语音提示直接生成 3D 动画

by 小互
2024年9月18日
in XiaoHu.AI日报
0 0
0
Snap 发布第五代 Spectacles  AR 眼镜 内置AI 可通过语音提示直接生成 3D 动画
0
SHARES
262
VIEWS
Share on FacebookShare on Twitter

Snap公司发布了第五代SpectaclesAR 眼镜,新版Spectacles具备更高质量的显示效果和更长的电池续航时间。然而,与前几代一样,这款产品尚未商业销售,而是面向开发者开放使用。开发者需通过 Snap 的 Lens Studio 申请,并支付 99 美元/月的租赁费用,至少租赁一年。

是的,Snap 要求开发者在一年内支付 1188 美元才能使用这些 Spectacles。即便如此,Snap CEO Evan Spiegel 仍相信开发者的兴趣不会减弱。

Snap 表示,这一版本的视场角为 46 度(相比上代的 26.3 度),其波导显示器每度显示 37 个像素——Snap 认为这是衡量 AR 显示质量的正确方式,比以前提升了大约 25%。眼镜的物理镜片在阳光直射下会自动变暗,让你在户外也能清楚地看到投射在周围环境上的内容。

光学引擎提供了 46 度的对角视场角,并具有每度 37 像素的分辨率——相当于在 10 英尺外看到 100 英寸的显示屏。Spectacles 还会根据环境光自动调节色调,因此无论是在室内还是室外,即使在阳光直射下,视觉效果依然明亮。

Snap 基于 OpenAI 的打造了自己的聊天机器人 My AI,用户可以通过手势和语音控制设备,体验多种增强现实应用,还可以利用 AI 根据语音提示生成 3D 动画等。

9月18日 (6) 2

Snap Spectacles第五代的升级情况:

  1. 增强现实显示:新版Spectacles配备更丰富、沉浸感更强的显示效果,分辨率和颜色表现都有显著提升,带来了更清晰的视觉体验。
  2. 视野范围扩展:视野从上一代的26.3度提升至46度,使得用户在使用增强现实功能时能够看到更广阔的场景。
  3. 自适应镜片:镜片可以根据外部光线自动调节,确保在强光环境下也能清晰地看到AR内容。
  4. 手势和语音控制:通过手部动作(如捏合、拉伸等)和语音指令,用户可以与设备进行交互,控制界面和应用程序。
  5. 更长的电池续航:电池续航时间从上一代的30分钟增加到45分钟,并支持通过USB-C接口进行充电,可以在充电时持续使用。
  6. AI集成应用:Spectacles内置AI功能,支持基于语音指令生成3D动画的增强现实镜头,以及Snap自家的AI聊天机器人”My AI”。
  7. AR应用开发支持:Snap推出了针对开发者的Lens Studio工具,开发者可以通过租用Spectacles开发并测试自己的增强现实应用。
  8. 硬件技术提升:设备配备了两颗定制的高通Snapdragon处理器,能够有效分散热量,并采用液晶硅基投影仪来增强图像显示效果。
Spectacles_How_to_Be_Film__2_

Snap Spectacles 2024 详细功能与特点

1. 硬件功能与设计
  • 轻量化设计:Spectacles 重量仅为 226 克,几乎是传统虚拟现实头戴设备的一半,佩戴舒适,适合长时间使用。
  • 多摄像头和传感器集成:眼镜配备四个摄像头和多个传感器,能够进行精确的环境理解、手势跟踪和6DoF(六自由度)追踪。6DoF 允许用户自由移动,并与增强现实内容互动,提供更自然和沉浸的体验。
  • 先进的光学引擎:采用 Snap 自家设计的液晶硅基(LCoS)微型投影仪,结合波导技术,生成清晰、明亮的 AR 图像。无需进行复杂的校准,用户即可轻松体验增强现实内容。
  • 自动调光镜片:镜片能够根据外部光线环境自动调节亮度,确保在室内和室外的视觉效果都能保持清晰,尤其在强光下也能轻松看到投射的增强现实内容。
2. 显示与视觉体验
  • 46度视野:Spectacles 的显示器具备 46 度的对角视野(FoV),能够让用户在更广阔的视野内看到增强现实内容,与上一代产品相比提升显著。
  • 37像素每度的分辨率:提供高达 37 PPD(像素密度)的波导显示,能够为用户带来类似于观看 100 英寸显示器的视觉体验(距离 10 英尺)。
  • 自动调节:镜片的自动调节功能根据光线环境调整镜片的亮度,使显示内容在各种环境下依然清晰明亮。
3. 计算能力与性能
  • 双系统芯片架构:采用高通的双 Snapdragon 处理器,能够分担计算工作负载,确保设备的流畅运行。这种架构还能有效降低功耗,同时提升处理复杂增强现实任务时的效率。
  • 蒸气室散热:为了应对长时间使用中的发热问题,Spectacles 采用了钛蒸汽腔散热设计,确保设备能够长时间佩戴并处理高强度的 AR 内容,而不会过热或导致性能下降。
  • 电池续航:Spectacles 具备高达 45 分钟的连续使用时间,并支持 USB-C 充电,用户在插入充电时仍可继续使用。
4. Snap OS 操作系统与互动
  • Snap OS:Spectacles 运行在全新的 Snap OS 操作系统上,该系统专为自然交互而设计,提供直观的用户界面和交互方式。用户可以通过手势和语音命令来控制眼镜,而主菜单始终可通过手掌的手势来调用。
  • Snap 空间引擎:Snap 的空间引擎能够精确理解周围环境,并以极低的 13 毫秒运动至图像延迟(motion-to-photon latency)将增强现实内容无缝整合到现实世界中。它确保 AR 内容在三维空间中展现得更加自然与逼真。
5. 增强现实体验与应用
  • 多模态 AI:Spectacles 内置的多模态生成 AI 支持基于环境和用户交互的实时生成内容。用户可以通过 AI 浏览网页结果、生成 3D 资产,并在日常活动中观看空间排列的视频内容。
  • 共享镜头体验:Spectacles 强调多人共享体验。通过 Snap OS,开发者可以创建适合家庭或朋友一起使用的增强现实应用。例如,通过 Spectacles,可以与朋友一起加入共享镜头,在增强现实环境中进行互动和游戏。
6. 扩展功能与配套应用
  • Spectator Mode(观众模式):Spectacles 的 Spectator Mode 允许用户与朋友分享自己的增强现实体验,朋友们可以通过他们的设备以自己的视角观看用户的体验过程。
  • 手机镜像功能:Spectacles 支持手机镜像功能,用户可以将手机上的应用程序或内容直接显示在眼镜中。这一功能极大地扩展了眼镜的应用场景,用户可以更加方便地使用常用的手机应用程序。
  • 6DoF 控制器:通过 Spectacles 的配套应用,用户可以将手机变成一个 6DoF 控制器,进一步提升 AR 应用的互动性和操作自由度。

Snap 积极鼓励开发者为 Spectacles 开发新的应用和增强现实镜头。Lens Studio 5.0 工具包优化了开发流程,支持 TypeScript 和 JavaScript,允许开发者更加轻松地构建和发布 AR 应用程序。开发者可以通过简化的开发工具快速将项目部署到 Spectacles 上。

开发者可以直接在 Spectacles 的镜头中使用自定义机器学习模型,轻松实现对象识别、追踪和增强功能。此外,Snap 还与 OpenAI 合作,计划将云端托管的多模态 AI 模型引入 Spectacles,帮助开发者提供更智能的应用体验。

Related Posts

Meta AI提出了一种新的语言模型架构“Large Concept Model (LCM)  让模型更像人类思考
XiaoHu.AI日报

Meta AI提出了一种新的语言模型架构“Large Concept Model (LCM) 让模型更像人类思考

2024年12月25日
482
阿里巴巴推出QVQ-72B 一个基于Qwen2-VL-72B的新型多模态推理模型
XiaoHu.AI日报

阿里巴巴推出QVQ-72B 一个基于Qwen2-VL-72B的新型多模态推理模型

2024年12月25日
336
Fireworks AI新功能 能够将图像或PDF等非文本内容转化为LLM可理解的结构化文本
AI 工具

Fireworks AI新功能 能够将图像或PDF等非文本内容转化为LLM可理解的结构化文本

2024年12月24日
449
Hume AI推出全能文本与语音引擎 OCTAVE 根据文本实时生成特定人格特质的声音
XiaoHu.AI日报

Hume AI推出全能文本与语音引擎 OCTAVE 根据文本实时生成特定人格特质的声音

2024年12月24日
278
Anthropic 公布了一种全新的 AI 越狱技术 可以轻松破解所有前沿模型
AI 论文

Anthropic 公布了一种全新的 AI 越狱技术 可以轻松破解所有前沿模型

2024年12月23日
615
INFP:基于音频驱动的双人对话中的互动头像生成  能自动区分谁在说话,谁在听
AI 项目

INFP:基于音频驱动的双人对话中的互动头像生成 能自动区分谁在说话,谁在听

2024年12月22日
428

Recommendeds

NVIDIA 推出的 AI Blueprint:可以帮你观看数小时的视频并提供摘要总结和问答

NVIDIA 推出的 AI Blueprint:可以帮你观看数小时的视频并提供摘要总结和问答

328 VIEWS
2024年11月10日
image-Translator: 一键翻译各类图片、漫画内文字 支持多种语言

image-Translator: 一键翻译各类图片、漫画内文字 支持多种语言

262 VIEWS
2024年3月21日
Pika 推出根据视频内容自动生成音效功能 可以给视频自动配音

Pika 推出根据视频内容自动生成音效功能 可以给视频自动配音

47 VIEWS
2024年3月11日
MedSAM-2:基于SAM-2 的能够处理多种2D和3D医学图像的模型

MedSAM-2:基于SAM-2 的能够处理多种2D和3D医学图像的模型

327 VIEWS
2024年8月6日
Anthropic 公布了一种全新的 AI 越狱技术 可以轻松破解所有前沿模型

Anthropic 公布了一种全新的 AI 越狱技术 可以轻松破解所有前沿模型

615 VIEWS
2024年12月23日
Wonder Dynamics 推出可将传统视频片段自动转换为 3D 动画场景新技术——Wonder Animation

Wonder Dynamics 推出可将传统视频片段自动转换为 3D 动画场景新技术——Wonder Animation

213 VIEWS
2024年11月1日
Prompt 学习地图 01 | 编写清晰的说明 – 多说两句,提供细节

Prompt 学习地图 01 | 编写清晰的说明 – 多说两句,提供细节

361 VIEWS
2024年3月25日
JetMoE-8B:不到10万美元的训练成本 性能却超越LLaMA2-7B

JetMoE-8B:不到10万美元的训练成本 性能却超越LLaMA2-7B

104 VIEWS
2024年4月16日
Hume AI 推出 Voice Control 功能 通过滑块操作即可实现个性化的语音定制

Hume AI 推出 Voice Control 功能 通过滑块操作即可实现个性化的语音定制

249 VIEWS
2024年12月3日
Midjourney 角色一致性功能是讲述故事或推动营销创意的有力工具

Midjourney 角色一致性功能是讲述故事或推动营销创意的有力工具

98 VIEWS
2024年3月28日

Copyright (c) 2024 by Xiaohu.AI.

  • About
  • Contact

Welcome Back!

Login to your account below

Forgotten Password?

Retrieve your password

Please enter your username or email address to reset your password.

Log In

Add New Playlist

No Result
View All Result
  • Home
  • AI 工具
  • XiaoHu.AI 学院
    • AI 教程
    • AI 课程
  • XiaoHu.AI日报
  • 开源项目案例库
    • AI 论文
    • AI 资源
    • AI 项目
  • 加入会员
  • →社群
  • Login

© 2024 Xiaohu.AI

Are you sure want to unlock this post?
Unlock left : 0
Are you sure want to cancel subscription?
转到手机版