Gemini现在与所有的谷歌应用深度集成,在Pixel上调用Gemini的体验变得十分丝滑。
用户可以长按电源按钮或说“Hey Google”召唤Gemini,使其在任何地方随时提供帮助,例如在所用应用的顶部调出Gemini的叠加层,询问有关屏幕上内容的问题。
比如在使用YouTube观看视频时,你可以点击“询问此屏幕”并针对视频内容提问,或是让Gemini将视频中的地址等信息提取出列表,再添加到谷歌地图等其他应用中;你也可以在写邮件时召唤Gemini,让它生成图像,并将生成的图像直接拖放到文本框中。
▲Gemini交互演示
Gemini还可以与用户目前使用的所有谷歌应用和工具集成 ,无需在应用和服务之间切换。
例如当用户要举办晚宴,就可以一步完成:让Gemini找出朋友在Gmail中发的千层面食谱,并要求它将食材添加到购物清单中,再让它制作一个“让我们想起90年代末的歌曲播放列表”。
Gemini未来还将集成到日历等应用,用户可以直接拍摄音乐会传单并通过与Gemini 聊天的形式,确认自己当天的时间、设置购买门票提醒,无需打开其他应用程序。
▲Gemini演示
在安全方面,Gemini 可以在用户允许的情况下,将相关个人数据与Google 整理并公开的所有知识联系起来,为用户提供帮助。例如,Gemini 可以根据您的私人教练的电子邮件帮助您制定日常锻炼计划,或者使用Google Drive 中的简历撰写工作简历。
借助Gemini Nano ,用户可以使用通话记录汇总通话中的音频,或使用Pixel 屏幕截图来保存和整理图像。
但无论这些数据是在云端还是在设备上处理,它都仅存在于谷歌安全的端到端架构中,从而确保这些信息的安全和私密。
为了让用户在移动端的AI 体验更加智能且高效,谷歌引入了Gemini 1.5 Flash 等响应质量更高、速度更快的新型号,同时在接下来的几个月里,其将继续推出与Google Home 、电话和信息的更深入集成。
二、谷歌最大、最薄折叠手机,AI图文能力大涨
从手机开始,让我们来看看谷歌今天是如何将硬件设备全面围绕AI升级的。
谷歌发布了四款新手机,分别是Pixel 9、两种尺寸的Pro机型Pixel 9 Pro、Pixel 9 Pro XL,以及折叠屏手机Pixel 9 Pro Fold,售价分别为799美元、999美元、1799美元起。
▲Pixel 9系列手机售价
Pixel 9 Pro Fold拥有谷歌史上最大的手机显示屏,并且是最薄的可折叠手机 。它采用Super Actua Flex显示屏,比Pixel Fold亮80%。
▲Pixel 9 Pro Fold厚度
Pixel 9手机采用全新外观,将摄像头置于正面和中心位置,其配备6.3英寸Actua显示屏,比上一代Pixel 8亮度高35%。
Pixel 9的Pro机型首次提供两种不同尺寸,包括6.3英寸的Pixel 9 Pro和6.8英寸的Pixel 9 Pro XL,两款手机均配备Super Actua显示屏。
▲两款Pixel 9 Pro机型
四款手机均由谷歌最新的定制芯片Tensor G4 提供支持。Tensor G4由谷歌DeepMind设计,经过优化可运行最先进的AI模型,同时也是首款运行多模态Gemini Nano模型的处理器,让手机可以理解文本、图像和音频。
在AI功能上,除了Gemini的深度集成外,Pixel的AI图文能力 上也大幅升级。
Pixel推出首款图像生成器Pixel Studio ,它由运行在Tensor G4上的设备端扩散模型,云端的Imagen 3模型结合而成,在手机上提供快速的文生图能力。
▲Pixel Studio
很多人手机上都有大量截图,但是在需要用的时候又很难精准快速地找到所需的信息。Pixel 9推出专属应用Pixel Screenshots,可以保存、整理和调用截图中的重要信息。
例如为一个喜欢松鼠的朋友准备生日礼物,你可以先在浏览器中搜集大量备选的礼物或相关资料,并截图保存,Pixel Screenshots将分析所有图片的内容,并提供进一步的建议。
▲Pixel Screenshots
Pixel还在天气、通话等应用中增加了AI能力。例如,Clear Calling功能可进一步提高音频质量,新的“通话记录”功能会在挂断电话后立即发送私人通话摘要和完整的通话记录。为了保护隐私,通话记录功能完全在设备上运行。
三、从硬件、软件到算法,九大相机能力升级
除了AI能力,相机是Pixel 9此次发布的另一重点,主要有九个方面的能力升级,包括镜头等硬件升级、HDR+成像管道、超高分辨率变焦视频、实时增强现实技术、Reimagine、自动取景、全景夜视、缩放增强以及面向家长的儿童辅助拍摄功能。
首先在硬件层面,两款Pro机型配备专业的三重后置摄像头系统 ,新的48MP 5x长焦镜头具有升级的传感器,可以改善自动对焦,前置摄像头为42MP,即使在弱光条件下也能拍摄更清晰的图像。
Pixel 9 Pro Fold则配备一个超薄的高级三重后置摄像头系统,包括一个超宽摄像头,支持照片和视频的微距对焦。
Pixel 9有相同的主镜头和超宽镜头,可收集110%以上的光线,对焦距离接近两厘米。
其次,Pixel 9系列手机使用新的HDR+成像管道 ,优化了曝光、色调映射、锐化、对比度等,以便更好地捕捉日常场景中的纹理、阴影和肤色等元素。
在使用Pro机型拍摄视频时,用户可以使用高达20倍的超高分辨率变焦能力,该功能将升级后的远摄相机的细节与机器学习相结合,无论照明条件如何都能拍摄出丰富细节的高分辨率视频——也许又将成为一款“演唱会神器”。
▲超高分辨率变焦视频
此外,Video Boost功能利用 AI能力提供8K分辨率的视频 ,可以在后期制作中放大2倍并保留4K分辨率。
▲超高分辨率变焦视频
平时拍合照时,如何让摄影师也能参与进来一直是个难题。现在基于实时增强现实技术,“添加我”(Add Me)功能 可以在拍完一张照片的基础上,指导摄影师如何构图以匹配第一张照片,确保不会漏掉任何一个人。
▲Add Me功能
谷歌的AI图像编辑工具Magic Editor 新增了两个功能:Reimagine和自动取景。
Reimagine可以基于文本生成图像并编辑,例如改变照片中草地、天空、树木、室内装饰等的外观。
▲Reimagine
自动取景则是适用于“拯救废片”,其通过AI生成更好的取景框,让照片重新构图,同时生成背景填充主体周围的空白,突出照片主体。
▲自动取景
Pixel的全景模式操作界面更加简便,拍摄质量也更高,可以拍摄风景和城市景观的出色低光全景。
▲全景夜视功能
基于缩放增强功能,用户可以截取照片的部分,并基于AI增强智能提升分辨率,从而获得高质量的拍摄后变焦效果。
▲缩放增强
针对儿童,Pixel 9 Pro Fold还推出了Made You Look功能 ,在翻转的一面播放有趣的动画吸引孩子的注意力,方便家长拍摄照片。有一说一,这功能还挺适合铲屎官的。
▲Made You Look
四、AI检测脉搏消失,TWS耳机首搭Tensor A1芯片
谷歌此次发布的Pixel Watch 3被其称为旗舰智能手表的最大飞跃。在大小上,Pixel Watch 3为用户提供了新的45mm表盘选项。
除了大小,AI是此次智能手表的重点更新。
首先,用户无需手动打开睡眠模式了,Pixel Watch 3使用机器学习来自动检测睡眠并启用睡眠模式 ,该模式可节省电量并关闭通知以及常亮显示屏,基于相同的技术其还可以自动检测用户何时醒来并退出睡眠模式。
其次,与苹果、三星一样,谷歌的智能手表专门在用户的健身、运动方面发力。为了帮助用户找到健身和休息的平衡,Pixel Watch 3推出了三个新工具:每日准备状态(分析用户每天接受训练的准备程度)、有氧负荷(跟踪训练期间心脏负荷)和目标负荷(基于个性化目标、心肺负荷、身体现状规划训练)。
▲谷歌Pixel Watch 3
在跑步方面,Pixel Watch 3还专门提供了帮助用户规划跑步、指导完成跑步并反映跑步进度的新功能,谷歌手表的高级订阅模式Fitbit Premium中,谷歌AI还会提供自动每日跑步建议,这些建议旨在帮助用户达到目标负荷,并可以根据之前的跑步情况进行个性化设置。
Pixel Watch 3此次更新的第三大亮点就是——首创脉搏丢失检测功能 ,这一功能结合了Pixel Watch 3传感器信号、AI和信号处理算法,可检测脉搏消失事件。
所谓的脉搏消失是就指心脏突然停止跳动,这一状况可以影响任何年龄的人,并可能由心脏内外的各种问题引起,例如原发性心脏骤停、呼吸或循环衰竭、服药过量或中毒。
Pixel Watch 3 的心率传感器会检测用户脉搏,一旦检测不到会同时启动运动传感器寻找信号,然后基于AI 将脉搏和运动信号结合在一起以确认脉搏消失事件。
如果是,则触发检查以查看用户是否做出反应,并采取误判或发出警报等措施。
最后,谷歌还将Pixel 手机上的AI 筛选垃圾电话搬到了Pixel Watch 3 上。
再看TWS耳机,谷歌将Pixel Buds Pro 2称作专为Gemini打造的耳机。
其中最突出的表现就是,用户佩戴 Pixel Buds Pro 2就可以无需手机与Gemini交谈。也就是说,带着Gemini,用户就仿佛拥有一个免提、免看的虚拟AI助手。它会主动询问用户需要步行前往最近的公共交通站的路线吗?需要提醒即将到来的约会吗?需要推荐新歌吗?
此外,借助Gemini Live ,Pixel Buds Pro 2可提供移动对话体验,用户能与Gemini进行长时间对话。
用户甚至可以在旅途中使用Gemini Live,只需在佩戴耳机时解锁手机说“嘿,Google,让我们实时聊天”。
▲谷歌Pixel Buds Pro 2
硬件性能方面,Pixel Buds Pro 2 配备了专为音频处理打造的新芯片Tensor A1芯片 。这是谷歌首次将Google Tensor芯片扩展到手机和平板电脑之外。
Tensor A1为谷歌的下一代主动降噪技术提供支持,该技术每秒可根据用户的环境调整多达300万次,从而消除比上一代Pixel Buds Pro多两倍的噪音。
结语:AI手机之战打响,大模型抢夺落地占位
继苹果、三星之后,谷歌也在AI手机全面发力,无疑为科技行业带来了新的活力与竞争。以Gemini为核心,谷歌正在用AI全面重构手机、手表到耳机等硬件全家桶。
AI手机之战已然打响,谷歌借助安卓市场优势正在扩大Gemini的落地范围,与OpenAI的ChatGPT展开占位之争。
除了落地自家的Pixel外,谷歌还与小米、OPPO等中国手机品牌展开合作,将Gemini引入更多机型,这一方面体现了国产手机在全球AI手机市场的地位,另一方面也展现了谷歌AI能力的优势。
https://zhidx.com/p/437700.html