您当前的位置:首页 > 电脑百科 > 人工智能

鹅厂最新AI工具刷屏!杨幂寡姐多风格写真秒秒钟生成,LeCun点赞 | 可免费体验

时间:2024-01-16 13:06:32  来源:量子位  作者:

大厂们在整活方面开始卷起来了!

前脚字节阿里的工具火了,现在腾讯这个新照片生成应用PhotoMaker直接刷屏,瞧这阵仗……

只需上传一张或以上照片,无需额外LoRA训练,就能快速可定制。任何人、任何风格,高保真那种。

于是秒秒钟,LeCun化身钢铁侠。但随后LeCun转发表示:那个文艺复兴时期的绘画风格是他最喜欢的。

杨幂各类风格写真爆出。

除此之外,还有更多有意思的功能,目前应用Demo已免费开放体验。

这就来提前体验一把。

PhotoMaker刷屏

总结来看,PhotoMaker主要有这样三大功能:

第一个,可以根据描述生成多种风格个人照片

比如,你见过这样的黑寡妇吗?

就是在二次元里也行的照片,也可以生成。

第二个,混合不同人物特征,生成全新人物形态

脑洞大开一下,奥特曼和乔布斯“生”的孩子,可能长这样???

甚至还可以破次元结合!

除此之外,还有一些小细节的功能,修改个年龄、性别以及照片年代啥的。

小时候的马斯克,你见过吗?

当LeCun变成几十岁大妈……

目前,研究团队给了两个体验版本:官方原版以及风格化版本。其中风格化版,要想实现更好的效果,仅需要更改基础模型并添加LoRA模块。

不过这两个版本食用起来没有任何区别,主要分为三个步骤。

首先,上传你想定制的照片。一张可以,多张也行。

值得注意的是,他们这里强调了,他们不会进行人脸检测,但上传的图片人脸已经要占据图片大部分。

其次,输入文字提示,确保在要定制的类别词后面加上触发词:img

如:男人 img 或女人 img 或女孩 img。

然后再选择喜欢的样式、风格模版,就可以生成了。

不过现在实测,效果会出的比较慢,可能是太多人使用了。

如何实现?

简单来说,PhotoMaker采用了一种简单而有效的表示方法——堆叠ID嵌入。

它可将多个身份证明(ID)图像的信息合并成统一的数据结构,这样能更好保存单个ID信息的同时,还能整合多个不同ID特征。

具体而言,首先,分别从文本编码器和图像编码器中获取文本嵌入和图像嵌入。然后,通过合并相应的类别嵌入(比如性别)和每个图像嵌入,提取融合嵌入。接着,沿长度维度串联所有融合嵌入,形成堆叠ID嵌入。最后再将其输入到Diffusion Model生成图像。

由于训练过程需要使用按ID分类的数据集,但现有数据集要么没有注释ID信息,要么所包含的场景丰富度有限,比如只关注面部区域。

为此,研究人员还专门构建了一个以ID为导向的文本图像数据集构建管线,它能按照不同ID进行分类。每个ID都有多幅图像,这些图像包括不同的表情、属性、场景等。

需要注意的是,虽然训练过程中使用的是带背景遮蔽的同一ID图像,但在推理过程,可直接输入不同ID、且不带背景遮蔽的图形,来创建新ID。

实验结果表明,与其他方法相比,PhotoMaker具备高质量和多样化的生成能力,以及可编辑性、保真性。

此外,这一方法还能实现更多以往难实现的有趣功能。比如改变年龄或性别、将旧照片或艺术作品中的人物还原到现实中以及身份混合等。

好了,感兴趣的朋友可戳下方链接玩玩~

https://huggingface.co/spaces/TencentARC/PhotoMaker

https://huggingface.co/spaces/TencentARC/PhotoMaker-Style

论文链接:

https://arxiv.org/abs/2312.04461

项目链接:

https://Github.com/TencentARC/PhotoMaker?tab=readme-ov-file#start-a-local-gradio-demo

— 



Tags:AI工具   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,不构成投资建议。投资者据此操作,风险自担。如有任何标注错误或版权侵犯请与我们联系(Email:2595517585@qq.com),我们将及时更正、删除。
▌相关推荐
鹅厂最新AI工具刷屏!杨幂寡姐多风格写真秒秒钟生成,LeCun点赞 | 可免费体验
大厂们在整活方面开始卷起来了!前脚字节阿里的工具火了,现在腾讯这个新照片生成应用PhotoMaker直接刷屏,瞧这阵仗……只需上传一张或以上照片,无需额外LoRA训练,就能...【详细内容】
2024-01-16  Tags: AI工具  点击:(0)  评论:(0)  加入收藏
11个面向设计师的必备AI工具
译者 | 布加迪审校 | 重楼在当今快速发展的设计领域,人工智能(AI)工具已成为不可或缺的创新催化剂。这些工具专门用于提高效率和创造力,从而重新定义传统的设计方法。AI正在彻底...【详细内容】
2024-01-09  Tags: AI工具  点击:(6)  评论:(0)  加入收藏
生成式AI工具或于2024迎来爆发 微软Copilot势将成为最大赢家?
如果说2023年是“炒作”生成式人工智能(GenAI)的一年,那么2024年将是大多数公司向技术进行实质性投入的一年。上月月底至本月月初,媒体对22名顶级公司技术官员进行了抽样调查,包...【详细内容】
2023-12-26  Tags: AI工具  点击:(14)  评论:(0)  加入收藏
亚马逊AI工具Q被“锤爆”:不够精准、侵犯隐私、存在幻觉、泄露数据
不久前亚马逊推出AI工具“亚马逊Q”,它的竞争对手是微软Copilot。业界本来以为亚马逊来势汹汹,Q应该很不错,但最新报告显示,这款AI工具并不成熟,可能还没有准备好。Q到底有什么问...【详细内容】
2023-12-06  Tags: AI工具  点击:(70)  评论:(0)  加入收藏
YouTube推出可模仿著名歌手的AI工具,可用文字或哼唱创作歌曲
IT之家 11 月 16 日消息,YouTube 正在测试新的生成式 AI 功能,让用户可以通过输入文本或哼唱一段旋律来创作音乐。其中一个功能叫做 Dream Track,已经向平台上的一些创作者提供...【详细内容】
2023-11-17  Tags: AI工具  点击:(49)  评论:(0)  加入收藏
2023年最适合教育的15种AI工具
人工智能工具在教育中的潜力吸引教育从业者正在探索未来的可能性,人工智能教育工具有能力改变学习方式,并为学生和教育工作者创造新机会。国际财经媒体Insider Monkey根据用户...【详细内容】
2023-10-07  Tags: AI工具  点击:(243)  评论:(0)  加入收藏
600多个人工智能AI工具汇总-来到字母F
Fabled: 提供终极AI故事生成器。用户可以通过一个句子,结合AI技术,创作个性化的图文故事。 FakeYou: 提供文本转语音服务,用户可以使用他们喜欢的角色说出文本内容。用户还...【详细内容】
2023-10-04  Tags: AI工具  点击:(275)  评论:(0)  加入收藏
工程师团队常用的六款AI工具
作者 | Alex Omeyer译者 | 陈峻面对快速迭代和发展的人工智能(AI),包括马斯克和扎克伯格在内的世界顶尖技术大牛们,往往分别持有着迥然不同、甚至存在巨大分歧的看法。最近,我们...【详细内容】
2023-09-21  Tags: AI工具  点击:(214)  评论:(0)  加入收藏
Vercel推出的前端AI工具v0,会改变前端么?
大家好,我卡颂。最近,Vercel推出了一款AI代码生成工具 —— v0[1],可以快速生成前端组件代码。这款AI工具会影响现有前端开发模式么?本文会从如下角度展开讨论: v0是什...【详细内容】
2023-09-18  Tags: AI工具  点击:(171)  评论:(0)  加入收藏
电商模特1元购,人图背景随便换!国产AI工具降本99%
西风 明敏 发自 凹非寺量子位 | 公众号 QbitAIAI工具秒做电商图,一张只要一块钱,成本直降99%!随便上传一张照片,服饰不变,改头换脸:足不出户即可配入各种背景,光影也能自然呈现:小哥...【详细内容】
2023-08-12  Tags: AI工具  点击:(172)  评论:(0)  加入收藏
▌简易百科推荐
鹅厂最新AI工具刷屏!杨幂寡姐多风格写真秒秒钟生成,LeCun点赞 | 可免费体验
大厂们在整活方面开始卷起来了!前脚字节阿里的工具火了,现在腾讯这个新照片生成应用PhotoMaker直接刷屏,瞧这阵仗……只需上传一张或以上照片,无需额外LoRA训练,就能...【详细内容】
2024-01-16    量子位  Tags:AI工具   点击:(0)  评论:(0)  加入收藏
不是人才用不起,而是AI巡检更有性价比!
作者 | 涂承烨审校 | 重楼在许多行业中,如煤炭、电力、化工等,安全生产是至关重要的。这就需要通过巡检,对设备运行状态进行实时监测,及时发现并处理潜在的安全隐患,从而降低事故...【详细内容】
2024-01-16    51CTO  Tags:AI巡检   点击:(1)  评论:(0)  加入收藏
机器人女友挤满GPT商店!严禁定制情人的OpenAI傻眼了
GPT商店是OpenAI探索大语言模型应用场景的一个重要媒介,自本月10号上线以来,商店里已经上架了超一万个应用。然而,让OpenAI颇为矛盾的是,越来越多的“机器人女友”和“机器人男...【详细内容】
2024-01-15    财联社  Tags:机器人女友   点击:(2)  评论:(0)  加入收藏
2024年人工智能趋势、预测和可能性
图片来源:由无界 AI生成欢迎来到2024年人工智能的可能性之旅。在这里,每一个预测都是一个潜在的窗口,让我们看到一个充满创新、变革,更重要的是充满机遇的未来。就像20世纪50年...【详细内容】
2024-01-15  AI新智界    Tags:人工智能   点击:(4)  评论:(0)  加入收藏
家用电脑也能轻松玩转大模型
2022 年底 OpenAI 发布 ChatGPT,随后 2023 年大模型进入了有史以来发展最快速的时候,在这一年中,相继涌现了很多商业闭源或开源的大模型,本文就是通过 Ollama 开源应用程序将开...【详细内容】
2024-01-13  积极的小王爷  今日头条  Tags:大模型   点击:(1)  评论:(0)  加入收藏
奥尔特曼做客盖茨节目:5到10年后,现有AI将显得“愚蠢不堪”
当地时间1月12日,微软创始人比尔·盖茨的播客节目《为我解惑》,请来了一位炙手可热的重磅嘉宾:OpenAI公司CEO萨姆·奥尔特曼。两位科技界领军人物就“AI对人类社会...【详细内容】
2024-01-13    红星新闻  Tags:奥尔特曼   点击:(5)  评论:(0)  加入收藏
生成式AI,发展可持续吗?
作者丨Shyam Nandan Upadhyay编译丨诺亚出品 | 51CTO技术栈(微信号:blog51cto)最近有消息透露,OpenAI预计在2024年实现16亿美元的年化收入。相较于去年10月预测的13亿美元,这一数...【详细内容】
2024-01-12    51CTO  Tags:生成式AI   点击:(9)  评论:(0)  加入收藏
一篇文章带你读懂生成式人工智能
一篇文章带你读懂生成式人工智能Éric Moulines巴黎综合理工大学统计机器学习教授Hatim Bourfoune法国国家科学研究中心(CNRS)密集型科学计算开发与资源研究所(IDRIS)人工...【详细内容】
2024-01-10  瞰创新    Tags:生成式人工智能   点击:(4)  评论:(0)  加入收藏
从Google Gemini到OpenAI Q*:生成式AI研究领域全面综述
新智元报道来源:专知【新智元导读】这项综述性研究报告批判性地分析了生成式AI的发展现状和发展方向,并探究了谷歌Gemini和备受期待的OpenAI Q*等创新成果将如何改变多个领域...【详细内容】
2024-01-09  新智元    Tags:Google Gemini   点击:(11)  评论:(0)  加入收藏
美国科学家:超级人工智能毁灭人类可能性仅为5%
据英国《新科学家》周刊的一篇论文指出,人工智能有可能导致人类灭绝的可能性为5%。该论文的作者、美国加州机器情报研究所的卡特娅·格拉斯表示,虽然大多数人工智能研究...【详细内容】
2024-01-08    中关村在线  Tags:人工智能   点击:(6)  评论:(0)  加入收藏
站内最新
站内热门
站内头条