最新要闻
- 一彬科技06月26日涨停分析|天天时快讯
- 兴银理财旗下鸿利兴睿远航1号年内涨10.22% 焦点日报
- 宁德时代再度回应与特斯拉“解绑”传闻_焦点快报
- 【新视野】vga转hdmi连接线_vga转hdmi
- 全球看热讯:厚植文化传承发展之根 专家学者热议“提炼展示中华文明的精神标识和文化精髓”
- 绿色之路访谈:食品行业探寻双碳发展
- 途安2012款变速箱_途安2012款
- 卖到24万!比亚迪海豚运动版将在澳大利亚限量发布
- 南京高科:6月26日融资买入1020.52万元,融资融券余额3.81亿元_新要闻
- 我国最长智轨线路启动载客试运行 全长46.69公里
- 热议:2023年溧阳小升初施教区划分(最新)
- 汉兰达最强国产平替来了!内饰全新升级 全新广汽传祺GS8曝光_天天要闻
- 钟南山与学生合照时意外被亲:感受到广医同学的热爱|资讯
- 【全球播资讯】对标比亚迪汉 长安启源A07官图发布:内饰设计秒杀同级燃油车
- 中国移动5G达成全球领先 5G新通话今年全网商用:不加好友开视频-天天热点
- NFC无线充电功率将提升到3W 用途大多了
手机
开间_开间
互动| 炬芯科技:第一代智能手表单芯片ATS3085系列已应用于知名品牌Noise和realme等中高端机型中|环球热议
- 开间_开间
- 互动| 炬芯科技:第一代智能手表单芯片ATS3085系列已应用于知名品牌Noise和realme等中高端机型中|环球热议
- 世界微头条丨港中大研究指复必泰及科兴疫苗可预防变异病毒株引起的严重疾病
- 环球报道:颈椎有问题 还真不能乱按摩
- 天天微头条丨银行逾期停息挂账会怎么样?银行申请停息挂账的条件有哪些?
- 全球微动态丨扛不住了!多家日本车企宣布涨价:最高达10%
家电
爆火DragGAN正式开源,GitHub近18k星!清华校友带GAN逆袭,大象一秒P转身
【新智元导读】就在刚刚,引爆AI绘图圈的DragGAN,正式发布了开源代码!
上个月,一项名为「Drag Your GAN」的核弹级研究,在AI绘图圈炸响。
论文由MPII、MIT、宾大、谷歌等机构的学者联合发布,并且已被SIGGRAPH2023录用。
(资料图)
从此,我们只需一拖一拽,就能实现完美P图了,哪里不准修哪里!
拍的照片表情不好?修!脸型不够瘦?修!脸冲镜头的角度不对?修!
而就在刚刚,团队正式放出了官方代码!
项目地址:https://github.com/XingangPan/DragGAN
首先,需要下载预训练StyleGAN2的权重:
shscripts/download_model.sh
如果想尝试StyleGAN-Human和Landscapes HQ(LHQ)数据集,则需要将下载的权重放到./checkpoints目录下。
接着,启动DragGAN GUI来编辑GAN生成的图像:
shscripts/gui.sh
如果要编辑真实图像,则需要使用像PTI这样的工具执行GAN反演。然后将新的潜在代码和模型权重加载到GUI中。
有网友在上手试用后表示,只会占用大约6G显存,但是使用效果不是很理想,坐等后续改进。
GAN逆袭归来,一秒把大象P转身
顾名思义,通过DragGAN,我们可以任意拖动图像进行编辑,无论是对象的形状、布局、姿态、表情、位置、大小,都可以做到精准控制。
项目地址:https://编程客栈vcai.mpi-inf.mpg.de/projects/DragGAN/
在确定关键点的起始和终止位置之后,再根据对象的物理结构,用GAN生成符合逻辑的图像,一张挑不出破绽的图就做好了。
比如,轻轻一拖动,就能想把耷拉着的狗耳朵提起来,让狗狗从站着变成趴下,以及让狗狗瞬间张嘴微笑。
模特的姿势可以随意改变,短裤可以变成九分裤,短袖可以变长袖。
湖边的树可以瞬间长高,湖里的倒影也跟着一起改变。
原图中的太阳没露脸?无所谓,DragGAN会给你造个日出。
对此网友调侃称,现在甲方提出「让大象转个身」的要求,终于可以实现了。
DragGAN:图像处理新时代
在这项工作中,团队研究了一种强大但还未被充分探索的控制GAN的方法——以交互的方式将图像中任意一点精确「拖动」至目标点。
DragGAN主要包括以下两个主要组成部分:
1.基于特征的运动监控,驱动操作点向目标位置移动
2.一个新的点跟踪方法,利用区分性的GAN特征持续定位操作点的位置
通过DragGAN,任何人都可以对像素进行精确的控制,进而编辑如动物、汽车、人类、风景等多种类别的姿态、形状、表情和布局。
由于这些操作在GAN的学习生成图像流形上进行,因此它们倾向于生成逼真的输出,即使在富有挑战性的场景下也是如此,例如被遮挡的内容和变形的图像。
定性和定量的对比表明,DragGAN在图像操作和点跟踪任务中,都明显优于先前的方法。
拖拽编辑
在DragGAN的加持下,用户只需要设置几个操作点(红点),目标点(蓝点),以及可选的表示可移动区域的mask(亮区)。然后,模型就会自动完成后续的图像生成,
其中,动态监控步骤会让操作点(红点)向目标点(蓝点)移动,点追踪步骤则通过更新操作点来追踪图像中的对象。此过程会一直持续,直到操作点达到其相应的目标点。
流程
具体来说,团队通过在生成器的特征图上的位移修补损失来实现动态监控,并在相同的特征空间中通过最近邻搜索进行点追踪。
方法
值得注意的是,用户可以通过添加mask的方式,来控制需要编辑的区域。
可以看到,当狗的头部被mask时,在编辑后的图像中,只有头部发生了移动,而其他区域则并未发生变化。但如果没有mask的话,整个狗的身体也会跟着移动。
这也显示出,基于点的操作通常有多种可能的解决方案,而GAN会倾向于在其从训练数据中学习的图像流形中找到最近的解决方案。
m编程ask的效果
在真实图像的编辑中,团队应用GAN反转将其映射到StyleGAN的潜空间,然后分别编辑姿势、头发、形状和表情。
真实图像的javascript处理
不仅如此,DragGAN还具有强大的泛化能力,可以创建出超出训练图像分布的图像。比如,一个张得巨大的嘴,以及一个被极限放大的车轮。
泛化能力
作者介绍
论文一作Xingang Pan,目前已经正式成为了南洋理工大学计算机科学与工javascript程学院的助理教授。
研究方向主要集中在生成式AI模型、AI与人类协同内容生成、3D/视频编辑和生成、神经场景表示和渲染,以及物理感知内容生成。
在此之前,他于2016年在清华大学获得学士学位,2021年在香港中文大学多媒体实验室获得博士学位,导师是汤晓javascript鸥教授。随后在马克斯普朗克计算机科学研究所从事了博士后研究,由Christian Theobalt教授指导
Lingjie Liu是宾夕法尼亚大学计算机和信息科学系的Aravind K. Joshi助理教授,负责宾大计算机图形实验室,同时也是通用机器人、自动化、传感和感知(GRASP)实验室的成员。
在此之前,她是马克斯普朗克计算机科学研究所的Lise Meitner博士后研究人员。并于2019年在香港大学获得博士学位。
参考资料:
https://github.com/XingangPan/DragGAN
关键词:
爆火DragGAN正式开源,GitHub近18k星!清华校友带GAN逆袭,大象一秒P转身
动态焦点:我国拟立法保障粮食安全
李想吐槽奔驰:告警系统特别敏感 让他养成糟糕习惯
全球时讯:重磅回归!《易车横评·真十万公里长测》全新上线
头条:信息对抗技术属于什么类(信息对抗技术)
如何促进退役士兵高质量就业创业?请关注6月29日《金色热线》
全球看热讯:A股冲上热搜!4200股杀跌,原因找到了?
焦点简讯:中成药集采政策下,企业如何保持竞争力?
高级讲师与副教授区别(高级讲师)
世界上第一台电脑是谁发明的(电脑是谁发明的)-全球要闻
艺术与生活的名言_艺术与生活 全球球精选
万通保险方澄清:从未购买中国恒大中心 大厦更名为租户权益 环球观速讯
世界速看:金价继续涨!2023年6月26日各大金店黄金价格多少钱一克?
中国工商银行各行行号_工商银行支行行号查询
宝能集团再被强制执行1.35亿
全球速看:瑞安市委书记李坚在全市国企改革动员会暨财政审计税务工作会议上强调:纵深推进国企改革 高效抓好财税审计
今日聚焦!许祖彦院士力挺三色激光技术 Vidda等品牌抢占技术市场先机
每岁登高在异乡全诗_每岁登高在异乡_天天观热点
广西开展城镇燃气安全隐患专项排查整治
复古相机推荐学生价(复古相机推荐)_当前速递
qq会员如何退费(qq会员退订) 热门看点
【播资讯】分红哪家强? 160只股股息率超5%
面积稳、长势好新季花生产量乐观
皖能电力在滁州投资成立新能源公司 注册资本3.2亿元
一彬科技06月26日涨停分析|天天时快讯
全球视点!福岛核排污最新进展:排污海底隧道已基本完工
兴银理财旗下鸿利兴睿远航1号年内涨10.22% 焦点日报
航空工业规划总院3项工程荣获第十五届“中国钢结构金奖”-天天热资讯
开间_开间
开源证券给予五洲特纸买入评级 公司信息更新报告:实控人底部增持+股权激励计划 彰显未来发展信心
宁德时代再度回应与特斯拉“解绑”传闻_焦点快报
【新视野】vga转hdmi连接线_vga转hdmi
又有REIT紧急公告!中信建投国家电投新能源REIT:本基金运作正常|今日聚焦
全球看热讯:厚植文化传承发展之根 专家学者热议“提炼展示中华文明的精神标识和文化精髓”
南航河南公司在暑运两月计划总增运力310余班次
今年上半年湖南违法占用耕地同比下降逾36%
期末“考试”无纸笔?看光华实小一年级学子智慧闯关!|快资讯
江河集团: 公司坚持建筑装饰主业发展,具体详见公司对外公布的公告,目前无其他业务板块的布局_世界观速讯
互动| 炬芯科技:第一代智能手表单芯片ATS3085系列已应用于知名品牌Noise和realme等中高端机型中|环球热议
无锡药企荣登同业“TOP10”|世界视点
环球报道:高温黄色预警继续!京津冀局部地区今日最高温或达40℃以上
6月27日生意社锌基准价为20210.00元/吨
跨境电商年进出口规模首超2万亿元(新数据 新看点) 当前头条
北向资金昨日净买入21.17亿元,重点增持计算机行业,这些AI概念热股获加仓(名单)
世界快资讯:济宁高新区王因街道韩堂新村开展 “燃气严把关 安全零距离”活动
中方代表呼吁国际社会向刚果(金)提供更多支持-每日报道
金融壹账通美股跌32.68%
国泰君安期货黑色观点6月27日_今日报
世界微头条丨港中大研究指复必泰及科兴疫苗可预防变异病毒株引起的严重疾病
厦门成立船员权益保障工作室
面积稳、长势好新季花生产量乐观_当前快报
绿色之路访谈:食品行业探寻双碳发展
宣布!国足大将归来_天天微资讯
世界即时看!战略性矿产综合利用工程技术创新中心将聚焦镍矿产资源
全国人大常委会拟设立代表工作委员会
今日关注:深圳国际:11.87亿元摘得深圳一宗地块
环球报道:颈椎有问题 还真不能乱按摩
印尼风情,四海共赏 每日简讯
环球视讯!第一次约会的注意事项_第一次约会注意事项
途安2012款变速箱_途安2012款
卖到24万!比亚迪海豚运动版将在澳大利亚限量发布
【世界独家】2023郑州大学生免费坐地铁刚毕业可以吗
新概念英语第三册原文文本学习Lesson18(1)
osco ar(osco)
最资讯丨第十四届夏季达沃斯热点抢先看
国家矿山安全监察局发布《智能化矿山数据融合共享规范》
当前讯息:详解新一代凯迪拉克CT6:官降4万并不重要,关键是纵置后驱+10AT
畅游家乡风土 江夏一小期末考试“闯”出精彩|全球焦点
命案,造谣,被毁掉的男明星 每日关注
【环球报资讯】V观财报|华荣股份:大股东、董事拟合计减持不超过2.45%
天天微头条丨银行逾期停息挂账会怎么样?银行申请停息挂账的条件有哪些?
全球微动态丨扛不住了!多家日本车企宣布涨价:最高达10%
【快播报】杭州云栖小镇这个公厕建成多年为何不投入使用?管理部门回应
全球首台每秒200亿亿次的超级计算机安装完成|天天快消息
中国空军7月下旬将在长春举行空中表演等活动 报资讯
环球观点:陕西合阳:黄花菜迎丰收
第七章 关键点的交易步骤_环球要闻
当前播报:2023上海师范大学拟录用人员公示
美国大学生“后悔”专业排行榜:新闻第一,教育、市场营销也在前十-今日热搜
环球今热点:劳动用工形式当前劳动力就业形式分析
联想游戏本蓝屏了怎么解决-环球即时
苹果泡椒凤爪的做法?
适合烫火锅的食材有哪些
显示器三种面板的区别
睡觉、看手机、违停……昆明的网约车乱象 该如何破解?
最新:陕西省延长县发布冰雹橙色预警
luffy是什么意思 Luffy|天天头条
四川省德阳市质检所高质高效服务获赠锦旗
南京高科:6月26日融资买入1020.52万元,融资融券余额3.81亿元_新要闻
甘肃定西:旱塬正在变良田 快消息
为生命让行 折射人间大爱
从来都不缺“桃花”的四大生肖,魅力十足,天生就有异性缘!
筑牢防线 守护青春——河南省扎实开展青少年毒品预防教育工作综述 天天快看点
关于男生身体的冷知识!每一个都震惊到我
世界要闻:普通话话题三分钟范文_普通话话题
打仗的游戏手机版_打仗的游戏_世界速读
世界热文:浙江印发5G全连接工厂建设三年行动方案
“只有安全入心,行车才能平稳”
全球视点!中国概念股收盘:优信涨超12%,金融壹帐通暴跌33%、趣活跌超10%
公司工商注销后银行账户还能用多久