谷歌大脑最新操作玩“复古”:不用卷积注意力,图像分类接近SOTA

  发布时间:2026-11-16   作者:玩站小弟   我要评论
谷歌maps群发程序|软件【tg:seogoogle987】。

本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转谷歌载请联系出处。

谷歌大脑的视觉Transformer团队(ViT),大脑搞了个复古操作。

他们不用卷积神经网络(CNN)、也不用Transform最新er,仅凭最早的AI视觉任务采用的多层感知机(MLP)结构,就实现了接近操作SOTA的性能,更是在ImageNet图像分类任务上取得了87玩“.94%的准确率。

这个架构名为MLP-Mixer,采用两种不同类型的复古MLP层,可以看做是一个特殊的CNN,使用 1×1卷积进行通道混合(”:按位操作),同时全感受野和参数共享的的单通道深度卷积进行字符混合不用(跨位操作)。

在JFT-300M数据集上预训练、微调到224分卷积辨率的Mixer-H/14版本取得了86.32%的准确率,比SO注意TA模型ViT-H/14仅低0.3%,但运行速度是其2.2倍。

论文地力,址:
https://arxiv.org/abs/2105.016图像01

项目地址:
https://github.com/googl分类e-research/vision_transformer/tr接近ee/linen

 

  • Tag:

相关文章

  • 人工智能有能力部署到的几个应用

    人工智能已经统治世界很多年了,不同领域的主要问题都是通过人工智能来解决的,这当然是值得一提的。几十年前,该技术还不够先进,无法满足业务需求和问题。但随着人工智能的出现,情况变得更好了。人工智能在几乎所
    2026-11-16
  • 标签: AIVELA AIVELA_Ring_Pro 智能戒指 AI可穿戴

    云梦级6月29日云梦级消息,近日,消费级智能硬件品牌“AIVELA”宣布完成数百万美元天使轮融资,本轮由线性资本领投,锋领资本跟投,URTOPIA等产业方共同加注,将打造面向全球市场的AI可穿戴品牌。
    2026-11-16
  • 标签: 科大讯飞 AstronClaw 讯飞AI眼镜 RobotClaw

    2026年4月15日,科大讯飞AstronClaw升级发布会正式举办。本次发布会以”眼前可见,未来无限”为主题,集中发布9项创新产品,首次完整展示”软硬一体”AIAgent架构体系,标志着AI智能体正
    2026-11-16
  • 标签: 英伟达 DLSS5 黄仁勋 GTC2026 标签

    云梦级3月17日云梦级消息,3 月 17 日召开的 2026 年 GPU 技术大会(GTC)上,英伟达首席执行官黄仁勋在主题演讲中,展示了 DLSS 5 技术,并宣布该技术将于今年秋季上线。 黄仁勋表
    2026-11-16
  • 横店炮王霍建华什么梗

    叶璇霍建华为什么分手?[精]2014年6月,有自称“横店影视城演员”爆料,指叶璇正牌男友其实是霍建华,两人秘恋不到1个月,还说霍是因不满和叶璇“女尊男卑”关系才分手。而不管是什么原因,现当事人。霍建华
    2026-11-16
  • 标签: 小红书 电商 商业化 欧迪

    云梦级2月26日云梦级消息,据申妈的朋友圈报道,2月26日,小红书商业化&电商团队进行架构调整,总体原则是广告侧和交易侧组织分开,更加聚焦。 同时,多名小红书商业化&电商团队的L2(大概对标阿里P9-
    2026-11-16

最新评论