第五届 CVPR DataCV 竞赛重磅来袭！挑战视觉错觉，测试 VLM 的“火眼金睛”！

第五届 CVPR DataCV 竞赛重磅来袭挑战视觉错觉测试 VLM 的“火眼金睛”大家好第五届 DataCV 挑战赛5th DataCV Challenge将在CVPR 2026 DataCV Workshop期间隆重举办随着多模态大模型LMMs/VLMs的爆发虽然它们在许多任务上表现惊人但它们真的“看”懂了这个世界吗本次竞赛聚焦于以数据为中心的 VLM 鲁棒性评估特别是针对视觉错觉Visual Illusions和感知异常Perceptual Anomalies场景。如果你对Prompt Engineering、In-Context Learning感兴趣或者想看看顶级大模型是否会被人类的“视错觉”骗过千万不要错过这次机会 竞赛背景眼见一定为实吗数据是计算机视觉和多模态 AI 的燃料。目前的 SOTA 系统不仅依赖于强大的架构更依赖于全面的数据集。然而社区往往过于关注算法Algorithm-centric而忽视了对数据集本身的深入理解Data-centric。本次竞赛的核心目标是在不进行任何模型训练或微调No Training / Fine-tuning的前提下通过设计策略提升 VLM 在视觉错觉下的鲁棒性。我们挑战的是冻结的模型Frozen VLM 聪明的策略Prompting/ICL。 任务概述两大核心赛道本次挑战赛分为两个核心任务旨在全面评估 VLM 的感知能力Task I: Classic Illusion Understanding经典错觉理解任务内容针对经典的几何光学错觉图片如艾宾浩斯错觉等回答二分类问题。输入形式一张错觉图片 一个是非题Yes/No。例子图中两个橙色圆圈的大小一样吗目标最大化准确率同时保持对受控视觉变化的敏感度。核心玩法设计高效的 Prompt 或 In-Context Learning (ICL) 策略。Task II: Real-World Visual Illusions and Anomalies现实世界错觉与异常任务内容针对现实场景中的视觉错觉和异常回答多项选择题。输入形式一张图片 一个包含问题及选项A/B/C/D的 Prompt。例子图中有多少根手指目标在多样化的错觉场景下选择唯一的正确选项。核心玩法允许设计任何形式的推理策略只要不训练模型。 重要日期 (Timeline)本次比赛时间紧凑请大家留意以下AoE (Anywhere on Earth)时间节点验证阶段 (Validation Phase)⏰ 2026年2月6日 - 3月2日说明熟悉数据集进行初步开发。每天最多提交 3 次。测试阶段 (Test Phase)⏰ 2026年3月3日 - 3月10日说明最终决战仅此阶段成绩计入排名。提交后立即出分。Workshop 论文投稿截止⏰ 2026年3月4日 (AoE) 竞赛资源与链接Codabench 竞赛官网报名与提交Task I (Classic Illusion): 点击直达 Task 1 比赛页面Task II (Real-world): 点击直达 Task 2 比赛页面GitHub (代码框架与指南)️Task I 仓库: 点击访问 GitHub (Task 1)️Task II 仓库: 点击访问 GitHub (Task 2)DataCV 2026 Workshop 主页: 点击访问 Workshop 官网 为什么参加CVPR 2026 顶级 Workshop获奖团队有机会在 Workshop 上展示成果。零样本挑战无需昂贵的训练算力比赛禁止训练模型完全比拼 Prompt 设计和推理策略CoT, ICL 等对学生党和资源受限的团队非常友好。前沿课题视觉错觉是目前 VLM 评估中最有趣也最具挑战性的方向之一。 组织团队本次竞赛由来自Stanford University, Zhejiang University, Shandong University等机构的研究者联合组织。不要错过这个机会欢迎加入我们一起探索多模态大模型的认知边界感谢您的关注与支持我们期待您的参与如有疑问请通过邮件联系我们datacv2025gmail.com