HuggingFace Daily Papers· Kesav Kumar Jayakumar, Karthigeyan Thilak·· 7 天前AI 评分35
Token-Set 选择干扰 POPE:VLM 幻觉评估中 Yes/No 提取的系统审计
Token-Set Choice Confounds POPE: A Systematic Audit of Yes/No Extraction in VLM Hallucination Evaluation
AI 导读
研究发现 LLaVA-1.5-7B 在 POPE 基准上的 F1 分数受 token 读取方式影响,使用 8 个 token 查询时 adversarial 分数达 0.8713,比原方法高 6.13 点。该干扰效应跨四个 VLM 和三个分词器家族普遍存在, tokenizer 派生的读取方式能保持 0.80-0.92 的 F1 分数。
来源:HuggingFace Daily Papers · arxiv.org