InfLLM-V2: Dense-Sparse Switchable Attention for Seamless Short-to-Long Adaptation
Weilin Zhao · Zihan Zhou · Zhou su · Chaojun Xiao · Yuxuan Li · Yanghao Li · Yudi Zhang · Weilun Zhao · Zhen Li · Yuxiang Huang · Ao Sun · Xu Han · Zhiyuan Liu
首次获取该候选人的完整档案及 StartLux 评估共 20 积分;每位用户单独解锁,之后查看免费。主动刷新 20 积分。
实时查找电子邮箱,费用不超过20积分;未找到邮箱不扣费。
Weilin Zhao · Zihan Zhou · Zhou su · Chaojun Xiao · Yuxuan Li · Yanghao Li · Yudi Zhang · Weilun Zhao · Zhen Li · Yuxiang Huang · Ao Sun · Xu Han · Zhiyuan Liu
Tianyu Yu · Zefan Wang · Chongyi Wang · Fuwei Huang · Wenshuo Ma · Zhihui He · Tianchi Cai · Weize Chen · Yuxiang Huang · Ranchi Zhao · Bokai Xu · Junbo Cui · Yingjing Xu · Liqing Ruan · Luoyuan Zhang · Hanyu Liu · Jingkun Tang · Hongyuan Liu · Qining Guo · Wenhao Hu · Bingxiang He · Jie Zhou · Jie Cai · Ji Qi · Zonghao Guo · Chi Chen · Guoyang Zeng · Yuxuan Li · Ganqu Cui · Ning Ding · Xu Han · Yuan Yao · Zhiyuan Liu · Maosong Sun
Yuxiang Huang · Mingye Li · Xu Han · Chaojun Xiao · Weilin Zhao · Ao Sun · Ziqi Yuan · Hao Zhou · Fandong Meng · Zhiyuan Liu
The efficiency of long-video inference remains a critical bottleneck, mainly due to the dense computation in the prefill stage of Large Multimodal Models (LMMs). Existing methods either compress visual embeddings or apply sparse attention on a single GPU, yielding limited acceleration or degraded...