必须。根据查询《国家税务总局关于修订〈增值税专用发票使用规定〉的通知》第十二条信息显示，纳税人销售货物或者提供应税劳务可汇总开具专用发票，所以办公用品发票是必须要开具清单的。