根据财务报销的基本规定，所有的报销单据应当是真实、合法的，且需要有税务部门监制的发票或财政部门监制的收据。如果纸质发票无发票章，那么它不符合正规报销凭证的要求。因此，对于这种情况的整改措施如下：

1. 财务部门应要求提供发票的单位或个人提供有效的、带有发票章的正规发票。如果无法取得有效的发票，这笔费用不应被报销。

2. 如果是由于特殊原因无法获取有发票章的发票，可以尝试联系开票单位要求其提供带有发票章的正确发票。如果确实无法从开票单位获得有效发票，那么这笔费用应通过正式的内部审批流程，经过管理层的特别批准后，才可能作为例外情况进行报销。但这不意味着无发票章的发票成为常态。

3. 加强内部财务管理制度，确保所有报销的单据都符合财务规定，避免类似问题的再次发生。

4. 对于已经报销的无发票章的纸质发票，如果金额较小，可能选择作为异常情况特殊处理，但应记录在案，以备审计时解释。如果金额较大，可能需要进行调整，将该笔费用调整到下个会计期间，直至取得有效发票后再进行报销。

请注意，无发票章的发票不应作为正常的报销凭证，企业应建立严格的财务报销政策，防止此类情况的再次发生。