彩钢门窗上的粘纸可以使用以下方法进行清洗：

将门窗上的粘纸撕下，用手或者工具将残留的胶水擦拭掉。

在门窗表面喷洒少量清洁剂，如玻璃清洁剂或者家用清洁剂。

用柔软的海绵或者布擦拭门窗表面，注意避免使用硬质刷子或者磨砂布，以免刮伤门窗表面。

如有需要，可以使用专业的清洗剂进行清洗，但是需要注意选择适合彩钢门窗的清洗剂，并按照清洗剂的使用说明进行操作。

清洗完毕后，用清水冲洗门窗表面，然后用干净的布擦干门窗表面，确保门窗表面干燥无水迹。

需要注意的是，在进行彩钢门窗清洗时，应该避免使用酸性清洗剂或者腐蚀性清洗剂，以免对门窗表面造成损伤。同时，在清洗过程中，也应该注意保护自己的安全，避免使用过多的清洗剂或者过度擦拭，以免造成不必要的伤害。