清明户外露营时如果手被毛毛虫咬了，可以冰敷，但需要注意以下几点：

1. 及时处理伤口：首先要用大量清水冲洗被咬部位，以去除可能残留的毒液、毒毛或刺激性物质。如果有条件，可以使用碱性溶液如肥皂水等进一步清洗，有助于中和毒素。

2. 正确进行冰敷：在清洗伤口后，可以用冰袋或冷毛巾对伤口进行冰敷。冰敷能够刺激毛细血管收缩，减少炎症渗出，从而缓解肿胀、疼痛等症状。但要注意避免直接将冰块接触皮肤，以防冻伤，建议用毛巾包裹冰块后再敷。每次冰敷的时间不宜过长，一般10-15分钟为宜，然后休息一段时间，可每隔1-2小时再次冰敷。

3. 观察症状变化：在冰敷的要密切观察伤口的情况，包括是否有红肿加重、疼痛加剧、瘙痒难忍、皮疹扩散等症状。如果出现这些情况，可能是过敏反应加重或其他并发症的表现，应及时就医。

4. 合理用药：如果疼痛明显，可以在医生的指导下口服非处方止痛药，如布洛芬缓释胶囊、对乙酰氨基酚片等。也可以涂抹一些外用药物，如炉甘石洗剂、丁酸氢化可的松乳膏等，具有抗炎、止痒的作用。

清明户外露营时手被毛毛虫咬了可以冰敷，但这只是缓解症状的一种方法，还需要结合其他措施进行处理，并注意观察症状变化，如有异常应及时就医。