清明户外露营时手被马蜂咬了，可以按照以下步骤进行处理：

1. 立即远离蜂巢：避免再次被蛰。马蜂在感到威胁时会群起而攻之，所以应尽快离开蜂巢附近区域。

2. 检查伤口并取出毒刺：仔细查看伤口处是否有残留的毒刺。如果有毒刺，不要直接用手挤压或拔除，以免更多的毒素进入体内。可以用镊子小心地将毒刺夹出，确保毒刺完全取出。

3. 清洗伤口：用清水、生理盐水、苏打水或肥皂水等冲洗伤口，以减少毒素的吸收和减轻疼痛。如果没有这些液体，也可以用自己的尿液冲洗伤口，但要注意保持伤口清洁。

4. 冷敷：用冰块或冷毛巾敷在伤口处，每次15-20分钟，每天数次，有助于减轻疼痛和肿胀。

5. 涂抹药物：可以在伤口处涂抹一些具有消炎止痛作用的药膏，如红霉素软膏、夫西地酸乳膏、止痛消炎软膏等，以预防感染。也可以使用风油精、玉露散、无极膏等缓解疼痛和不适感。

6. 口服药物：如果出现疼痛、瘙痒等症状，可以服用一些抗过敏药物，如扑尔敏、息斯敏等。如果疼痛剧烈，也可以服用一些止痛药物。但请注意，在使用任何药物之前，最好先咨询医生或药师的意见。

被马蜂蛰后要密切观察身体状况。如果出现呼吸困难、呼吸声音变粗、带有喘息声、头晕、恶心、呕吐等全身性症状，应立即就医。即使症状较轻，也建议在医生的指导下进行治疗和观察，以确保安全。