如果室外马桶下水管冻结，可以尝试以下方法来解决问题：

1. 使用热水袋：将热水袋或热水瓶装满热水，然后放置在下水管周围，热水的温度可以帮助解冻。

2. 使用热毛巾：用热毛巾包裹住冻结的下水管部分，保持一段时间，热量可以加速解冻。

3. 使用吹风机：使用吹风机将热风吹向冻结的下水管，同时小心避免吹风机进水。热风可以加快解冻。

4. 使用盐水：将温水与盐混合，然后将盐水倒入下水管中，盐水的低冰点可以帮助解冻。

5. 食用酒精：将适量的食用酒精倒入下水管，酒精的低温抑制了冰的形成，有助于解冻。

如果以上方法无效，建议寻求专业的管道维修人员或水暖服务商的帮助来解决问题。同时，也要注意在寒冷的天气里保持室外设施的温暖，例如使用保温材料包裹下水管道，以预防冻结。