清理建筑油膏时，应先采用物理方法去除大部分油膏，再使用化学溶剂辅助清洗，最后彻底冲洗并擦干表面。

在清理建筑油膏的过程中，首先要做的是利用吸附性好的材料，如卫生纸或面纱，吸走表面多余的油膏。这一步能有效减少后续清洗的难度和工作量。接着，可以选择使用汽油、香蕉水或油漆稀料等化学溶剂来进一步清洗油膏残留。这些溶剂对油膏有较好的溶解能力，但使用时需特别注意安全，确保通风良好，并远离火源，以防发生火灾。

使用溶剂清洗时，可配合猪毛刷等工具进行刷洗，以增强清洗效果。刷洗过程中，要注意力度适中，避免对建筑材料表面造成损伤。清洗完毕后，再用干净的卫生纸或抹布擦拭清洗过的位置，以去除残留的溶剂和油膏痕迹。

如果清洗后仍有细微的油膏痕迹难以去除，可以尝试使用牙刷蘸取少量牙膏进行刷洗。牙膏中的摩擦剂和清洁剂成分有助于去除顽固污渍，但同样需要注意力度控制，避免划伤表面。

最后，用清水彻底冲洗清洗过的区域，确保所有溶剂和残留物都被冲洗干净。冲洗后，用干净的棉布或毛巾擦干表面水分，保持建筑材料表面的干燥和清洁。在整个清理过程中，建议佩戴手套和口罩等防护用品，以减少对皮肤和呼吸道的刺激。

需要注意的是，不同类型的建筑油膏成分和性质可能有所不同，因此在选择清洗方法和溶剂时，最好先了解油膏的具体成分和特性，以便采取针对性的清理措施。同时，对于某些特殊材料或表面处理过的建筑材料，在清洗前最好先进行小范围试验，以避免造成不必要的损害。