不可以超过建筑控制线。根据查询福州市政府官网显示，福州地下室要求不可以超过建筑控制线，建筑红线，也称“建筑控制线”，指城市规划管理中，控制城市道路两侧沿街建筑物或构筑物（如外墙、台阶等）靠临街面的界线，任何临街建筑物或构筑物不得超过建筑红线。建筑推线是指建筑控制线与规划地块边界的后退距离，主要包括建筑退用地界线、建筑后退道路红线、建筑后退河道水体蓝线和建筑后退绿线。