要确定4兆瓦全额上网所需的升压站大小，需要考虑多个因素，例如输电距离、电压等级、变压器容量等。通常，一般需要建造一个至少容量为6兆伏安的主变压器，并配备电力设备如开关设备、断路器等。此外，还需要进行电力输送线路的规划和设计，以确保输电过程中不会有能量损失的问题。综上所述，4兆瓦全额上网需要的升压站容量不会少于6兆伏安，实际规模还需根据具体情况进行裁定。