一般情况下，4个月婴儿脚底出汗冰凉可能是新陈代谢旺盛、流汗过多、食物摄入过少等原因导致的，可以通过物理治疗缓解症状。具体如下：

1.新陈代谢旺盛：因为婴儿年龄小，新陈代谢比较旺盛，一旦气温过高或者衣服穿得过多，可能会导致脚底出汗冰凉的症状。可以将婴儿放置在适宜的温度环境中，或者根据气温适当的给婴儿添减衣物。

2.流汗过多：若婴儿流汗过多，血容量减少的话，可能会出现脚底出汗冰凉的症状，可以给婴儿多喂点温开水，同时需要监测体温。

3.食物摄入过少：若婴儿食物摄入过少能量供应不足，可能会出现了低血糖的症状，从而出现脚底出汗冰凉，这时对婴儿来说比较危险的。需要给婴儿喂热牛奶或者糖温水，进行能量补充。

若4个月婴儿脚底出汗冰凉的症状得不到缓解，应及时就医。