物质的化学性质是指在化学变化中表现出来的性质，物质的物理性质是指不需要通过化学变化表现出来的性质．
【解析】
A、用碳酸氢钠治疗胃酸过多，是利用了碳酸氢钠能与胃酸发生化学反应，需要发生化学变化就能表现出来，是利用了其化学性质，故选项错误．
B、用大理石作建筑材料，不需要通过化学变化才表现出来，是利用了其物理性质，故选项正确．
C、用熟石灰改良酸性土壤，是利用了熟石灰能与酸发生化学反应，需要发生化学变化就能表现出来，是利用了其化学性质，故选项错误．
D、用稀盐酸除去铁锈，是利用了稀盐酸能与铁锈发生化学反应，需要发生化学变化就能表现出来，是利用了其化学性质，故选项错误．
故选B．
