否，小火龙鱼不能用自来水养。自来水含有氯和氯胺等消毒剂，这些化学物质对小火龙鱼的鳃和皮肤有害，会导致压力、疾病甚至死亡。

理想情况下，小火龙鱼应该用经过反渗透或蒸馏处理的软水饲养，并定期更换以保持水质清洁。