要把贴在暖气炉壁上的煤灰去掉，首先应该先准备好工具，例如可以使用扫帚、刮板、湿布等。

然后，将暖气炉停止使用并等待其冷却后，再用扫帚将表面的大块煤灰清理干净，接着使用刮板在壁上进行慢慢刮除。

如果还有残留，可以使用湿布擦拭，但要注意湿布不宜太湿，以免刮掉墙壁的油漆。此外，为了避免煤灰再次粘壁，建议经常清理暖气炉，保持环境卫生。