不会爆炸，铯在空气中就自燃，因此与水反应肯定要隔绝空气，这样生成的氢气就不会燃烧爆炸了。
铯和水反应很剧烈，即使隔绝空气，生成的氢气不被点燃，在反应热的作用下膨胀即可直接导致物理性爆炸。如果要不爆炸，只能是极低温度下和固态水反应的情况。====[原创回答团]
