应该缴纳而拒绝缴纳社会抚养费的当事人,直接的法律后果是由县级计生行政管理部门依法申请人民法院强制执行。对违反现行生育政策不符合法定条件生育子女的当事人征收社会抚养费,这是现行计划生育法律法规的规定,政府职能部门必须切实维护。因此,无论在什么时候,当地的计生行政管理部门一经发现违法生育当事人的子女的,查实后,即可作出行政征收决定,而作为违法生育子女的当事人,必须承担违法生育的法律责任,履行法律义务,缴纳社会抚养费。如果当事人拒绝缴纳的,计生部门可以依法申请人民法院强制执行。
在法院实施强制执行中还拒不缴纳的,法院可依法查封你的相关资产、对你们夫妻进行司法拘留、将你们纳入失信被执行人名单,依法对进行信用惩戒等等。
希望我的回答能让你意识到些什么。