新【新手报到】楼下住个精神病怎么办？

九月中旬老公通过中介租的房子，五楼，十月初我带着孩子（十三个月）从老家来到老公这里，孩子调皮，玩具有时往地下扔，声音大了点，楼下就开始骂，好难听，还使劲的敲墙，我老公去找中介，中介说我们楼下住的老头有精神病，自己住，没办法，找房东，房东开始还说来和楼下谈谈，后来就不露面了，租房子是半年的合同，租金是压一付三，想换房子又怕交违约金，我们资金比较紧缺，亲们有什么好的办法？