我们这楼是原来住平房搬过来的,楼上楼下都是老街坊,楼下的住户总说我们有走路声音,而且很大。我们没有故意特别大声的走路啊,就是正常的走路,而且也穿得拖鞋,总不能不让我们走路吧?他们上来找了几次之后我们也找了找问题,还买了新拖鞋,大家都尽量减轻走路的声音。之前还好,这两天天天上来找茬,跟神经病似的,还骂人,要动手。白天我父母在家,他们总上来找茬弄得我母亲这些天血压高。我们走路楼下有声音是我们的问题吗?调解没用能怎么办?