我名下一套房屋进行交易，之前都比较顺利，但在最后房屋里的一个户口过户是出现了问题，此房屋里有一个我外婆的户口，本来想迁移到我的住房内，但被当地户籍警告知要么老人亲自过来办手续，但老人82岁且中风瘫痪半身不遂，不能移动；要么提供关系证明，我父母离异多年且我与母亲也多年未有联系，无法提供关系证明。房屋买卖合同中9.15过户，规定此前要把户口迁出，我于9.12日去当地派出所办理，被户籍警告知户口迁移需买家拿到房产证后去派出所办理户口迁入公共户口的手续，得知无法办理后我及时与房产中介取得联系并告知买家，此时还未到合同中约定的过户时间。不料房产中介未能及时与买家沟通也没有与我沟通，导致一个月后买家以违反合同规定要我赔偿违约金。请问此事该如何操作下去？