首先，根据《老年人权益保障法》的规定，子女应当尊重老年人的意愿和选择，并提供必要的生活照顾和支持。因此，在这种情况下，您们可以考虑与老人进行沟通，了解他的真实需求和感受，然后共同协商解决办法。 如果您认为老人不愿意回到自己家中，可能是因为他不习惯新环境或者担心某些事情，您可以尝试通过各种方式让老人感受到家的温暖，比如邀请他参加家庭活动、带他参观自己的家等。 同时，关于老人居住条件的问题，建议您们寻求专业的帮助，如找专业人士评估房屋安全性和适老化改造方案，确保老人的安全和舒适。 在处理这个问题时，双方应保持沟通渠道畅通，尽量避免情绪化，理性解决问题。如果无法自行解决，可以考虑聘请律师介入，协助调解或提起诉讼。 在诉讼过程中，您需要准备好相关的证据材料，如医疗证明、证人证言、影像资料等，以便为您的主张提供有力的支持。此外，还需要准备充分的答辩状以及支持你的理由和证据，以应对对方的反驳。 总之，处理这样的情况需要耐心和理解，希望您能够妥善处理，保护好老人的权益。