在您的情况下，起诉离婚是合理的选择。首先，您需要准备相关证据，包括结婚证、您丈夫的拘留证明、以及他出轨的证据。这些证据将有助于在离婚诉讼中证明婚姻关系的破裂。 在财产分割方面，您提到的30多万用于建房的资金和6万多的债务，需要根据实际情况进行评估和分割。通常，夫妻双方在婚姻期间共同取得的财产，离婚时应平均分配。但是，如果能够证明一方有重大过错，如出轨或犯罪行为，无过错方可能会获得更多的财产分配。 此外，您丈夫因容留他人吸毒被拘留，这可能影响他的信誉和经济状况，也可能影响到财产分割的结果。在上饶县提起离婚诉讼时，您可以考虑聘请一位专业的律师，他们将能够提供更具体的法律建议和帮助您准备诉讼材料。 请注意，离婚诉讼可能会涉及到复杂的法律程序和情感问题，因此在整个过程中保持冷静和理智是非常重要的。同时，确保您的权益得到最大程度的保护。