応じる義務などとはいうものはそもそもありませんし、あなたが拒否する限り夫が離婚を成立させるためには離婚訴訟で勝訴する必要があります。離婚訴訟で離婚の判決を得るためには法的な離婚原因ありと認定される必要がありますが記載のような事情で簡単に認められるものではありません.細かい事情にもよりますが不貞により不仲となったと主張立証可能なら夫は有責配偶者となるところ、有責配偶者からの離婚請求は原則裁判所は認めません(そのような趣旨の最高裁判例があります)。
したがって、ネットにて一概に言えるものではありませんが夫の有責性の立証が可能なら、とことん夫の請求を拒否し続ければ離婚は成立しない可能性が高いでしょう。
調停は欠席し続ければいずれ不成立となり、夫が離婚訴訟を起こせば上記のとおり不貞の立証がポイントになるでしょう。欠席するのが良いかは微妙なところですが、不貞のある程度確実な証拠があるなら無視して特に問題はないと思います。私見としては出席のうえ、あなたの意向や言い分くらいは伝えておいたほうが良いとは思いますし、調停委員を通じてあなたの意思が堅いことや判例により離婚成立が厳しいことが夫に伝われば少なくとも早期の離婚は諦めるかもしれません(証拠の有無・内容など手の内まで明らかにする必要はありませんが)。
以上の点は具体的な証拠の内容や事実関係がどのようなものか確認しないと正確なところは分かりませんので、より具体的なところはお近くの弁護士や相談会等で直接相談されることをおすすめします。