我弟弟和我一个朋友的老婆发生了性关系…

我弟弟和我一个朋友的老婆发生了性关系,(他们是在双方自愿的前提下,我弟弟没有强迫她),现在他老公以发生这样的事情来向我弟弟要4000元。我弟弟就给了他钱,但是他现在又要20万元,我们不愿给,他说要打官我弟弟和我一个朋友的老婆发生了性关系,(他们是在双方自愿的前提下,我弟弟没有强迫她),现在他老公以发生这样的事情来向我弟弟要4000元。我弟弟就给了他钱,但是他现在又要20万元,我们不愿给,他说要打官司,请问这种官司我们能赢吗?如果不能赢,最多需要赔偿多少钱?谢谢了,帮我参考一下