Devo continuar casada!?

Tenho 43 anos, casada há 20 anos e uma filha de 19, meu marido é mais de 20 anos mais velho do que eu. há 10 meses eu comecei a me envolver com um homem casado, ele tem 40 anos. Nos conhecemos e desde que ficamos juntos não tenho mais nenhum contato íntimo com meu marido e queria me separar, porém não tenho coragem de conversar com meu esposo. Tenho me encontrando ckm essa pessoa sempre e nos falamos diariamente, já tentei acabar com esse caso pq eu não me sinto bem fazendo onque estou fazendo. Ficamos 1 semana sem nos falar, porem ele volta a me procurar e eu vou cedendo. Estou muito envolvida tanto pela parte do sexo quanto pela atenção que ele me dá! Meu casamento é um tédio e eu fico extremamente irritada com a presença do meu marido, quando estamos juntos eu procuro briga por tudo e nem tenho vontade de voltar para casa. Enfim, eu sei que esse relacionamento não vai ser algo sério já que essa pessoa tem a vida dele. Eu acho que o meu casamento acabou e eu tinha muita vontade que meu marido fosse embora de casa. Porém eu não quero magoá-lo e penso muito ele ele ficar sozinho já que em casa ele tem a companhia da nossa filha. Não sei o que fazer sinceramente. Estou muito triste com tudo isso. Só queria que as coisas voltassem a ser normais . Quando estou com a outra pessoa eu sou muito feliz, porém a culpa me persegue.