Como saber si tú matrimonio es bueno

Tengo 4 años de casada. Me gusta físicamente mi esposo nos llevamos muy bien. Pero tenemos como 5 relaciones sexuales al año y no quiere tener hijos porque es muy difícil.
Tiene sentido estar casada asi, una amiga me comentó que eso era una amistad y que pensara en divorciarme. 
Que opinan?