Creo que si el dinero es de los dos, la cuenta debe poner claramente los dos nombres. Saca dinero en efectivo y gasta como quieras. Eso sí, al tener hijos y ajustarse más lo lógico es pactar ciertas cantidades para caprichos. No sé, si realmente te sienta tan mal que vea tus gastos, algo falla ahí
también él que se ha equivocado: le has comentado tu preocupación y en vez de comprender, dar su punto de vista y buscar una solución, se ha puesto como un loco. Ese es el problema, y no depender uno del otro unos años, que es normal en un matrimonio.