El problema está en que la función se colocó con los paréntesis.
<button id="boton">Haga clic</button>
<script>
var boton = document.querySelector('#boton');
function botonHandler() {
alert('Hicieron clic en el Botón');
}
boton.addEventListener('click', botonHandler());//aca esta el error.
</script>