Se debe definir el inicio de la variable i en i=0 que es la posición del primer arreglo:
<script>
var heroes = ["Superman", "Thor", "Batman", "Mujer Maravilla"];
for( var i = 0; i < heroes.length; i++) {
alert(heroes[i]);
</script>
}