En mi opinión, creo que la respuesta es simple.
El "castigo" de -1 punto de reputación existe para evitar que los usuarios voten en contra sólo para perjudicar a algún usuario en particular, o para que su propia respuesta tenga más visibilidad o porque simplemente estaba enojado con el mundo y quiso votar en contra.
Un punto en negativo tiende a lograr con bastante éxito evitar que el voto en contra se use "porque sí", pero prácticamente no tiene significancia en tu rep (es sólo un punto, lejos de ser realmente relevante).
Por estos motivos, no veo el problema en que exista este -1, es más, estoy de acuerdo completamente con que sea de esta forma.