Debian kommt standardmäßig mit nvi als Editor daher. Seit ich den gegen den vim ausgetauscht habe, geht nun auch meine Backspace-Taste und meine Cursortasten wie ich das erwarte :).
Danke, Marcus, für den Tipp gestern.
Merke:
apt-get remove nvi && apt-get install vim