Сегодня «дойти до ручки» значит оказаться в критическом положении. А вот раньше ручка была не частью двери, а последним кусочком каравая, который оставался бедняку.