Вот именно,из-за ассоциации "крайний=виноватый". А так никакого другого смысла нет в этом слове,оно означает лишь "то,что с краю". А "кто последний?"-тоже неверно получается,потому что,если кто-то подошел и спрашивает об этом,то последний-как раз тот,кто спрашивает. Тогда ему следует спросить так:"Я последний. Кто передо мной?"или "За кем мне можно занять очередь?"