Одно из предположений - жест сей (указать пальцем) в давние времена использовался лишь в случае необходимости указать на злодея, врага, а посему он считается не уместным и по ныне в обиходе, за исключением исходного значения, вооот.
(пояснение отца - любителя истории и религий)