もともと和語では「倍」＝×2なんで、人一倍ってのは「人に一回、×2をする」なわけ。一倍＝×1ってのは算数の上での定義。