Влияет.
Но тут надо понимать, что, во-первых, души сами по себе все же не совсем то же самое, что конкретный человек. А вторых, один дементор получается из многих душ. Они в нем спрессованы и переплетены.