넷째, 인권영향평가가 모든 법령, 모든 정책, 모든 사업에 동일한 방식으로 일정한 수준에서 시행되는 것은 현실적으로 불가능하다는 점을 고려하여야 한다. 각 법령, 정책, 사업의 성격, 범위, 규모 등에 따라 구분하여 실시될 수 있도록 정교한 설계가 필요한 것이다. 이와 관련하여 어느 정도의 경향적 원칙을 생각해 볼 수 있다. 즉 인권과 관련하여 보다 중요한 법령이나 정책 등에는 보다 많은 이해관계자와 인권전문가, 참여자가 평가에 참여할 수 있어야 한다. 물론 인권영향평가를 시행할 때마다 매번 외부의 인권전문가와 내부 전담인력, 이해관계자들이 참여할 수 없으므로 중요도에 따른 단계별 조정도 필요하다. 이러한 인권영향평가의 중층적 시행을 위해서는 평가 주체의 인권의식과 제도에 대한 이해, 제도시행능력이 전제되어야 한다. 전체 구성원을 대상으로 인권영향평가에 이해도와 인권의식을 제고할 수 있는 제도적 지원이 함께 이루어져야 하는 이유이기도 하다.
인권영향평가는 정교한 설계가 필요하기 때문에 많은 이해관계자가 평가에 참여할 수 있어야 한다. 또한, 전체 구성원을 대상으로 인권영향평가에 이해도와 인권의식을 제고할 수 있는 제도적 지원이 함께 이루어져야 한다.