다수에게 실시간으로 페어링된 가상 의료 영상을 안전하고 정밀하게 제어할 수 있는 증강 현실 기반 원격 의료 시스템 및 그의 제어 방법 및 프로그램에 관한 것으로, 사용자에 장착되어 증강 현실 기반의 가상 의료 영상을 제공하는 디스플레이, 상기 가상 의료 영상을 제어하는 사용자의 제어 동작을 획득하는 카메라, 그리고 상기 디스플레이 및 카메라를 제어하는 프로세서를 포함하고, 상기 프로세서는, 상기 가상 의료 영상에 상응하는 사용자 제어 동작 범위를 결정하고, 상기 가상 의료 영상을 제어하는 사용자의 제어 동작이 획득되면 상기 사용자의 제어 동작이 상기 결정된 사용자 제어 동작 범위 초과인지를 판단하며, 상기 사용자의 제어 동작이 상기 사용자 제어 동작 범위를 초과하면 상기 사용자 제어 동작 범위를 초과한 사용자의 제어 동작을 무시하는 것을 특징으로 한다.