Управление камерой прекращается при попадании якоря под курсор

Всем привет
Собственно САБЖ - при вращении камеры если встречается якорь он срабатывает ( ожидаемо конечно. да)) А как бы избавиться от этого эффекта? Так чтобы якоря реагировали только на клик или тап. Не реагируя на курсор который проходит над якорем при управлении камерой?
Когда в сцене много якорей - создается ощущение жестких лагов.

Спасибо!