Unity VR UI Не корректная работает On Click

Делаю приложение на Unity для VR, разрабатываю меню, поставил панель с кнопками, запихнул в On Click скрипт с функцией обработчиком, но кнопка прожимается с рандомной попытки. Можно и раз 100 нажать, собственно вопрос как сделать так чтобы нажатие сразу срабатывало? Само нажатие кнопки на контроллере регистрируется (отследил через дебаг), а по кнопке меню реагирует рандомно.