Попробуй посмотреть в сторону View с pointerEvents none или иным значением над областью, которую надо закрыть. Мб получится
Попробовал на View, он перестал реагировать на взаимодействия с самим View и всеми child’ами, но Swiper свайпается
У меня внутри View - Swipeable Cards, которая тоже двигается как аналогия с тиндером, где переходить между экранами свайпая можно только над самим cards