1. Последовательность скриптов/команд в файле не соответствует последовательности настройки в ROS. (интерфейс листы и PPP профиль задействуются до объявления)
2. Для чего в ppp профиле клиента директива only-one=yes?
3  В правиле №318 ошибка в имени интерфейса. Даже если ошибку в имени исправить, правило никогда не сработает.
4. Аналогично - правило №320 никогда не сработает.
5. Где механизм отправки трафика в тот канал WAN, с которого пришел запрос?
6. Какой механизм определяет падение канала и где он задействован?
7. Где, собственно, реурсия?

1. может быть для iface-list-ов
2. остатки в конфе, скопировались попоавлю
3. 318 - да, косяк - исправлю.
4. нет - ether переименовывается в wan2
5. route rule - script магия для originated, conntrack + srcnat - для транзита, который разбрасывается по pcc
6. check-gateway
7. script магия + address-list-ы

Посмотрите внимательно.
4.  318 и 320 никогда не сработает - они у вас на инпуте, а дстнат сработает в прероутинге и до инпута ничего не дойдет - смотрите пекетфлоу.  
5. Поэтому метка не поставится и  Ваша "магия"  с роут рулами не сработает
6. Посмотрите внимательно и убедитесь - где у Вас включен чекгейтвей? )
7. Если скрипт-магия и адрес листы это рекурсия, то ... ))) В моей вселенной рекурсивные маршруты это совсем другое.

ок, хорошо - я проверю все еще раз. придется нормально оттестировать :)

Вне всякого сомнения. )

рекурсия у меня в main, check-gw из rt, конечно убрать ошибки копипасты

Да, scope устанавливается скриптом. Нашел. Прошу простить.

без единого правила в mangle - роутер доступен по двум интерефесам - без дропов которые логируются выше

для port-forwarding - да, косяк - будет исправлено

@Prislonsky
исправлено - ну и вроде все проверено, кроме пожалуй - распределения соединений по pcc

По pcc вопросов нет, хоть я его и не люблю  на WAN )

спасибо, что указали на ошибки

мне вот интересно если использовать ECMP - то можно ли совсем обойтись без mangle - учитывая, что у нас допустим не используется port-forwarding?
в разных источниках по разному, кто-то дополнительно маркирует, кто-то нет