Das ist zumindest ein Schritt weiter - danke für Deine Analyse!
Das UART-Handling in der arduino-esp32 ist schon immer problematisch für uns gewesen. Deswegen gibt es unter anderem auch die UARTinit-Funktion, in der das Interrupthandling geändert werden muss, damit MODBUS überhaupt funktioniert mit dem ESP32.
Die Liste der Issues ist lang auf Github. Jetzt deutet sich zumindest eine Änderung an: im Master-Branch ist jetzt das ESP-IDF-Handling für UART implementiert, statt es wie bisher neu zu erfinden. Wir beobachten das und werden es übernehmen,sobald es als stable gilt. Unsere Hoffnung ist, dass die Seltsamkeiten, die manche Nutzer erleben, dann verschwinden.
Die Bridge funktioniert zumindest bei mir gut, sie existiert sozusagen hauptsächlich, weil ich sie selber brauchte 
Kannst du mal ein Log posten, in dem man die Probleme nachvollziehen kann?