К примеру в компонент прилетит не валидный пропс, в котором отработает какоето исключение типо not in null или чтото вроде этого. При чем это будет в момент создания конструктора
1. Если вы хотите отловить ошибку с помощью Error Boundary, то спешу сообщить что это не работает на ssr.
2. Если ваш компонент крашится на сервере - значит и на фронте тоже, проще компонент пофиксить чтобы он не крашился.
3. Если у вас есть РЕАЛЬНАЯ потенциальная проблема по причине которой крашится\не работает компонент, нужно описать исключительное поведение для этого компонента, но без участия Error Boundary.