¿Puedo viajar estando de baja laboral ?

A lo largo de nuestra vida laboral es posible que tengamos que solicitar una baja laboral por un tema de salud. En ese caso, el trabajador estaría inhabilitado para llevar a cabo su tarea profesional, pero ¿también lo estaría para viajar? ¿qué consecuencias podría tener si lo hace?