Карточка постоянного жителя - это не заграничный паспорт.
Это документ для внутриканадской жизни.
Оставаясь гражданином той страны, из которой вы приехали в Канаду и получили PR-статус, вы полностью попадаете под юрисдикцию визоаого режима той страны, в которой собираетесь путешествовать.
А вот вернуться назад вы можете действительно без проблем, если не нарушаете условий владения картой PR.