auローミングのエリアマップはこちらを参照ください。

https://www.kddi.com/corporate/kddi/public/roaming/area/

パートナー回線を利用するために、スマホのキャリア設定を変更する必要はありません。
その画面ですと、"自動選択" か "Rakuten 4G" のままで良いです。
楽天の電波(B3)が届かなくauのローミング電波が使える状態なら、"Rakuten 4G" のままでローミング電波を使います。

頻繁に圏外になる(＝パートナー回線にも切り替わっていないように思われる)のであれば、
ローミングが実施されていないエリア(orたまたまauの電波も届いていない)か、
auのプラチナバンドB18(B26)を使えないスマホをお使いであるか、
の可能性が高いでしょう。
(例えばドコモのスマホをSIMロック解除したもの等をお使いの場合、B18は使えない可能性が高いです。)