NetlifyにデプロイしたSPAがPage Not Foundを出してしまう問題

create-react-appで作ったプロジェクトにreact-router-domを入れて、シンプルなSPAを作ってNetlifyにデプロイしたところ、画面遷移はできるのですが、リロードするとPage Not Foundが出てしまうということがありました。その対処方法です。
今回の問題はcreate-react-appで作ったプロジェクトでの話なので、自前で作ったwebpackコンフィグファイルでのデプロイは検証していません。