挙げられたサイトが現在は表示が異なるようなので、予測の範囲で回答させていただきます。
カテゴリーを作成すればそのカテゴリー一覧のページができます。
すべての商品を含むカテゴリーを作成することで「全商品一覧」のページは作成することができるのではないかと思います。
また、ナビゲーションの表示などはHTMLを直接編集することでカスタマイズされているのではないかと思います。
どうぞよろしくお願いいたします。