「.jp」ドメインとってレンタルサーバー借りてるんですが、このドメインに「xxx.yyy.jp」のようにサブドメインつけるにはどういう設定すれば良いのでしょうか？

こちらでいかがでしょうか？

ネームサーバ(DNS)のサービスがどのレベルまで提供されているかによります。

自由に設定できるのであれば、レンタルサーバのサイトで設定可能なのではないでしょうか?

単純な設定しか可能でない、またWebサーバの設定で複数のドメイン名が利用できないなどの場合は、

利用できないのだと思います。

その場合は、自前のDNSサーバを用意し、移転するかそういったサービスまで利用できるサイトに移転するのがよろしいのではないでしょうか。

どのような用途で使用されるのか、詳細がわからないのですが、とりあえず私が契約している業者のURLを

参考にしてください。