ダイアリー自体を消す機能はありませんので、退会しかありません。退会はしたくないという場合はプライベートモードにするという方法もありますが、いかがでしょうか。
ダイアリーそのものは削除できません。ただし、以下の手順で記事を全削除することは可能です。