新規投稿すると、たまに勝手にコメントが追加されてしまって、なんでだろう？と。
で、調べてみると、どうやら記事中に自サイト内の別のページへのURLがあった場合に起きるようです。
結論から言うと、プラグイン「No Self Pings」を使えばいいらしい。
WordPressには、記事中で他のWordPressサイトへリンクを張った場合、自動的に通知するようになっていて、ピンバックを受信した側が送信元へリンクを返す、というようなトラックバックに似た機能があります。
このピンバックは、記事中のリンクを見て、送信するかしないかを判定しているようで、たとえそれが自サイトページのURLであっても、気にせずにピンバックを送信してしまいます。
自サイトの他ページへのリンクが付いた投稿を新規追加すると、自サイトへピンバックを送り、それがコメントのところに表示される、というわけでした。