一，你描述的他说你与第三者有不正当关系这样的情况是难以构成诽谤罪的。根据我国刑法第246规定，诽谤罪是指故意捏造并散布虚构的事实，足以贬损他人人格，破坏他人名誉，情节严重的行为，而情节严重主要是指多次捏造事实诽谤他人的；捏造事实造成他人人格、名誉严重损害的；捏造事实诽谤他人造成恶劣影响的；诽谤他人致其精神失常或导致被害人自杀的等情况。

二，若你想控告他构成诽谤罪，请按上述情节严重的情形收集证据。主要包括三次以上捏造事实诽谤你与第三者有不正当关系，或者他捏造事实造成了你的人格、名誉受到了严重损害，或者已造成了比较恶劣的影响，或者导致致你精神压力巨大经医院诊断证明有抑郁症、严重失眠等。

三，诽谤罪属于自诉案件，由你向法院起诉才会受理，你向公安机关报案通常是不立案的，除非造成受害人死亡等极其严重后果的才会作为公诉案件立案。

这种情况，侵害人格权的，可以起诉要求对方赔礼道歉，赔偿精神损害赔偿金。

诽谤罪是指故意捏造并散布虚构的事实，足以贬损他人人格，破坏他人名誉，情节严重的行为。从你陈述来看，目前还达不到情节严重的程度，不构成诽谤罪的。

调出派出所所做的笔录，同时你和他之间的微信聊天记录，短信，电话，都是证据。向被告住所地人民法院提起诉讼。