被人造谣诽谤又拿不到证据的，可提起名誉权侵权之诉，申请法院调查收集证据；也可以向公安机关报警处理，由其立案进行调查，并给予造谣诽谤人治安处罚。

法律依据

《中华人民共和国刑法》第二百四十六条以暴力或者其他方法公然侮辱他人或者捏造事实诽谤他人，情节严重的，处三年以下有期徒刑、拘役、管制或者剥夺政治权利。 前款罪，告诉的才处理，但是严重危害社会秩序和国家利益的除外。 通过信息网络实施第一款规定的行为，被害人向人民法院告诉，但提供证据确有困难的，人民法院可以要求公安机关提供协助。《治安管理处罚法》第四十二条有下列行为之一的，处五日以下拘留或者五百元以下罚款；情节较重的，处五日以上十日以下拘留，可以并处五百元以下罚款：（二）公然侮辱他人或者捏造事实诽谤他人的；（六）偷窥、偷拍、窃听、散布他人隐私的。