我可不可以起诉他诽谤?

您可以起诉，不过这不代表法院一定会立案，也不意味着您一定胜诉，得到对方的赔偿和道歉。法院的立案与否，在于您是否有充分的证据证明他实施了诽谤行为，以及该行为是否造成了严重的后果。单凭您的言辞是不能立案的，要具备其他物证，如录音等，才是证据充分。其次，要证明该行为造成了公众对您的评价下降，使您在公众心目中的形象受损，或对您及您家人造成精神上的痛苦等损害结果。立案后，还有一个庭审过程，主要是双方的证据和言辞的较量，对方胜诉的可能性也是存在的。若您有充分的证据，则胜诉的概率就会比较大。
前面解释诽谤罪的那位，已经把教科书的内容搬上去给您了，不过我想说明一点，根据您的描述，对方是不构成诽谤罪的，追究对方的刑事责任不现实。民事责任可以成立，您可以要求对方赔礼道歉，停止这种侵害行为等。所以，对方被吓到的机会也不大。
另外，发表下个人的理念。我国司法系统的资源是很紧缺的，特别是基层法院，一个法官一天要审好多案件，很辛苦，希望您认真对待诉讼。其次，法律是维护权利的最后的武器，如果存在其他救济途径，建议先用其他方法，行不通再诉诸法律。

您好，法院是否立案需要看您的证据充不充分，就本案而言，对方仅是说说并没有造成任何后果，法院应该不予立案受理的。

应当起诉，因为这种行为已经严重的伤害了你们的感情，对你们的名誉造成损害，可以要求对方，停止侵害、赔礼道歉、消除影响，赔偿损失。