想要悄无声息地反击针对自己的人，可以采取以下几种策略：

保持距离。与那些故意挑衅的人保持距离，减少与他们的接触，这样可以避免不必要的冲突和矛盾。

冷处理。当小人针对自己时，不予回应，保持沉默和冷漠，避免被他们的言语所激怒。

后发制人。在了解小人的弱点后，选择合适的时间和方式进行反击，以静制动，反守为攻。

正面应对。在某些情况下，如果回避无效，可以尝试直接与小人正面交锋，明确表示自己不好惹。

抓住弱点。不动声色地观察小人，找到他们的弱点，利用这些弱点来影响他们的行为。

坚持原则。坚持自己的原则和道德底线，让小人知道自己不是软弱可欺的。

寻求帮助。在必要时，可以寻求同事或领导的理解和支持，共同应对小人的行为。

这些策略需要灵活运用，根据具体情况进行调整。同时，要注意保持自己的尊严和原则，不要因为反击而失去自我。