桃木在中国传统文化中被视为能够辟邪驱鬼的神木，因此鬼怕桃木的说法在民间广为流传。但是，科学上并没有证明桃木具有什么特殊的能力能够影响鬼魂。
在民间信仰中，桃木常被用来制作符咒、驱鬼器等道具，也被用作家具、建筑材料等。传说中桃木生长在五行中的木之中，且性质刚毅、寿命长久，因此被视为具有灵气的神木，可以用来辟邪驱鬼。
但是，桃木用久了是否会招鬼这个说法，可能是基于桃木的品质和存放条件而来的。如果桃木的质量不好，或者存放在阴暗潮湿的环境中，可能会产生异味和霉菌，导致人们产生不良反应。另外，在一些民间传说中，也有一些关于桃木对人类有害的说法，比如说会导致皮肤瘙痒、呼吸困难等症状。但这些说法缺乏科学证据的支持。
总的来说，鬼是否害怕桃木，以及桃木是否具有辟邪驱鬼的功效，是民间传说和信仰的一部分，缺乏科学证据的支持。因此，在面对任何与鬼魂有关的问题时，我们都应该保持科学、理性的态度，不要盲从迷信。