在信仰上，賽夏人崇敬鬼靈havan，havan中的祖靈kavake或tatini能夠護佑他們；此外，最重要的信仰就是矮靈taai，對矮靈的祭祀也是族中最重大的祭儀，稱之為「矮靈祭」。相傳達艾是居住在部落附近山壁岩洞中的矮人，他們擅長農耕、歌舞及巫術，並常教導賽夏族人織布、耕作和祭祀的方法。但是矮人生性好色，常常欺負賽夏族的女子，於是激憤的賽夏族人，便設計陷阱將矮人們殺死。矮人死前立下詛咒，使得農作連年欠收、族人發生災病。後來，賽夏族人為了感謝以往矮人的幫助以及解除咒詛，在稻子收成三分之一時，便舉行為期5天的矮靈祭。
