杜若是一种植物，也叫杜衡，就是《湘夫人》里“芷葺兮荷屋，缭之兮杜衡”的杜衡，可以入药的草本植物。“杜若无心”，大概想表达草木其实没什么想法的意思吧。

如同“始怜幽竹山窗下，不改清阴待我归”，意思是幽竹不会真的等人回来，诗人用意象表达情感，可是情感与花草无关。