五楼的人在某些情况下可能会影响六楼晒的衣服。例如，如果五楼的阳台上方有遮挡物，或者五楼的人在阳台上晾晒大量衣物，可能会阻挡阳光照射到六楼的衣物上，从而影响六楼衣物的晾干速度。此外，如果五楼的人在阳台上进行烧烤等活动，产生的烟雾和异味也可能会附着在六楼的衣物上。

因此，为了确保衣物能够顺利晾干并保持清洁，建议在阳台上晾晒衣物时注意周围环境，避免对其他楼层造成影响。同时，与邻居之间建立良好的沟通和相互理解也是非常重要的。