支付宝小爱音箱是连接支付宝和小爱音箱的智能家居设备，其工作原理是通过语音指令进行交互。在正常情况下，别人是无法直接知道通过小爱音箱发送的支付宝指令是由谁发出的，因为这涉及用户的隐私保护。

但是，如果用户在家庭或共享环境中使用小爱音箱，并且其他人能够听到或观察到你发出的语音指令，那么他们可能会猜测到是谁在操作。所以，虽然从技术上来说别人无法直接知道是谁发的指令，但用户仍需注意在适当的环境中使用，以保护个人隐私。