アドレスを晒しただけで盗まれるような事はありません。
ただし、秘密鍵だけは求められても絶対出さないようにして下さい。