İki adet eklenti buldum, kod ile nasıl yapılacağını maalesef bulamadım:

https://wordpress.org/plugins/standard-widget-extensions/screenshots/
https://wordpress.org/plugins/q2w3-fixed-widget/screenshots/

Ek Olarak: Ufak bir hinlik geldi aklıma, yeni bir sidebar tanımlayıp CSS'si ile uğraşarak fixed yapabilirsiniz sanırım.