Theme.Holo.Light 等のソレを継承して android:actionBarStyle な item な Style について android:background な item を指定してあげれば良い模様。
指定する drawable なリソースは以下な 9-patch で良いようです。
しかし API10 以下な環境だとそもそも android:actionBarStyle な item に android:background が指定できなかったりしてアレでした。
もう 2.3 な端末とかってこの世に存在しないのかどうか。