リムジンバス
http://www.limousinebus.co.jp/timetable/narita/ikebukuro_h.html
電話での予約が可能。片道3000円。時間に余裕があればオススメです(交通状況により時間が読めない点がネックですが、地上から地上へ移動できる点がメリット)。
直通はリムジンバスしかないと思います。
http://www.limousinebus.co.jp/timetable/narita/ikebukuro_h.html
池袋地区のホテル発です。
エアポートタクシーというのもあります。
http://www.narita-airport.jp/jp/access/bus/detail_taxi.html
こちらのサイトも参考までに載せておきます。
「成田空港への道」