文法できなくても、生きていけますよ。留学中、色々と喋る機会もありましたし、帰国してから英語のリーディング、リスニングが上達したことは実感しましたが、文法はからきしでした。でもあるていどの文法を知っていれば、もっと意味が分かったのになとも思いますし。文法を勉強したら、さらにリーディングとリスニングの点数が上がりました。丸投げせず、自分なりに頑張れればいいと思います。身についたぶんだけでもとっても役立ちますよ。