エクセルについての質問です。

A1～A10までのセルに、次のようにカンマで区切られた複数の値が入っているデータがあります。
このようなデータから「1～10の値」の数を求めたいのですが、どうすれば可能でしょうか。
１つのセル内に１つの値であれば「countif関数」を使えばできますが、１つのセル内にカンマで区切られた複数の値が入っているような場合にはどうすればよいでしょうか？　具体的に教えてください。

（例）
　 A
1 1,2,3,4,5,6,7,8
2 3,6
3 1,7
4 1,2,6,8
5 10
6 4
7 1,6,7
8 10
9
10 5