C# / .NET4.0です。

シリアル通信で10msごとに送られてくるデータを表示するものです。
ですが、表示されるのは少し前のデータで時間が経つとフリーズしてしまいました。
調べたところ受信バッファにどんどん溜まっていくのが確認できました。
ちなみにターミナルソフトで確認するときちんと10msごとに、もたつき無く送られているようで、C#のほうで処理しきれていないようです。
解決策（処理の高速化）を教えてください。よろしくお願いします。


（コードの重要と思われるところ以外は削除しています）
受信するデータは "1,2,3,4,5,6,7,8,9,10" というコンマで区切られた10個の数字です。

private delegate void MyDelegate(string[] ReceiveData);
private void serialPort1_DataReceived()
{
temp = this.serialPort1.ReadLine();
ReceiveData = temp[0].Split(',');
if (ReceiveData.Length == 10) Invoke(new MyDelegate(WriteText), new Object[] { ReceiveData });
}

private void WriteText(string[] ReceiveData)
{
if (offset_flag)
{
offset[0] = ReceiveData[0];
（1～7同様に）
offset[8] = ReceiveData[8];
offset_flag = false;
}
else
{
this.label10.Text = Convert.ToString(int.Parse(ReceiveData[0]) - int.Parse(offset[0]));
（1～7同様に）
this.label18.Text = Convert.ToString(int.Parse(ReceiveData[8]) - int.Parse(offset[8]));
}
}