C# Matriz recebe arquivo .txt

[Murilostersi]

Boa tarde!

Como posso jogar um arquivo.txt (@"C:\dados\teste.txt") em uma matriz? 

Visto que preciso jogar esse arquivo ( @"C:\dados\teste.txt")em uma matriz,e editar alguns dados de posições fixas dela.

Jogando esse arquivo na matriz, consigo saber onde cada dado ficará e assim conseguiria criar uma função para armazenar os valores que eu quero copiar/alterar e depois gerar outro .txt com os valores alterados.

Preciso que me ajudem a achar onde eu errei: 

 static void Main(string[] args)
        {
            StreamReader reader = new StreamReader(@"C:\dados\teste.txt");
            int linha = int.Parse(reader.ReadLine());
            int coluna = int.Parse(reader.ReadLine());
            int[,] OutraMatriz = carregaMatriz(@"C:\dados\teste.txt", ref linha, ref coluna);			
            Console.ReadKey();
        }
        static int[,] carregaMatriz(string arquivo, ref int linhas, ref int colunas)
        {
            StreamReader reader = new StreamReader(arquivo);
            int linha = int.Parse(reader.ReadLine());
            int coluna = int.Parse(reader.ReadLine());
            int[,] Matriz = new int[linha, coluna];
            for (int i = 0; i < linha; i++)
            {
                for (int j = 0; j < coluna; j++)
                {
                    Matriz[i, j] = int.Parse(reader.ReadLine());
                }
            }
            return Matriz;
        }

Nesse código eu procurei jogar o arquivo em uma matriz, utilizei  "int linha" para determinar a quantidade de linhas e assim também para colunas, porém, no arquivo  notei que a primeira linha possui menos colunas que as outras. Ao executar o programa é exibido a mensagem de erro na linha "int linha = int.Parse(reader.ReadLine());" - System.FormatException: 'A cadeia de caracteres de entrada não estava em um formato correto.'.

Lembrando que no arquivo possui números e textos... 

 

Obrigado desde já.