tengo un problema al sumar las unidades, decenas y centenas de un vector. Mostrándolo en un ejemplo:

vector[0] = 123
vector[1] = 456
vector[2] =  78

Y que en unidades salga 17, en decenas 14 y en centenas 5. Sumando en línea vertical.

    for (int i = 0; i < vector.GetLength(0); i++)
            {
                if (vector[i] < 10)
                {
                    u = u + vector[i];

                }
                if (vector[i] < 100)
                {
                    valor = Convert.ToString(vector[i]);
                    d = d + Convert.ToInt32(valor[0]);
                    u = u + Convert.ToInt32(valor[1]);
                }
                else
                {
                    valor = Convert.ToString(vector[i]);
                    c = c + Convert.ToInt32(valor[0]);
                    d = d + Convert.ToInt32(valor[1]);
                    u = u + Convert.ToInt32(valor[2]);
                }

[![introducir la descripción de la imagen aquí][1]][1]

Pero tengo este problema, me salen números grandes, dónde está la anomalía?
  [1]: https://i.sstatic.net/WNaZ4.png