#Ya veo el fallo
No escribes los cambios en el archivo y no sustituyes de la forma correcta

    public void Reemplazar(string ruta)
            {
                try
                {
                    string contenido = System.IO.File.ReadAllText(ruta);
                    string reemplazo = System.Text.RegularExpressions.Regex.Replace(contenido, @"\t|\n|\r", "");
                    System.IO.File.WriteAllText(ruta, reemplazo); // OJO, escribes los cambios en el archivo
                }
                catch(Exception ex)
                {
                    throw new Exception(ex.Message);
                }
            }

Y lo llamas asi:

    private void button1_Click(object sender, EventArgs e)
            {
                string link = Environment.GetFolderPath(Environment.SpecialFolder.Desktop) + @"\\Prueba.csv"; // ruta de ejemplo
                Reemplazar(link);
            }