Para que funcione, deberías tener lo siguiente:
Primero en el web.config
<connectionStrings>
<add name="LocalSqlServer" providerName="TuProvider" connectionString="TuCadenaDeConexion" />
</connectionStrings>
Para leer el valor, en la aplicación deberías escribir:
Dim strConnString As String = ConfigurationManager.ConnectionStrings("LocalSqlServer").ConnectionString
Nota: No te olvides de agregar esta sentencia al inicio del código
Imports System.Configuration
(Y que la dll System.Configuration.dll
esté referenciada)