Si te fijas, Visual Studio te esta pintando la palabra NuevaVenta en color verde oscuro, estas haciendo referencia al nombre de la clase y no al objeto instanciado, en todo caso si quieres cambiar el FormBorderStyle de NuevaVenta -> el códio que estas escribiendo actualmente ya se encuentra en esa clase, entonces tienes que hacer referencia al objeto actual que sería:
this.FormBorderStyle
El código te quedaría así:
if(string.IsNullOrEmpty(_idbusqueda))
{
this.FormBorderStyle = FormBorderStyle.FixedDialogFixedDialog;
}
o si lo prefieres puedes poner solamente FormBorderStyle, yo pondría this.FormBorderStyle solo para cerciorarme a que objeto le cambio la propiedad y a la hora de leer el código resulta mas intuitivo.
Un saludo.