Busqué bastante sobre procesar en paralelo y como estoy arrancando no pude encontrar una forma que funcione o no la comprendí bien, lo que necesito hacer es lo siguiente:
Tengo un DF con códigos de productos (miles) y necesito buscar en la web en distintas páginas el nombre correcto del producto se me ocurrió para evitar errores y estar seguro de que algo esta bien catalogado generar un dataframe en donde tenga el código y luego cada una de las columnas sea una búsqueda automática de selenium
en distintas páginas.
Estoy intentando encararlo de la siguiente forma:
Haría una función para cada web en donde quiera buscar (son 2 o 3 páginas) y automatizo este proceso con selenium
, paso como parámetro el valor de la celda del df que quiero buscar y en cada columna del df aplico la función que corresponde al dato de esa columna.
Espero haber sido claro, de ser necesario, agrego el código, pero es bastante genérico lo que necesito.
Muchas gracias y estoy atento a sus respuestas y a editar la pregunta de ser necesario.
El resultado final al que me gustaría llegar sería:
CODIGO web1 web2
0 xxxx resultadonombreweb1 resultadonombreweb2
1 xxxy resultadonombreweb1 resultadonombreweb2
2 xxxz resultadonombreweb1 resultadonombreweb2
3 xyz resultadonombreweb1 resultadonombreweb2
Al ser miles de códigos me gustaría encontrar la forma de aplicar en paralelo las funciones sin tener que esperar que termine la columna 1 y luego la 2 y así sucesivamente.