/ / XARGS, GREP y GNU paralelos - linux, grep, procesamiento en paralelo, xargs, redireccionamiento io

XARGS, GREP y GNU parallel - linux, grep, parallel-processing, xargs, io-redirection

Al ser un novato de linux, estoy teniendo problemas para entender algunos de los aspectos elementales de la búsqueda de texto.

Lo que quiero lograr es lo siguiente: Tengo un archivo con una lista de rutas absolutas a una ruta particular.

  1. Quiero revisar esta lista de archivos y grep para un patrón particular
  2. Si el patrón se encuentra en ese archivo, me gustaría redirigirlo a un archivo de salida diferente.
  3. Dado que estos archivos están distribuidos en el NFS, me gustaría acelerar la búsqueda utilizando GNU en paralelo.

Entonces ... lo que hice fue como sigue:

cat filepaths|xargs -iSomePath echo grep -Pl "d+,d+,d+,d+" "SomePath"> FoundPatternsInFile.out| parallel -v -j 30

Cuando ejecuto este comando, recibo repetidamente el siguiente error:

grep: "/path/to/file/name": No such file or directory

El archivo y la ruta existen. ¿Alguien puede señalar qué podría estar haciendo mal con xargs y grep?

Gracias

Respuestas

3 para la respuesta № 1 
cat filepaths | parallel -j 30 grep -Pl "d+,d+,d+,d+" {} > FoundPatternsInFile.out

En este caso incluso puedes dejar de lado {}.

preguntas relacionadas

Uso de xargs dos veces en una línea para corregir el estado «!» De subversión - svn, shell, status, xargs
Ejecutar un archivo con un comando por línea con xargs - shell, procesamiento paralelo, xargs
¿Cambiar el separador de línea sed a NUL para que actúe como prefiltro “xargs -0”? - sed, xargs
¿Por qué xargs -t no muestra comillas? - comillas, xargs
GNU Paralelo, demasiados archivos de entrada, Lista de argumentos demasiado larga - macos, unix, procesamiento en paralelo
¿Cómo encuentro un archivo en particular en un grupo de tarballs? - linux, unix
alias bash en xargs: "bash -c" no pasa argumentos al comando - linux, bash, xargs
Cómo obtener resultados de 4 procesos paralelos en Linux: linux, bash, procesamiento paralelo
¿Cómo grep en una lista de archivos apuntados por un grep anterior? - linux, grep
xargs falla cuando un nombre de archivo contiene espacios en blanco: linux, buscar, espacios en blanco, nombres de archivos, xargs
copiar después de grep en Linux - linux, bash, línea de comando, grep, comando
¿Cómo canalizar la salida de grep a cp? - Linux, shell, grep, cp
Cómo concatenar valor adicional a la salida de un comando y pasarlo a otro comando de Unix - linux, bash, unix, grep, xargs
¿Cómo paso los archivos resultantes de un pase grep a otro para que solo pase por el subconjunto con el segundo pase? - linux, bash, grep
las líneas grep con X pero no con Y - linux, grep, incluyen
Salida de Bash parse en el comando de ruta - linux, bash, redes
Uso de Grep con Xargs y proceso de sustitución: grep, pipe, stdin, xargs, proceso de sustitución
xargs y git log --grep - git, xargs
¿Hay alguna manera de importar una lista de argumentos para encontrar antes de ejecutar -exec? - bash, find, xargs
Cómo imprimir detalles del archivo de los archivos que coinciden con el patrón grep: bash, shell, loops, grep, xargs