pv는 작은 버퍼로 100% 진행을 제공합니다.

pv는 작은 버퍼로 100% 진행을 제공합니다.

폴더의 각 파일에 대해 긴 작업(이미지 형식 변환)을 수행해야 합니다. 다음을 사용하여 pv예상 기간( sleep여기서는 처리 시간을 시뮬레이션하는 데 사용됨) 작성을 구현했습니다 .

pv -B 1 =(find . -iwholename '*.png') | xargs -l sh -c 'sleep 0.1'

내부 버퍼가 있어서 추정을 망칠 수도 있겠다는 생각이 들었는데, 파일 목록 자체가 그리 크지 않고(수십 KB) 처럼 내부 버퍼가 있을 수도 있어서 pv버퍼를 1바이트, -B 1. 이로 인해 성능 문제가 발생할 수 있는지 궁금합니다(디스크는 읽기당 최소 512바이트만 읽을 수 있고 511바이트를 삭제할 수 있으므로). =()사용으로 인해 메모리에 상주 할 수 있는지는 알 수 없습니다 . 나는 -B 1이것이 나쁜 해결책이라고 생각합니다 .

하지만 더 중요한 것은 남의 가치관과 다른 이상한 행동이 있다는 것이다 -B. 예를 들어:

pv =(yes | head -n 100) -B 1 | xargs -l sh -c 'sleep 1'

예상대로 작동할 것입니다(비록 이상하게 시작되고 17%몇 초 후에만 렌더링이 시작되지만).

pv =(yes | head -n 100) -B 10 | xargs -l sh -c 'sleep 1'

100%처리하는데 100초 걸릴 줄 알았는데 바로 인쇄되고, 간격으로 업데이트되고 5%, 200바이트, x100자 y, 그리고 \n... 왜죠?

노트: =()필요 zsh. 시도해 보았는데 <()진행률 표시줄이 작동하지 않습니다. pvFIFO 크기는 추정할 수 없지만 파일로 추정할 수 있습니까 ?

답변1

많은 수의 파일을 이미지 형식으로 변환하려면 pv변환된 파일 수를 계산할 수 있습니다. 일부 파일은 다른 파일보다 시간이 오래 걸리기 때문에 완벽하지는 않지만 합리적인 추정치를 제공합니다.

먼저 다음 명령과 유사하게 총 파일 수를 계산합니다(올해 6월의 내 사진).

$ find 2022/06 \( -name '*.jpg' -or -name '*.png' \)|wc -l
55

pv -l -s55그런 다음 줄 수를 계산할 수 있는 명령줄을 만듭니다 . 변환 프로세스에서 출력이 생성되지 않으면 echo 문을 추가할 수 있습니다( feh그림을 표시하지만 호출 터미널 창에 출력을 생성하지 않으므로 echo는 줄 바꿈만 인쇄하도록 했습니다).

$ find 2022/06 -type f -exec bash -c "feh -r -g 1000x1000 --zoom max {} & sleep .5; pkill feh ;sleep .5;echo ''" \; | pv -l -s55 > /dev/null
22,0  0:00:23 [ 978m/s] [==============>                       ] 40% ETA 0:00:34

또는 출력 스크롤을 보려면 출력을 리디렉션하지 마세요.

$ find 2022/06 -type f -exec bash -c "feh -r -g 1000x1000 --zoom max {} & sleep .5; pkill feh ;sleep .5;echo ''" \; | pv -l -s55
0,00  0:00:01 [0,00 /s] [>                                     ]  0% ETA 0:00:00
1,00  0:00:02 [1,01 /s] [>                                     ]  1% ETA 0:01:48
2,00  0:00:03 [ 984m/s] [>                                     ]  3% ETA 0:01:19
3,00  0:00:04 [ 978m/s] [>                                     ]  5% ETA 0:01:09
4,00  0:00:05 [ 983m/s] [=>                                    ]  7% ETA 0:01:03
5,00  0:00:06 [ 984m/s] [==>                                   ]  9% ETA 0:01:00
6,00  0:00:07 [1,08 /s] [==>                                   ] 10% ETA 0:00:57
7,00  0:00:08 [ 980m/s] [===>                                  ] 12% ETA 0:00:54
8,00  0:00:09 [ 980m/s] [====>                                 ] 14% ETA 0:00:52
9,00  0:00:10 [ 979m/s] [=====>                                ] 16% ETA 0:00:51
10,0  0:00:11 [ 983m/s] [=====>                                ] 18% ETA 0:00:49
11,0  0:00:12 [1,08 /s] [======>                               ] 20% ETA 0:00:48
12,0  0:00:13 [ 982m/s] [======>                               ] 21% ETA 0:00:46
13,0  0:00:14 [ 982m/s] [=======>                              ] 23% ETA 0:00:45
14,0  0:00:15 [ 981m/s] [========>                             ] 25% ETA 0:00:43
15,0  0:00:16 [ 986m/s] [=========>                            ] 27% ETA 0:00:42
16,0  0:00:17 [1,08 /s] [==========>                           ] 29% ETA 0:00:41
17,0  0:00:18 [ 983m/s] [==========>                           ] 30% ETA 0:00:40
18,0  0:00:19 [ 984m/s] [===========>                          ] 32% ETA 0:00:39
19,0  0:00:20 [ 982m/s] [===========>                          ] 34% ETA 0:00:37
20,0  0:00:21 [ 981m/s] [============>                         ] 36% ETA 0:00:36
21,0  0:00:22 [1,08 /s] [=============>                        ] 38% ETA 0:00:35
22,0  0:00:23 [ 985m/s] [==============>                       ] 40% ETA 0:00:34
23,0  0:00:24 [ 983m/s] [==============>                       ] 41% ETA 0:00:33
24,0  0:00:25 [ 981m/s] [===============>                      ] 43% ETA 0:00:32
25,0  0:00:26 [ 986m/s] [================>                     ] 45% ETA 0:00:31
26,0  0:00:27 [ 985m/s] [================>                     ] 47% ETA 0:00:30
27,0  0:00:28 [1,08 /s] [=================>                    ] 49% ETA 0:00:29
28,0  0:00:29 [ 983m/s] [==================>                   ] 50% ETA 0:00:27
29,0  0:00:30 [ 983m/s] [==================>                   ] 52% ETA 0:00:26
30,0  0:00:31 [ 983m/s] [===================>                  ] 54% ETA 0:00:25
31,0  0:00:32 [ 979m/s] [====================>                 ] 56% ETA 0:00:24
32,0  0:00:33 [1,08 /s] [=====================>                ] 58% ETA 0:00:23
33,0  0:00:34 [ 982m/s] [=====================>                ] 60% ETA 0:00:22
34,0  0:00:35 [ 981m/s] [======================>               ] 61% ETA 0:00:21
35,0  0:00:36 [ 980m/s] [======================>               ] 63% ETA 0:00:20
36,0  0:00:37 [ 983m/s] [=======================>              ] 65% ETA 0:00:19
37,0  0:00:38 [1,08 /s] [========================>             ] 67% ETA 0:00:18
38,0  0:00:39 [ 984m/s] [=========================>            ] 69% ETA 0:00:17
39,0  0:00:40 [ 983m/s] [=========================>            ] 70% ETA 0:00:16
40,0  0:00:41 [ 978m/s] [==========================>           ] 72% ETA 0:00:15
41,0  0:00:42 [ 979m/s] [===========================>          ] 74% ETA 0:00:14
42,0  0:00:43 [1,08 /s] [===========================>          ] 76% ETA 0:00:13
43,0  0:00:44 [ 981m/s] [============================>         ] 78% ETA 0:00:12
44,0  0:00:45 [ 981m/s] [=============================>        ] 80% ETA 0:00:11
45,0  0:00:46 [ 985m/s] [=============================>        ] 81% ETA 0:00:10
46,0  0:00:47 [ 983m/s] [==============================>       ] 83% ETA 0:00:09
47,0  0:00:48 [1,08 /s] [===============================>      ] 85% ETA 0:00:08
48,0  0:00:49 [ 983m/s] [================================>     ] 87% ETA 0:00:07
49,0  0:00:50 [ 981m/s] [================================>     ] 89% ETA 0:00:06
50,0  0:00:51 [ 986m/s] [=================================>    ] 90% ETA 0:00:05
51,0  0:00:52 [ 981m/s] [=================================>    ] 92% ETA 0:00:04
52,0  0:00:53 [1,08 /s] [==================================>   ] 94% ETA 0:00:03
53,0  0:00:54 [ 982m/s] [===================================>  ] 96% ETA 0:00:02
54,0  0:00:55 [ 984m/s] [====================================> ] 98% ETA 0:00:01
55,0  0:00:55 [ 982m/s] [====================================>] 100%            

관련 정보