fix Dataset importer problems #342
Open
firefoxci-taskcluster / alignments-ru-en
succeeded
Jan 29, 2024 in 54m 55s
FirefoxCI (pull_request)
alignments for ru-en
Details
View task in Taskcluster
View logs in Taskcluster
[task 2024-01-29T18:37:20.208Z] 16145▁П ро вер я ется , ▁что ▁не ко тор о е ▁значение ▁у д ов лет в ор я ет ▁ограничен ию ▁ ди а па з он а . |||
[task 2024-01-29T18:37:20.208Z]
[task 2024-01-29T18:37:20.208Z] 16145
[task 2024-01-29T18:37:20.208Z] ▁Дл я ▁ э ти х ▁цел ей ▁с л у жи т ▁к он ста н та ▁ U N B O U N D E D . ||| ▁О д на ко ▁это ▁не ▁о ста н ов и ло ▁ па д ения ▁ ц ен . ||| Error in line
[task 2024-01-29T18:37:20.208Z] 16145
[task 2024-01-29T18:37:20.208Z] ▁ л ю бо е ▁п ра в и ло , ▁которо е ▁тр е б у ет , ▁что бы ▁ им я ▁или ▁вы ра ж ение ▁име ли ▁о пре де л ё н ный ▁тип ▁или ▁так ой ▁же ▁тип , ▁как ▁друг о е ▁ им я ▁или ▁вы ра ж ение ; |||
[task 2024-01-29T18:37:20.208Z] Error in line 16145
[task 2024-01-29T18:37:20.208Z] ▁В ы пол н ение ▁оператор а ▁при н я ти я ▁на чи на ется ▁с ▁вы числен ия ▁ ин де к с а ▁в ход а ▁( в ▁случае ▁в ход а ▁с ем ей ств а ). |||
[task 2024-01-29T18:37:20.208Z] Error in line 16145
[task 2024-01-29T18:37:20.208Z] ▁В о ▁в тор ой ▁ пол ов ин е ▁д н я ▁п ра в и тель ств о ▁под т вер ди ло ▁ 1 6 8 ▁по ло жи тель ных ▁случаев . |||
[task 2024-01-29T18:37:20.209Z] Error in line 16145
[task 2024-01-29T18:37:20.209Z] ▁И н д ия ▁за я в и ла , ▁что ▁ бо е в и ки ▁был и ▁с в я з ан ы ▁с ▁П а ки ста ном ; ▁П а ки ста н ▁это ▁о три ц а ет . |||
[task 2024-01-29T18:37:20.209Z] Error in line 16145
[task 2024-01-29T18:37:20.209Z] ▁Н е ▁в о ро ш и ть ▁про ш ло е ? |||
[task 2024-01-29T18:37:20.209Z] Error in line 16145
[task 2024-01-29T18:37:20.209Z] ▁О д на ко ▁о ди но ч ная ▁задач а ▁не ▁может ▁быть ▁пере им ен ован а , ▁так ▁как ▁со от в ет ств ую щ ий ▁задач ный ▁тип ▁ является ▁ ан он им ным . |||
[task 2024-01-29T18:37:20.209Z] Error in line 16145
[task 2024-01-29T18:37:20.209Z] ▁О ф и с ▁ ру ко вод ит е ля ▁и сс ле д ов а тель ских ▁ работ . |||
[task 2024-01-29T18:37:20.209Z] Error in line 16145
[task 2024-01-29T18:37:20.209Z] ▁При ▁не с ов па д ения х ▁в оз б у ж да ется ▁исключение ▁C O N S T R A I N T _ ERROR . |||
[task 2024-01-29T18:37:20.209Z] Error in line 16145
[task 2024-01-29T18:37:20.210Z] ▁А на ло ги ч ные ▁п ра в и ла ▁при м ен я ются ▁при ▁пере ко м пи ля ци и . |||
[task 2024-01-29T18:37:20.210Z] Error in line 16145
[task 2024-01-29T18:37:20.210Z] ▁Б ы ло ▁об ъ я в лен о , ▁что ▁ а р м ия ▁и ▁ ф ло т ▁б у д ут ▁у ч а ств ов а ть ▁в ▁б ор ь б е ▁с ▁п ан де ми ей . |||
[task 2024-01-29T18:37:20.210Z] Error in line 16145
[task 2024-01-29T18:37:20.210Z] ▁ 1 4 ▁марта ▁ Х ор ва ти я ▁за к р ы ла ▁все ▁границ ы ▁с ▁Б ос ни ей ▁и ▁ Г ер ц его в и ной . |||
[task 2024-01-29T18:37:20.210Z] Error in line 16145
[task 2024-01-29T18:37:20.210Z] ▁В ▁то ▁же ▁в ре м я , ▁ л ю б ой ▁ но с и тель ▁ ин ф е к ци и ▁име ет ▁п ра в о ▁на ▁со х ран ение ▁в ра че б ной ▁ та й н ы . |||
[task 2024-01-29T18:37:20.210Z] Error in line 16145
[task 2024-01-29T18:37:20.210Z] ▁о но ▁вы чи с ля ется ▁до ▁вызов а . |||
[task 2024-01-29T18:37:20.210Z] Error in line 16145
[task 2024-01-29T18:37:20.210Z] ▁С ер б ия ▁ ра ти ф и ци ро ва ла ▁ Д ого в ор ▁о ▁при с о ед ин е нии ▁к ▁ Е С |||
[task 2024-01-29T18:37:20.210Z]
[task 2024-01-29T18:37:20.210Z] Error in line 16145
[task 2024-01-29T18:37:20.210Z] ▁При ▁не с ов па де нии ▁в оз б у ж да ется ▁исключение ▁C O N S T R A I N T _ ERROR . |||
[task 2024-01-29T18:37:20.210Z] Error in line 16145
[task 2024-01-29T18:37:20.210Z] ▁о д на ко ▁пере м ен ной ▁д ан ного ▁подтип а ▁ м о ж но ▁при с в о и ть ▁значение ▁то лько ▁этого ▁подтип а . |||
[task 2024-01-29T18:37:20.210Z] Error in line 16145
[task 2024-01-29T18:37:20.210Z] ▁ З на ч ение ▁атрибут а ▁T ' F O R E ▁за в и с ит ▁то лько ▁от ▁ ди а па з он а ▁подтип а ▁Т . |||
[task 2024-01-29T18:37:20.210Z] Error in line Error in line 16145
[task 2024-01-29T18:37:20.210Z] ▁ З ая в л ение ▁вы з ва ло ▁не г а ти в н ую ▁ре а к ци ю ▁на ▁ З а па де . |||
[task 2024-01-29T18:37:20.210Z] ▁ Д в е ▁тр ет и ▁ работ а ю щ их ▁име ют ▁к ор п о ра ти в ное ▁ стр а х ован ие . |||
[task 2024-01-29T18:37:20.210Z] Error in line 16145
[task 2024-01-29T18:37:20.211Z] ▁с ю да ▁не ▁в к л ю ч а ются ▁друг ие ▁операции ▁от но ш ения , ▁на п р им ер ▁ > = ▁или ▁ а р и ф м ет и че с ки е ▁операции . |||
[task 2024-01-29T18:37:20.211Z] Error in line 16145
[task 2024-01-29T18:37:20.211Z] ▁Н а ▁от о б ра ж ение ▁компонент ▁ м о ж но ▁по в ли я ть ▁п ра г м ой ▁( и ли ▁с п е ци ф и ка тор ом ▁пред ста в л ения ) ▁для ▁компонент ы ▁или ▁типа ▁компонент ы . |||
[task 2024-01-29T18:37:20.211Z] Error in line 16145
[task 2024-01-29T18:37:20.211Z] ▁К о ли че ств о ▁за ра жен ных ▁ л ю д ей ▁в ▁это т ▁д ен ь ▁со ста в и ло ▁ 1 . |||
[task 2024-01-29T18:37:20.211Z] Error in line 16145
[task 2024-01-29T18:37:20.211Z] ▁А у то им м у н ное ▁за бо ле ва ни е |||
[task 2024-01-29T18:37:20.211Z] Error in line 16145
[task 2024-01-29T18:37:20.211Z] ▁ Я ▁по м н ю ▁г ран ди оз ный ▁ м ит ин г ▁в ▁ Г ен у е ▁в ▁ па м я ть ▁о ▁К а р ло ▁ Д ж у ли а ни . |||
[task 2024-01-29T18:37:20.211Z] Error in line 16145
[task 2024-01-29T18:37:20.211Z] ▁то ▁пере ко м пи ля ци и ▁те ла ▁так ого ▁пакет а ▁не ▁тр е б у ется . |||
[task 2024-01-29T18:37:20.211Z] Error in line 16145
[task 2024-01-29T18:37:20.211Z] ▁П ла н ▁О б а м ы : ▁ э ко ном и ка ▁ пре ж де ▁все го |||
[task 2024-01-29T18:37:20.211Z] Error in line 16145
[task 2024-01-29T18:37:20.211Z] ▁Н о ▁не ▁то лько ▁ ка р ти н ы ▁с оз да ет ▁ э та ▁не м е ц ка я ▁ х у д о ж ни ц а . |||
[task 2024-01-29T18:37:20.211Z] Error in line 16145
[task 2024-01-29T18:37:20.211Z] ▁При ▁на ру ш е нии ▁со от в ет ств ия ▁компонент ▁в оз б у ж да ется ▁исключение ▁C O N S T R A I N T _ ERROR . |||
[task 2024-01-29T18:37:20.211Z] Error in line 16145
[task 2024-01-29T18:37:20.211Z] ▁ Е щ ё ▁с ем ь ▁случаев ▁за бо ле в ания ▁был и ▁под т вер ж д ен ы ▁2 1 ▁марта . |||
[task 2024-01-29T18:37:20.211Z] Error in line 16145
[task 2024-01-29T18:37:20.211Z] ▁ Д в о е ▁друг их ▁от п ра в и ли с ь ▁из ▁А в стр ии ▁и ▁ Г ер м а нии ▁в ▁ З а г ре б . |||
[task 2024-01-29T18:37:20.211Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] 16145▁Дл я ▁кажд ого ▁в оз м о ж ного ▁значения ▁ ин де к с а ▁одно м ер ный ▁ма сс и в ▁име ет ▁от де л ь н ую ▁компонент у . |||
[task 2024-01-29T18:37:20.212Z]
[task 2024-01-29T18:37:20.212Z] ▁( ко тор ая ▁име н но , ▁в ▁ я з ы к е ▁не ▁определен о ). |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁При ми р и тель ный ▁то н |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁В ▁кажд ом ▁из ▁пере числен ных ▁вы ш е ▁случаев ▁г ов ор я т , ▁что ▁ з он а ▁описания ▁с в я за на ▁с ▁со от в ет ств ую щ им ▁описание м ▁или ▁оператор ом . |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁С ло ва к ия ▁о ф и ци ал ь но ▁объявил а ▁ ч ре з в ы ч а й ное ▁по ло ж ение ▁ . |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁ У че ным ▁у да ло с ь ▁вы я в и ть ▁г ен , ▁который ▁одно в ре м ен но ▁от в е ч а ет ▁за ▁ ц в ет ▁и ▁ а ро м а т ▁ ц в ет ка . |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁М ы ▁б ор ем ся ▁за ▁п ра в о е ▁ де ло . |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁значения ▁ э ти х ▁тип ов ▁не ▁име ют ▁компонент . |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁ З на ч ение ▁вы ра ж ения ▁о пре де ля ет ▁результат , ▁в оз в ра щ а ем ый ▁ ф у н к ци ей . |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁ Э ти ▁ м е ста ▁определен ы ▁п ра в ил ами ▁вид им о сти ▁и ▁с ов м е щ ения . |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁исключение ▁в оз б у ж да ется ▁не ▁по з же ▁ ок он ч ания ▁ а ва р ий ной ▁задач и . |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁Н а м ▁по ка ▁при ход и тся ▁о ста ва ться ▁в ▁ Г ом е . |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁П ро г ра м м а ▁от к р ы ва ет ▁файл ▁вы вод а , ▁ им я ▁которо го ▁ да ё тся ▁ стр ок ой ▁N A M E . |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁По ▁п ра в де ▁г ов ор я , ▁ я ▁о ч ен ь ▁ л ю б л ю ▁ э т у ▁ ф о то г ра ф ию . |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁При м ер ▁описания ▁на стр ой ки ▁с ▁на стр а и ва ем ым ▁пакет ом : |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁то ▁же ▁с а м о е ▁от но с и тся ▁и ▁к ▁пере ко м пи ля ци и |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.212Z] ▁А л м а - А ти н с ка я ▁ де к ла ра ция . |||
[task 2024-01-29T18:37:20.212Z] Error in line 16145
[task 2024-01-29T18:37:20.213Z] ▁Н а ▁ э ти ▁ три ▁стран ы ▁при ход и тся ▁д в е ▁тр ет и ▁ э ко ном и ки ▁ з он ы ▁ е в ро . |||
[task 2024-01-29T18:37:20.213Z] Error in line 16145
[task 2024-01-29T18:37:20.213Z] ▁В ы бо р ы ▁с ▁ ди с к р ет ным и ▁значения ми ▁и с пол ь з у ются ▁также ▁в ▁оператор а х ▁вы бо ра ▁и ▁в ▁ а г ре г а та х ▁ма сс и ва . |||
[task 2024-01-29T18:37:20.213Z] Error in line 16145
[task 2024-01-29T18:37:20.213Z] ▁Дл я ▁ а г ре г а та ▁про вер я ется ▁при на д ле ж ность ▁ ин де к с а ▁или ▁дискриминант а ▁со от в ет ств ую щ ем у ▁подтип у . |||
[task 2024-01-29T18:37:20.213Z] Error in line 16145
[task 2024-01-29T18:37:20.213Z] ▁Н о ▁и де я ▁о ▁то м , ▁что ▁ я ▁п ы т ал ся ▁с в е сти ▁В о ст ок ▁с ▁ З а па д ом ▁ - ▁В а ш а , ▁ а ▁не ▁ м о я . |||
[task 2024-01-29T18:37:20.213Z] Error in line 16145
[task 2024-01-29T18:37:20.213Z] ▁К то ▁так ие ▁ а м ер и к ан ц ы ? |||
[task 2024-01-29T18:37:20.213Z] Error in line 16145
[task 2024-01-29T18:37:20.213Z] ▁По ▁с у ти ▁это ▁ оз на ч а ет ▁ их ▁на ци он а ли за ци ю . |||
[task 2024-01-29T18:37:20.213Z] Error in line 16145
[task 2024-01-29T18:37:20.213Z] ▁О пи с ан ие ▁подтип а ▁не ▁о пре де ля ет ▁ н ов ого ▁типа . |||
[task 2024-01-29T18:37:20.214Z] Error in line 16145
[task 2024-01-29T18:37:20.214Z] ▁К ом п он ен та ▁за пи с и . |||
[task 2024-01-29T18:37:20.214Z] Error in line 16145
[task 2024-01-29T18:37:20.214Z] ▁При м ер ы ▁описания ▁пере им ен ов ания ▁с ▁новы ми ▁име н ами ▁параметр ов : |||
[task 2024-01-29T18:37:20.214Z] Error in line 16145
[task 2024-01-29T18:37:20.214Z] ▁П а ра м ет р ▁ Х ▁до л жен ▁быть ▁значение м ▁пред о пре де л ё н ного ▁типа ▁S T R I N G . |||
[task 2024-01-29T18:37:20.214Z] Error in line 16145
[task 2024-01-29T18:37:20.214Z] ▁О пи с ания ▁и ▁оператор ы ||| Error in line 16145
[task 2024-01-29T18:37:20.214Z] ▁ У ▁у м ер ш его ▁был ▁под т вер ж д ё н ▁COVID -19 ▁ 1 7 ▁марта . |||
[task 2024-01-29T18:37:20.214Z]
[task 2024-01-29T18:37:20.214Z] Error in line 16145
[task 2024-01-29T18:37:20.215Z] ▁О н ▁у м ен ▁и ▁об ра з ован . |||
[task 2024-01-29T18:37:20.215Z] Error in line 16145
[task 2024-01-29T18:37:20.215Z] ▁При м ер ▁описания ▁ма сс и ва ▁с ▁ограничен ным ▁ ин де к с и ру ем ым ▁подтип ом : |||
[task 2024-01-29T18:37:20.215Z] Error in line 16145
[task 2024-01-29T18:37:20.215Z] ▁П ер в и ч ная ▁ м ед и ко - с а ни та р ная ▁по м о щ ь ▁и ▁ е ё ▁компонент ы . |||
[task 2024-01-29T18:37:20.215Z] Error in line 16145
[task 2024-01-29T18:37:20.215Z] ▁М о я ▁ ф ер м а ▁на ход и тся ▁в от ▁ з де с ь , ▁ а ▁ з де с ь ▁ - ▁ ста д о ▁ м о их ▁ ов е ц . |||
[task 2024-01-29T18:37:20.215Z] Error in line 16145
[task 2024-01-29T18:37:20.215Z] ▁При м ер ы ▁описан ий ▁на стр ой ки ▁с ▁на стр а и ва ем ы ми ▁под п ро г ра м м ами : |||
[task 2024-01-29T18:37:20.216Z] Error in line 16145
[task 2024-01-29T18:37:20.216Z] ▁При м ер ы ▁име ну ем ого ▁типа ▁с ▁раздел ом ▁ ва р и ан т ов : |||
[task 2024-01-29T18:37:20.216Z] Error in line 16145
[task 2024-01-29T18:37:20.216Z] ▁При м е ч ан ие ▁об ▁ ом он им а х . |||
[task 2024-01-29T18:37:20.216Z] Error in line 16145
[task 2024-01-29T18:37:20.216Z] ▁О пи с ан ие ▁ ф и к с ирован ного ▁типа ▁в ▁ форм е |||
[task 2024-01-29T18:37:20.216Z] Error in line 16145
[task 2024-01-29T18:37:20.216Z] ▁И м ен ован ное ▁число . |||
[task 2024-01-29T18:37:20.216Z] Error in line 16145
[task 2024-01-29T18:37:20.216Z] ▁ Е ди ни ч ная ▁ з он а ▁описания ▁ — ▁это : |||
[task 2024-01-29T18:37:20.217Z] Error in line 16145
[task 2024-01-29T18:37:20.217Z] ▁Т а ка я ▁с ит у а ция ▁на з ы ва ется ▁исключение м . |||
[task 2024-01-29T18:37:20.217Z] Error in line 16145
[task 2024-01-29T18:37:20.217Z] ▁При м ер ▁те ла ▁задач и ▁с ▁оператор ом ▁от бо ра : |||
[task 2024-01-29T18:37:20.217Z] Error in line 16145
[task 2024-01-29T18:37:20.217Z] ▁При м ер ▁на стр а и ва ем ого ▁те ла ▁про ц ед у р ы : |||
[task 2024-01-29T18:37:20.217Z] Error in line 16145
[task 2024-01-29T18:37:20.217Z] ▁При м ер ы ▁описан ий ▁к он ста н т : |||
[task 2024-01-29T18:37:20.217Z] Error in line 16145
[task 2024-01-29T18:37:20.217Z] ▁При м ер ▁те ла ▁на стр а и ва ем ой ▁ ф у н к ци и : |||
[task 2024-01-29T18:37:20.217Z] Error in line 16145
[task 2024-01-29T18:37:20.217Z] ▁При м ер ы ▁оператор ов ▁при н я ти я : |||
[task 2024-01-29T18:37:20.217Z] Error in line 16145
[task 2024-01-29T18:37:20.217Z] ▁При м ер ы ▁име н ован ных ▁компонент : |||
[task 2024-01-29T18:37:20.218Z] Error in line 16145
[task 2024-01-29T18:37:20.218Z] ▁При м ер ▁те ла ▁на стр а и ва ем ого ▁пакет а : |||
[task 2024-01-29T18:37:20.218Z] Error in line 16145
[task 2024-01-29T18:37:20.218Z] ▁При м ер ы ▁ ра с ш и р ен ных ▁ им ё н : |||
[task 2024-01-29T18:37:20.218Z] Error in line 16145
[task 2024-01-29T18:37:20.218Z] ▁При м ер ▁с п е ци ф и к ации ▁задач и ▁и ▁со от в ет ств ую щ его ▁те ла : |||
[task 2024-01-29T18:37:20.218Z] Error in line 16145
[task 2024-01-29T18:37:20.218Z] ▁При м ер ы ▁с п е ци ф и к ации ▁задач ных ▁тип ов : |||
[task 2024-01-29T18:37:20.218Z] Error in line 16145
[task 2024-01-29T18:37:20.218Z] ▁При м ер ы ▁ ин де к с и ру ем ых ▁компонент : |||
[task 2024-01-29T18:37:20.218Z] Error in line 16145
[task 2024-01-29T18:37:20.218Z] ▁При м ер ▁те ла ▁подпрограммы : |||
[task 2024-01-29T18:37:20.220Z] Error in line 16145
[task 2024-01-29T18:37:20.220Z] ▁ ко не ц ▁ стр о ч ки ▁по м е ч а ется ▁при з на ко м ▁к он ц а ▁ стр о ч ки ; |||
[task 2024-01-29T18:37:20.220Z] Error in line 16145
[task 2024-01-29T18:37:20.220Z] ▁А на ли ти ки ▁ ж да ли ▁ ро ста ▁на ▁ 0 , 1 % . |||
[task 2024-01-29T18:37:20.220Z] Error in line 16145
[task 2024-01-29T18:37:20.220Z] ▁О д на ко ▁с ле д у ет ▁от м ет и ть , ▁что ▁не ▁все ▁стран ы ▁с чи та ют ▁с м ер т ность ▁о ди на к ов ым ▁об ра з ом . |||
[task 2024-01-29T18:37:20.221Z]
[task 2024-01-29T18:37:20.221Z] ▁А в тор ы ▁и сс ле д ов ания ▁от м е ч а ют , ▁что ▁у че ные ▁ ни че го ▁под о б ного ▁ ран е е ▁не ▁на ход и ли . |||
[task 2024-01-29T18:37:20.222Z]
[task 2024-01-29T18:37:20.222Z] log_e likelihood: nan
[task 2024-01-29T18:37:20.222Z] log_2 likelihood: nan
[task 2024-01-29T18:37:20.222Z] cross entropy: -nan
[task 2024-01-29T18:37:20.222Z] perplexity: -nan
[task 2024-01-29T18:37:20.222Z] posterior p0: 0
[task 2024-01-29T18:37:20.222Z] posterior al-feat: 0
[task 2024-01-29T18:37:20.222Z] size counts: 2085
[task 2024-01-29T18:37:20.226Z] + echo '### Symmetrizing alignments'
[task 2024-01-29T18:37:20.226Z] ### Symmetrizing alignments
[task 2024-01-29T18:37:20.226Z] + test -s /builds/worker/artifacts/corpus.aln.zst
[task 2024-01-29T18:37:20.226Z] + test -s /builds/worker/artifacts/tmp/align.t2s
[task 2024-01-29T18:37:20.226Z] + zstdmt -d /builds/worker/artifacts/tmp/align.s2t.zst /builds/worker/artifacts/tmp/align.t2s.zst
[task 2024-01-29T18:37:20.228Z]
[task 2024-01-29T18:37:20.232Z] Decompress: 1/ 2 files. Current: ...p/align.s2t.zst : 0 MB...
[task 2024-01-29T18:37:20.232Z]
[task 2024-01-29T18:37:20.232Z]
[task 2024-01-29T18:37:20.232Z]
[task 2024-01-29T18:37:20.232Z] 2 files decompressed : 2456931 bytes total
[task 2024-01-29T18:37:20.232Z] + test -s /builds/worker/artifacts/corpus.aln.zst
[task 2024-01-29T18:37:20.232Z] + /builds/worker/fetches/atools -i /builds/worker/artifacts/tmp/align.s2t -j /builds/worker/artifacts/tmp/align.t2s -c grow-diag-final-and
[task 2024-01-29T18:37:20.232Z] + zstdmt
[task 2024-01-29T18:37:20.609Z] + echo '### Creating shortlist'
[task 2024-01-29T18:37:20.609Z] ### Creating shortlist
[task 2024-01-29T18:37:20.609Z] + test -s /builds/worker/artifacts/tmp/lex.s2t.zst
[task 2024-01-29T18:37:20.609Z] + '[' zst = zst ']'
[task 2024-01-29T18:37:20.609Z] + zstdmt -d /builds/worker/artifacts/tmp/corpus.spm.en.zst
[task 2024-01-29T18:37:20.610Z]
[task 2024-01-29T18:37:20.618Z] mp/corpus.spm.en.zst : 0 MB...
[task 2024-01-29T18:37:20.618Z]
[task 2024-01-29T18:37:20.618Z] /builds/worker/artifacts/tmp/corpus.spm.en.zst: 9615212 bytes
[task 2024-01-29T18:37:20.619Z] + zstdmt -d /builds/worker/artifacts/tmp/corpus.spm.ru.zst
[task 2024-01-29T18:37:20.620Z]
[task 2024-01-29T18:37:20.632Z] mp/corpus.spm.ru.zst : 0 MB...
[task 2024-01-29T18:37:20.632Z]
[task 2024-01-29T18:37:20.632Z] /builds/worker/artifacts/tmp/corpus.spm.ru.zst: 5119536 bytes
[task 2024-01-29T18:37:20.632Z] + zstdmt -d /builds/worker/artifacts/corpus.aln.zst
[task 2024-01-29T18:37:20.634Z]
[task 2024-01-29T18:37:20.634Z] facts/corpus.aln.zst : 0 MB...
[task 2024-01-29T18:37:20.634Z]
[task 2024-01-29T18:37:20.634Z] /builds/worker/artifacts/corpus.aln.zst: 121948 bytes
[task 2024-01-29T18:37:20.634Z] + /builds/worker/fetches/extract_lex /builds/worker/artifacts/tmp/corpus.spm.en /builds/worker/artifacts/tmp/corpus.spm.ru /builds/worker/artifacts/corpus.aln /builds/worker/artifacts/tmp/lex.s2t /builds/worker/artifacts/tmp/lex.t2s
[task 2024-01-29T18:37:20.636Z] Starting...
[task 2024-01-29T18:37:21.150Z] 0 10000
[task 2024-01-29T18:37:21.150Z] Finished
[task 2024-01-29T18:37:21.151Z] + rm /builds/worker/artifacts/tmp/corpus.spm.en
[task 2024-01-29T18:37:21.153Z] + rm /builds/worker/artifacts/tmp/corpus.spm.ru
[task 2024-01-29T18:37:21.154Z] + rm /builds/worker/artifacts/corpus.aln
[task 2024-01-29T18:37:21.155Z] + test -s /builds/worker/artifacts/tmp/lex.s2t
[task 2024-01-29T18:37:21.155Z] + zstdmt /builds/worker/artifacts/tmp/lex.s2t
[task 2024-01-29T18:37:21.157Z]
[task 2024-01-29T18:37:21.157Z]
[task 2024-01-29T18:37:21.157Z] Read : 0 / 0 MB ==> 31%
[task 2024-01-29T18:37:21.157Z]
[task 2024-01-29T18:37:21.157Z] /builds/worker/artifacts/tmp/lex.s2t : 31.33% ( 29607 => 9277 bytes, /builds/worker/artifacts/tmp/lex.s2t.zst)
[task 2024-01-29T18:37:21.157Z] + echo '### Shortlist pruning'
[task 2024-01-29T18:37:21.157Z] ### Shortlist pruning
[task 2024-01-29T18:37:21.157Z] + test -s /builds/worker/artifacts/tmp/vocab.txt
[task 2024-01-29T18:37:21.157Z] + /builds/worker/fetches/spm_export_vocab --model=/builds/worker/fetches/vocab.spm --output=/builds/worker/artifacts/tmp/vocab.txt
[task 2024-01-29T18:37:21.161Z] + test -s /builds/worker/artifacts/lex.s2t.pruned.zst
[task 2024-01-29T18:37:21.161Z] + zstdmt -dc /builds/worker/artifacts/tmp/lex.s2t.zst
[task 2024-01-29T18:37:21.161Z] + grep -v NULL
[task 2024-01-29T18:37:21.162Z] + python3 prune_shortlist.py 100 /builds/worker/artifacts/tmp/vocab.txt
[task 2024-01-29T18:37:21.162Z] + zstdmt
[task 2024-01-29T18:37:21.179Z] + echo '### Deleting tmp dir'
[task 2024-01-29T18:37:21.179Z] ### Deleting tmp dir
[task 2024-01-29T18:37:21.179Z] + rm -rf /builds/worker/artifacts/tmp
[task 2024-01-29T18:37:21.182Z] + echo '###### Done: Generating alignments and shortlist'
[task 2024-01-29T18:37:21.182Z] ###### Done: Generating alignments and shortlist
[fetches 2024-01-29T18:37:21.182Z] removing /builds/worker/fetches
[fetches 2024-01-29T18:37:21.429Z] finished
[taskcluster 2024-01-29 18:37:21.851Z] === Task Finished ===
[taskcluster 2024-01-29 18:37:22.260Z] Successful task run with exit code: 0 completed in 65.741 seconds
Loading