[RU-NGI] xfs No space left on device

[Valery Mitsyn]

On Wed, 1 Aug 2012, Liudmila Stepanova wrote:

>
> [root at dpmdisk06 ~]# df -i /disk10
> Filesystem            Inodes   IUsed   IFree IUse% Mounted on
> /dev/sdb1            2574463360   21418 2574441942    1% /disk10

  У нас xfs практически на всех большИх пулах использует
1% Inodes. Это характерно для xfs.
  Пробовали просто перемонтировать партицию?
Обычно xfs может кое что нехорошее обнаружить и исправить
при mount, если не сможет, то попросит запустить check,
если и последний ругается, то придется repair.
  xfs_check всегда растет в памяти до огромных размеров, так
он написан. Увеличивайте swap еще, xfs_check должен
все же завершиться.
  Я все же стараюсь разбивать большой массив на партиции,
веэде, кроме xrootd пулов у нас партиции не больше 20TB.

>
> Я проанализировала, что пишут CMS-цы на этот диск и обнаружила большое
> количество мелких файлов - зазипованных логов, созданных
> cmspilotjob/vocms157.cern.ch. На запрос в CMS Computing Infrastructure
> Support получила ответ:
> The production logs normally are in the unmerged area so the site is in
> charge of cleanning the files in the unmerged are older than two weeks.
> Сейчас выполню srmrm вcex файлов с расширением logArchive.tar.gz старше
> 2-ух недель и попробую еще раз запустить xfs_check
> Best regards,
>     Liudmila.
>
>> Wed, Aug 01, 2012 at 11:55:20AM +0400, Liudmila Stepanova wrote:
>>> xfs_check сожрала 24гб оперативной памяти + 61гб swap-а и грохнулась с
>>> сообщением  out of memory. Добавила еще 32гб swap-а, похоже, результат
>>> аналогичный, nohup.out остался пустым. inode распределяются по
>>> непонятной
>>> мне логике: до 28479 идут подряд потом скачок с 43829312-43829951, потом
>>> опять скачок на 134217824-134217887 и No space left on device.Стерла все
>>> пустые директории, пока запись на диск идет.
>>
>> Забавно.  А всего в файловой системе у вас 134217888 inodes?
>> df -i что интересного говорит?
>> --
>> Eygene Ryabinkin, National Research Centre "Kurchatov Institute"
>>
>> Always code as if the guy who ends up maintaining your code will be
>> a violent psychopath who knows where you live.
>>
>
>
>
>
> _______________________________________________
> RU-NGI mailing list
> RU-NGI at theory.sinp.msu.ru
> http://theory.sinp.msu.ru/mailman/listinfo/ru-ngi
>

-- 
Best regards,
  Valery Mitsyn