Кажется, что документации по классу hadoop filesystem.statistics не хватает.

Что подразумевается под «прочитанными байтами» и «записанными байтами» и как реализованы счетчики?

2
jayunit100 1 Янв 2012 в 22:57

1 ответ

Что подразумевается под «прочитанными байтами» и «записанными байтами»

Согласно Hadoop: полное руководство

Прочитанные байты файловой системы – количество байтов, прочитанных каждой файловой системой в ходе задач сопоставления и сокращения. Для каждой файловой системы существует счетчик: файловая система может быть локальной, HDFS, S3, KFS и т. д.

Записано байт файловой системы — количество байтов, записанных каждой файловой системой с помощью задач сопоставления и сокращения.

как реализованы счетчики?

Ознакомьтесь с этими руководствами (1. , 2, 3) о том, как реализованы счетчики.

1
Praveen Sripati 2 Янв 2012 в 05:29
Это полезный ответ ...... но неясна связь между определением и реализацией ... в любом случае, я еще раз изучу ваши учебники и посмотрю, есть ли в них подробности.
 – 
jayunit100
2 Янв 2012 в 10:38
Непонятно, что вам непонятно :) Пройдитесь по туториалам, а потом по коду Hadoop, чтобы разобраться подробнее.
 – 
Praveen Sripati
2 Янв 2012 в 12:01