BlocksA disk has a block size, whic

Blocks
A disk has a block size, which is the minimum amount of data that it can read or write.
Filesystems for a single disk build on this by dealing with data in blocks, which are an
integral multiple of the disk block size. Filesystem blocks are typically a few kilobytes
in size, whereas disk blocks are normally 512 bytes. This is generally transparent to the
filesystem user who is simply reading or writing a file of whatever length. However,
there are tools to perform filesystem maintenance, such as df and fsck, that operate on
the filesystem block level.
HDFS, too, has the concept of a block, but it is a much larger unit—128 MB by default.
Like in a filesystem for a single disk, files in HDFS are broken into block-sized chunks,
which are stored as independent units. Unlike a filesystem for a single disk, a file in
HDFS that is smaller than a single block does not occupy a full block’s worth of under‐
lying storage. (For example, a 1 MB file stored with a block size of 128 MB uses 1 MB
of disk space, not 128 MB.) When unqualified, the term “block” in this book refers to a
block in HDFS.
Why Is a Block in HDFS So Large?
HDFS blocks are large compared to disk blocks, and the reason is to minimize the cost
of seeks. If the block is large enough, the time it takes to transfer the data from the disk
can be significantly longer than the time to seek to the start of the block. Thus, trans‐
ferring a large file made of multiple blocks operates at the disk transfer rate.
A quick calculation shows that if the seek time is around 10 ms and the transfer rate is
100 MB/s, to make the seek time 1% of the transfer time, we need to make the block size
around 100 MB. The default is actually 128 MB, although many HDFS installations use
larger block sizes. This figure will continue to be revised upward as transfer speeds grow
with new generations of disk drives.
This argument shouldn’t be taken too far, however. Map tasks in MapReduce normally
operate on one block at a time, so if you have too few tasks (fewer than nodes in the
cluster), your jobs will run slower than they could otherwise.

Kết quả (Việt) 1:

KhốiMột đĩa có kích thước khối, là số tiền tối thiểu của dữ liệu mà nó có thể đọc hoặc viết.Hệ thống tập tin cho một ổ đĩa duy nhất xây dựng này bằng cách đối phó với các dữ liệu trong khối, trong đó có mộttích phân bội số của kích cỡ của đĩa chặn. Hệ thống tập tin khối thường là một vài kBtrong kích thước, trong khi đĩa khối bình thường là 512 byte. Đây là nói chung trong suốt cho cácHệ thống tập tin người dùng chỉ đơn giản đọc hoặc viết một tệp chiều dài bất kỳ. Tuy nhiên,có các công cụ để thực hiện bảo trì hệ thống tập tin, chẳng hạn như df và fsck, mà hoạt động trêncấp khối hệ thống tập tin.HDFS, quá, có khái niệm của một khối, nhưng nó là một đơn vị lớn hơn nhiều-128 MB theo mặc định.Giống như trong một hệ thống tập tin cho một đĩa đơn, tập tin trong HDFS được chia thành các khối có kích thước khối,mà được lưu trữ như là đơn vị độc lập. Không giống như một hệ thống tập tin cho một đĩa đơn, một tập tin trongHDFS đó là nhỏ hơn so với một khối duy nhất chiếm một khối đầy đủ giá trị của under‐nói dối lí. (Ví dụ, một tập tin 1 MB lưu trữ với kích thước khối 128 MB sử dụng 1 MBkhông gian đĩa, không 128 MB.) Khi không đủ tiêu chuẩn, thuật ngữ "khối" trong cuốn sách này đề cập đến mộtkhối trong HDFS.Tại sao là một khối trong HDFS lớn như vậy?HDFS khối lớn so với đĩa khối, và lý do là để giảm thiểu chi phítrong tìm kiếm. Nếu khối là đủ lớn, thời gian cần thiết để chuyển dữ liệu từ đĩacó thể là đáng kể so với thời gian để tìm kiếm để bắt đầu chặn. Vì vậy, trans‐Ferring một tập tin lớn tạo nhiều khối hoạt động ở tốc độ chuyển giao đĩa.Một phép tính nhanh cho thấy rằng nếu thời gian tìm kiếm là khoảng 10 ms và tốc độ truyền100 MB/s, để thực hiện tìm kiếm trong thời gian 1% thời gian chuyển tiếp, chúng ta cần phải làm cho kích thước khốikhoảng 100 MB. Mặc định là thực sự 128 MB, mặc dù nhiều HDFS cài đặt sử dụngKích thước khối lớn hơn. Con số này sẽ tiếp tục được chỉnh sửa trở lên khi tốc độ chuyển giao phát triểnvới thế hệ mới của ổ đĩa.Lập luận này không nên được thực hiện quá xa, Tuy nhiên. Bản đồ các công việc trong MapReduce thườnghoạt động trên một khối tại một thời điểm, vì vậy nếu bạn có quá ít công việc (ít hơn so với các nút trong cácCluster), các công việc của bạn sẽ chạy chậm hơn so với họ có thể khác.

Kết quả (Việt) 2:

Khối
A đĩa có kích thước khối, đó là số tiền tối thiểu của dữ liệu mà nó có thể đọc hoặc viết.
Hệ thống tập tin cho một đĩa duy nhất xây dựng trên này bằng cách xử lý dữ liệu trong khối, trong đó là một
bội số nguyên của kích thước khối đĩa. Khối hệ thống tập tin thường là vài kilobyte
trong kích thước, trong khi khối đĩa thường 512 byte. Điều này nói chung là trong suốt đối với
người sử dụng hệ thống tập tin người chỉ đơn giản là đọc hoặc viết một tập tin của bất cứ chiều dài. Tuy nhiên,
có những công cụ để thực hiện bảo trì hệ thống tập tin, chẳng hạn như df và fsck, hoạt động trên
các khối cấp hệ thống tập tin.
HDFS, quá, có khái niệm về một khối, nhưng nó là một đơn vị-128 lớn hơn nhiều MB theo mặc định.
Giống như trong một hệ thống tập tin cho một đĩa duy nhất, tập tin trong HDFS được chia thành nhiều phần khối có kích thước,
mà được lưu trữ như các đơn vị độc lập. Không giống như một hệ thống tập tin cho một đĩa duy nhất, một tập tin trong
HDFS đó là nhỏ hơn so với một khối duy nhất không chiếm giá trị một khối đầy đủ của hiểu biết
lưu trữ nói dối. (Ví dụ, một tập tin 1 MB lưu trữ với một kích thước khối 128 MB sử dụng 1 MB
không gian đĩa, không phải 128 MB.) Khi không đủ tiêu chuẩn, thuật ngữ "khối" trong cuốn sách này đề cập đến một
khối trong HDFS.
Tại sao là một khối trong HDFS Vì vậy lớn?
HDFS khối là lớn so với khối đĩa, và lý do là để giảm thiểu chi phí
của tìm kiếm. Nếu khối là đủ lớn, thời gian cần để chuyển dữ liệu từ các đĩa
có thể được kéo dài hơn thời gian đáng kể để tìm cách bắt đầu của khối. Như vậy, xuyên
Ferring một tập tin lớn làm bằng nhiều khối hoạt động ở tốc độ truyền tải đĩa.
Một tính toán nhanh chóng cho thấy rằng nếu thời gian tìm kiếm là khoảng 10 ms và tốc độ truyền là
100 MB / s, để làm cho thời gian tìm kiếm 1% thời gian chuyển giao, chúng ta cần phải làm cho kích thước khối
khoảng 100 MB. Các mặc định thực sự là 128 MB, mặc dù nhiều HDFS cài đặt sử dụng
kích thước khối lớn hơn. Con số này sẽ tiếp tục được điều chỉnh tăng lên như tốc độ truyền phát triển
với các thế hệ mới của ổ đĩa.
Lập luận này không nên đi quá xa, tuy nhiên. Nhiệm vụ Bản đồ trong MapReduce thường
hoạt động trên một khối tại một thời gian, vì vậy nếu bạn có quá ít công việc (ít hơn các nút trong
cluster), công việc của bạn sẽ chạy chậm hơn so với họ có thể khác.