作者iduhc (菠萝面包)
看板Cloud
标题[问题] 有关Hadoop的上传
时间Wed Mar 23 10:40:14 2011
因为没实际用过Hadoop,所以请问一下
我们将一档案上传到一个hadoop伺服器上,他是如何储存这个档案?
假设我们有3个node而当我们上传至其中一个伺服器时Hadoop会自动做切分
分散到这3个node上吗?然後可用name Node追踪资料位置?
Hadoop并不允许使用者指定档案在切分段後所摆放的节点?
以上谢谢回答~~~
--
※ 发信站: 批踢踢实业坊(ptt.cc)
◆ From: 140.116.130.168
1F:推 gmoz:先SURVEY HDFS 03/23 18:53
2F:推 losehole:记得64MB一个trunk~存到最後一个会记录用了多少动态存取 03/23 21:55
3F:→ gmoz:好奇原po想要做什麽XD 03/23 22:07
4F:→ gmoz:因为使用HDFS很简单 只要上传下载就对了 背後hadoop都帮你弄 03/23 22:07
5F:→ iduhc:想对有储存资料的node做平行上传和下载 03/23 22:36
6F:→ iduhc:这样看来大概下载才能够追踪到资料,做平行下载 03/23 22:37
7F:→ iduhc:上传的话就不知怎麽办了 03/23 22:38
8F:推 gmoz:HDFS也是open source吧 翻翻看吧XDDDDDDDDDDDD 03/23 22:52
9F:→ iduhc:好像真的没有提供类似的API 03/23 22:56
11F:→ gmoz:问问JAZZ大 03/23 22:57
12F:→ iduhc:保险起见问一下好了 03/23 23:01