已采納回答 / 叁金
你hadoop啟動(dòng)時(shí)不是用root用戶啟動(dòng)的吧？你可以修改hdfs /yyq的權(quán)限為777或者切換到hadoop的啟動(dòng)用戶進(jìn)行操作。
2019-02-08
最贊回答 / qq_單純永遠(yuǎn)_0
? ? ? ? ? ? ? ? ? ?? HBase ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? Hive用途： ? ?? 彌補(bǔ)Hadoop的實(shí)時(shí)操作 ? ? ?? 減少并行計(jì)算編寫(xiě)工作的批處理系統(tǒng)檢索方式：適用于檢索訪問(wèn) ? ? ? ? ? ? ? ? ? ? 適用于全表掃描存儲(chǔ)： ? ? ? 物理表 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 純邏輯表功能： ? ? ? HBase只負(fù)責(zé)組織文件 ? ? ? ? ?? Hive既要儲(chǔ)存文件又需要計(jì)算框架執(zhí)行效...
2018-12-28
講師回答 / 叁金
第一次請(qǐng)求會(huì)獲取到該文件所有block所有的datanode信息。? ?獲取文件完成之后，向namenode反饋block的狀態(tài)
2018-12-17
已采納回答 / 叁金
談一下我的感受吧，太多所謂的大數(shù)據(jù)工程師候選人，對(duì)于hadoop、hive、spark這些常用的大數(shù)據(jù)開(kāi)源工具說(shuō)的很6，但是java基礎(chǔ)薄弱（開(kāi)發(fā)能力薄弱）。其實(shí)其他崗位和方向都一樣，hadoop、hive、spark如何使用，應(yīng)屆生給個(gè)一兩個(gè)月都能學(xué)會(huì)。但是如何針對(duì)性的修改，優(yōu)化就能看出真正的水平了。大數(shù)據(jù)不光涉及到后端開(kāi)發(fā)，在你維護(hù)hadoop集群的過(guò)程中，你還屬于運(yùn)維。不要想太多，just do it
2018-12-07
最贊回答 / Cybtron
一個(gè)MapReduce作業(yè)由Map階段和Reduce階段兩部分組成，這兩階段會(huì)對(duì)數(shù)據(jù)排序，從這個(gè)意義上說(shuō)，MapReduce框架本質(zhì)就是一個(gè)Distributed Sort。在Map階段，Map Task會(huì)在本地磁盤(pán)輸出一個(gè)按照key排序（采用的是快速排序）的文件（中間可能產(chǎn)生多個(gè)文件，但最終會(huì)合并成一個(gè)），在Reduce階段，每個(gè)Reduce Task會(huì)對(duì)收到的數(shù)據(jù)排序，這樣，數(shù)據(jù)便按照Key分成了若干組，之后以組為單位交給reduce（）處理。很多人的誤解在Map階段，如果不使用Combiner便不會(huì)...
2018-10-24
