hadoop必须在虚拟机上运行吗
是的 这学期的前两个实验都是用Hadoop通过MapReduce来实现大数据分析，老师给出的建议操作系统是Linux。诚然Linux下Hadoop的集群开发是有优势的，但是在编写代码时Linux下的Java配合Hadoop的debug属实是过于复杂，相比之下课程的考察点是对MapReduce的使用，因此使用Windows环境开发也不是不能理解。绛旓細鐢熶骇鐜server鏈濂戒笉瑕佹嬁鏉ラ殢渚垮仛瀹為獙,铏界劧浣犳槸寤鸿櫄鏈, 浣嗗鎬ц兘鐨勫奖鍝嶆槸鏄剧劧鐨..鐪嬩綘浠瑂erver鐨勯厤缃惂..
绛旓細濂藉儚涓嶈锛岃繖涓槸閽堝Linux绯荤粺鍋氱殑鏋舵瀯銆傛兂鍦╓indows涓婅繍琛锛闇鍦Windows涓婅Linux铏氭嫙鏈锛岄儴缃Hadoop銆
绛旓細铏氭嫙鏈涓嶆槸蹇呴』鐨勫晩,鍙互鐩存帴鍦╩ac涓婅繘琛岄厤缃,濡傛灉鏈夋磥鐧,涓嶅笇鏈涘奖鍝嶆棩鍚巑ac鐨勪娇鐢,鍙互鑰冭檻瀹夎铏氭嫙鏈,涓嶈繃鏇存帹鑽愮敤docker鏉ヤ唬鏇胯櫄鎷熸満,鐢ㄨ捣鏉ユ洿鏂逛究鏇村揩鎹,瀵圭郴缁熺殑褰卞搷涔熸渶灏
绛旓細鏃犳墍璋撲粈涔铏氭嫙鏈锛岃櫄鎷熸満鍙槸涓涓畨瑁呯郴缁熺殑瀹瑰櫒锛岀幇鍦ㄥ競闈笂鏈甯哥敤鐨勬槸VMware,鍔熻兘闈炲父寮哄ぇ锛屽彲浠ュ府鍔╀綘鏇村揩鏇存柟渚跨殑杩涜瀛︿範锛屼笅杞界殑璇濈櫨搴︽悳绱笅锛屼娇鐢ㄦ椂瑕瀵嗗寵鐨勶紝浣犲彲浠ョ綉涓婃壘涓涓厤璐圭殑瀵嗗寵锛屽緢澶氱殑
绛旓細閫氬父閮芥槸闃茬伀澧欒缃棶棰橈紝 浣闇瑕妫鏌indows闃茬伀澧欓厤缃紝 濡傛灉linux涔熸湁闃茬伀澧欙紝涔熼渶瑕佹鏌ラ厤缃瓥鐣ャ傚鏋滅‘璁や笉鏄槻鐏闂锛屽啀鏍稿涓涓hadoop鐨閰嶇疆锛岀‘璁や竴涓嬬鍙ｆ槸寮鏀惧湪鎵鏈夌殑IP鍦板潃涓婄殑锛岃屼笉鏄粎寮鏀惧湪鏈湴127.0.0.1涓婇潰鐨勩
绛旓細1銆佷笉寤鸿鍏堝湪window/cygwin涓婃祴璇曪紝鐩存帴鐢ㄨ繖涓幆澧冩湁寰堝闂锛岄兘鏄笉濂界悊瑙ｇ殑銆2銆佹瘮杈冨悎鐞嗙殑鍋氭硶锛屽鏋滄病鏈夌湡姝ｇ殑linux鐨勭幆澧冧笅锛屽厛鐢╲mware涓婅櫄鎷2-3鍙發inux铏氭嫙鏈锛屽湪鍏朵笂鎸夌収缃戜笂鐨勬暀绋嬶紝鎼炲嚭鏉ワ紝鎶婂悇涓睘鎬ч厤缃拰缁嗚妭閮芥悶鏄庣櫧锛屽啀寰cygwin涓婅浆灏遍潪甯哥畝鍗曚簡銆傚啀鑰冩煡涓嬪惂銆
绛旓細鐢ㄤ簬娴嬭瘯锛屾垜鐢4鍙铏氭嫙鏈鎼缓鎴愪簡hadoop缁撴瀯 鎴戠敤浜嗕袱涓彴寮忔満銆備竴涓獂p绯荤粺锛屼竴涓獁in7绯荤粺銆傛瘡鍙扮數鑴戣涓や釜铏氭嫙鏈猴紝瑕佷笉鐒跺唴瀛樺氨婊′簡銆1銆佸畨瑁呰櫄鎷熸満鐜 Vmware锛屾敹璐逛骇鍝侊紝鍗犲唴瀛樿緝澶с傛垨 Oracle鐨刅irtualBox锛屽紑婧愪骇鍝侊紝鍗犲唴瀛樿緝灏忥紝浣嗗畨瑁卽buntu杩囩▼涓紝閲嶅惎浼氬嚭閿欍傛垜閫塚mware銆2銆佸畨瑁呮搷浣滅郴缁 ...
绛旓細浣犳病鏈夐厤ssh鍏嶅瘑鐧诲綍锛屼綘鐨勯偅涔坣amenode鍚姩浜嗭紝浣嗘槸鍏朵粬鑺傜偣鍥犱负娌℃湁鍏嶅瘑鐧诲綍锛屾墍浠ュ惎鍔ㄤ笉浜
绛旓細鍙互锛屽湪鐢佃剳涓婂畨瑁铏氭嫙鏈锛岃櫄鎷熷嚭3涓妭鐐癸紝灏卞彲浠ユ惌寤轰竴涓畬鍏ㄥ垎甯冨紡鐨凥adoop闆嗙兢浜嗐傝櫄鎷熸満寤鸿閫塚irtualBox锛屽畨瑁呭畬姣旇緝灏忥紙鐩告瘮浜嶸MWare 锛夈傚叧浜庤櫄鎷熸満鐨勫畨瑁呰鐧惧害鏁欑▼銆傚叾涓竴涓櫄鎷熸満Ubuntu鎴栧叾浠杔inux瀹夎瀹屾垚鍚庯紝鍙互閫氳繃澶嶅埗鍔熻兘瀹夎鍏朵粬涓や釜锛屽叾涓寘鎷琂DK鐨勫畨瑁呴厤缃紝Hadoop鐨瀹夎锛堝叾瀹炲氨鏄В鍘嬶紝...
绛旓細鍦℉adoop鐢熸佸湀閲,鏈夊悇绉嶅悇鏍风殑宸ュ叿,鍏磋杩囦簺鏃跺欏氨浼氱敤鐨勪笂,鍦ㄥ姞涓奌adoop寮鍙慚/R銆侀儴缃睲/R,浠ュ強鍗囩骇Hadoop绛夌瓑绛,鐢辨鐪嬫潵鏈夊繀瑕佽姳鐐瑰績鎬濆Hadoop鐨瀹夎鐩綍瑙勫垝涓鐣傛垜瀹夎Hadoop鐨刉indows鏄竴涓铏氭嫙鏈,骞朵笖鍙垱寤轰簡涓涓垎鍖,鎵浠hadoop鏂囦欢澶瑰氨鏀惧湪C鐩樼殑鏍圭洰褰曚簡銆備互涓嬫槸鎴戠殑鐩綍缁撴瀯:Hadoop瀹夎Hadoop鍦C鐩樼殑...
