首个K8s大数据平台开源，一键部署真的免费吗？
首个Kubernetes大数据平台开源！一键部署，免费使用！智领云自主研发的创新成果——Kubernetes Data Platform (KDP)，已正式开源，旨在简化开发者在Kubernetes上部署和管理大数据组件的流程。只需基本命令行工具，开发者就能轻松创建以前昂贵的大数据平台，无需重复研发，节省大量时间和资金。
在高级安装模式下，KDP允许用户在现有Kubernetes集群上无缝集成运行Hadoop、Hive、Spark、Kafka、Flink和MinIO等组件，无需单独构建大数据集群。这不仅降低了准入门槛，还提供了高度集成的单机体验，无论是测试还是实验环境都能快速部署和使用。
开源的背后，是智领云回馈社区的承诺。企业版KDP经过实践验证，性能稳定，能够满足生产级项目需求，通过开源，我们希望能降低大数据组件在Kubernetes上的部署复杂度，让更多开发者受益。
KDP的核心亮点在于其集成度和运维管理能力。它在Kubernetes上原生支持分布式功能，将多大数据组件统一管理，提供直观的UI界面，简化运维工作。在资源利用上，KDP利用K8s的优势，提升资源利用率，对比传统平台，能有效节省至少30%的资源。
现在，任何人都可以在Github上搜索“kubernetes”开始体验KDP带来的便利，包括：
- 高效集成：标准化的部署和配置，大大缩短项目开发周期；
- 高效运维：K8s上的大数据组件管理抽象层，提升部署和升级操作效率；
- 资源优化：精细化资源管理，KDP可将资源利用率提升至60%以上。
我们欢迎社区成员的参与和建议，无论是通过Github议题还是直接联系我们，智领云都愿意与您共同推动Kubernetes大数据平台的发展。
绛旓細棣栦釜Kubernetes澶ф暟鎹钩鍙板紑婧锛涓閿閮ㄧ讲锛屽厤璐逛娇鐢紒鏅洪浜戣嚜涓荤爺鍙戠殑鍒涙柊鎴愭灉鈥斺擪ubernetes Data Platform (KDP)锛屽凡姝ｅ紡寮婧愶紝鏃ㄥ湪绠鍖栧紑鍙戣呭湪Kubernetes涓婇儴缃插拰绠＄悊澶ф暟鎹粍浠剁殑娴佺▼銆傚彧闇鍩烘湰鍛戒护琛屽伐鍏凤紝寮鍙戣呭氨鑳借交鏉惧垱寤轰互鍓嶆槀璐电殑澶ф暟鎹钩鍙帮紝鏃犻渶閲嶅鐮斿彂锛岃妭鐪佸ぇ閲忔椂闂村拰璧勯噾銆傚湪楂樼骇瀹夎妯″紡涓嬶紝KDP...
绛旓細k8鎰忔濇槸Kubernetes锛屾槸Google寮婧愮殑涓涓鍣ㄧ紪鎺掑紩鎿庯紝瀹冩敮鎸佽嚜鍔ㄥ寲閮ㄧ讲銆佸ぇ瑙勬ā鍙几缂┿佸簲鐢ㄥ鍣ㄥ寲绠＄悊銆侹ubernetes锛堢畝绉K8s锛夋槸涓涓紑婧鐨勫鍣ㄧ紪鎺掔郴缁燂紝瀹冪敤浜庤嚜鍔ㄥ寲閮ㄧ讲銆佹墿灞曞拰绠＄悊瀹瑰櫒鍖栧簲鐢ㄧ▼搴忋侹8s鎻愪緵浜嗕竴绉嶆娊璞″眰锛屼娇寰楀紑鍙戜汉鍛樿兘澶熶笓娉ㄤ簬搴旂敤绋嬪簭鐨勪唬鐮侊紝鑰屼笉鐢ㄥ叧蹇冨簳灞傜殑瀹瑰櫒鍖栧熀纭璁炬柦銆侹8s鐨勬牳...
绛旓細闆嗙兢杞欢涓昏鍖呮嫭锛欻adoop銆丼park銆並afka銆丏ocker Swarm鍜孠ubernetes銆1. Hadoop锛欻adoop鏄竴涓寮婧鐨勫垎甯冨紡璁＄畻妗嗘灦锛屼富瑕佺敤浜庡鐞嗗ぇ瑙勬ā鏁版嵁銆傚畠鍏佽鍦ㄥ粔浠风殑纭欢闆嗙兢涓婅繘琛屽垎甯冨紡瀛樺偍鍜岃绠椼傚叾鏍稿績缁勪欢鍖呮嫭HDFS锛圚adoop鍒嗗竷寮忔枃浠剁郴缁燂級鍜孧apReduce銆2. Spark锛欰pache Spark鏄竴涓揩閫熺殑澶ф暟鎹澶勭悊寮曟搸锛岀敤浜庡鐞...
绛旓細棣栧厛锛屽垎甯冨紡鏂囦欢绯荤粺锛屽Hadoop HDFS锛屽凡缁忚浣嶇粰浜嗗璞″瓨鍌ㄧ郴缁燂紝濡侫mazon S3鍜岄樋閲屼簯鐨凮SS銆傚湪浜戠幆澧冧腑锛岃繖绉嶈浆鍙樻槸蹇呯劧鐨勶紝鍥犱负浜戞湇鍔℃彁渚涘晢鎻愪緵浜嗘洿鍔犱究鎹峰拰楂樻晥鐨勫瓨鍌ㄨВ鍐虫柟妗堬紝濡侫WS鐨凟MR锛屽畠鏁村悎浜嗘暣涓澶ф暟鎹澶勭悊娴佺▼銆傛帴鐫锛岄泦缇ょ鐞嗙郴缁熸槸鍙︿竴涓噸瑕佺殑鏉垮潡銆傛浘缁忕殑Hadoop YARN閫愭笎璁╀綅浜嶬ubernetes锛...
绛旓細Kafka鍒欎富瀵煎疄鏃舵暟鎹祦锛岃孲torm銆丼park Streaming鎴朏link鍒欒礋璐ｅ疄鏃惰绠椼備换鍔¤皟搴︽柟闈紝Oozie鎴朅zkaban鏄笉鍙垨缂虹殑瀹堟姢鑰咃紝鐩戞帶涓庣鐞嗗垯閫氳繃Grafana銆丳rometheus绛夊伐鍏峰疄鐜帮紝鏁版嵁瀹夊叏鐢盇pache Ranger鎴朣entry鎻愪緵淇濋殰銆備簯鍩虹鏋舵瀯锛屽Kubernetes锛K8s锛夛紝鍒欑畝鍖栦簡骞冲彴鐨勯儴缃蹭笌杩愮淮銆澶ф暟鎹钩鍙鐨勬瘡涓涓幆鑺傦紝...
绛旓細k8s瀹樻柟瀹ｇО 鏀寔鏈澶150000涓猵ods锛5000涓猲ode銆備絾鏄幇瀹炵敓浜х幆澧冧腑涓氬姟鏃跺父鏈夎秴杩囪瑙勬ā鐨勮堪姹傦紝姣斿璇村ぇ鍨嬬數鍟嗗娣樺疂锛屾嫾澶氬锛屽張姣斿AI鍜澶ф暟鎹澶勭悊鐨剋orkflow銆傚悓鏃跺嚭浜庡悎浣滃拰涓氬姟杩版眰锛屼竴瀹跺叕鍙歌繕鏈夊彲鑳藉皢涓氬姟閮ㄧ讲鍒颁笉鍚岀殑浜戝巶鍟嗭紝鎴栬呰嚜寤烘満鎴垮拰鍏湁浜戦厤鍚堜娇鐢ㄣ傚洜姝8s澶氶泦缇ゆ柟妗堜篃鏄簯鍘熺敓棰嗗煙鐨勪竴涓...
绛旓細瀵逛簬绂荤嚎鏁版嵁澶勭悊锛岃繕鏄渚濋潬yarn銆傛湭鏉ュ彲浠ヨ冭檻灏唝arn鍜K8S鏁村悎锛屽舰鎴愪竴涓氱敤璧勬簮璋冨害绯荤粺銆傚ぇ鏁版嵁鎶鏈笉浼氭病钀斤紝浠栦細浣滀负PaaS涓殑涓閮ㄥ垎锛屼负瀹㈡埛鎻愪緵澶ф暟鎹満鏅殑涓氬姟蹇熸瀯寤鸿兘鍔涳紝鏋舵瀯鑳藉姏锛屼竴绔欏紡鏁版嵁鍒嗘瀽鏈嶅姟銆備粠杩欎釜瑙掑害鏉ョ湅锛屽ぇ鏁版嵁涓嶄細钀藉癁锛岄殢鐫澶ф暟鎹笂浜戯紝灏卞彲浠ヤ笌浜戞灦鏋勭粨鍚堣摤鍕冨彂灞曘
绛旓細鐢盢ASA鍜 Rackspace鍏徃鍙戣捣鐨勪簯璁＄畻寮婧椤圭洰-OpenStack 2020骞村彂甯冧簡绗21鐗堢殑骞冲彴(浠ｅ彿Ussuri),鍖呮嫭鏀寔瑁搁噾铻嶇‖浠堕厤缃殑Ironic銆佹敮鎸佸鍣ㄥ寲閮ㄧ讲鐨凨olla銆佹敮鎸佸鍣ㄩ棿IPV6閫氫俊鐨凨unyr銆佹敮鎸佽竟缂樼幆澧冭礋杞藉潎琛＄殑Octavia銆2020骞碦ed Hat鍏徃鍙戝竷浜嗛潰鍚K8S銆佸彇浠ocker鐨勬柊瀹瑰櫒杩愯鏃舵妧鏈疌RI-O,鍦ㄥ鍣ㄥ競鍦烘巰璧蜂簡鏂扮殑娴疆銆侷BM...
绛旓細Go璇█鍦ㄤ簯璁＄畻銆澶ф暟鎹銆佸井鏈嶅姟銆侀珮骞跺彂棰嗗煙搴旂敤搴旂敤闈炲父骞挎硾銆侭AT澶у巶姝ｅ湪鎶奊o浣滀负鏂伴」鐩紑鍙戠殑棣栭夎瑷銆侴o璇█搴旂敤鑼冨洿锛1銆佹湇鍔＄寮鍙戯細浠ュ墠浣犱娇鐢–鎴栬匔++鍋氱殑閭ｄ簺浜嬫儏锛岀敤Go鏉ュ仛寰堝悎閫傦紝渚嬪鏃ュ織澶勭悊銆佹枃浠剁郴缁熴佺洃鎺х郴缁熺瓑;2銆丏evOps锛氳繍缁寸敓鎬佷腑鐨凞ocker銆K8s銆乸rometheus銆乬rafana銆乷pen-falcon绛夐兘...
绛旓細鏀寔绉熸埛妯″紡锛屾棤璁洪噰璐崟浣撴湇鍔￠儴缃诧紝杩樻槸寰湇鍔℃灦鏋勯儴缃诧紝閮芥敮鎸佺鎴锋ā寮忥紝鍦ㄧ鎴锋ā寮忎笅锛屽悇绉熸埛鐨勬暟鎹敮鎸佹寜鐓х鎴疯繘琛岀墿鐞嗗垎搴撱侀殧绂汇侲10鏀寔瀹瑰櫒鍖栭儴缃诧紝閫傞厤k8s+docker绛夊鍣ㄥ寲閮ㄧ讲銆侲10鏀寔鍒嗗簱鍒嗚〃璇诲啓鍒嗙锛屾祦绋嬬瓑澶ф暟鎹閲忓簲鐢紝鍙寜搴旂敤銆佹寜鏃堕棿绛夌淮搴﹀垎搴撳垎琛紝鏀寔鏁版嵁鐨勮鍐欏垎绂汇傛硾寰瓻10浜у搧鐨...
