大批量插入数据,mysql批量更新与插入多种(数据库批量更新大量数据)
mysql的项目，需要设计一个快速上载的机制
最后的解决办法是利用了mysql的预处理语句的特性实现的
mysql的预处理语句支持多行数据的预处理，即insertinto(columnName,columnName，)values(?,?，)(?,?，)
这样你在绑定输入参数的时候可以在程序里将整张表的数据都绑定好然后调用一次执行就能将整张表的数据插入，比用mysql_query一行一行插入省的几倍的时间
不过你一次发到mysql服务器端的数据多的情况下，要设置my
ini文件下的一个配置项，把服务器允许一次发送的数据包的大小调大就行
绛旓細鎵归噺鎻掑叆锛屼簨鍔″懡浠ゃ1銆佸湪mysql鏁版嵁搴撲腑锛岄氳繃鎵归噺鎻掑叆鏁版嵁婧愬懡浠わ紝鍙互瀹炵幇1绉掑唴鍐欏叆1w鏉℃暟鎹殑鎿嶄綔銆2銆佸彲浠ラ氳繃浜嬪姟鍛戒护鍙互瀹炵幇1绉掑唴鍐欏叆1w鏉℃暟鎹殑鎿嶄綔銆
绛旓細杩欐牱浣犲湪缁戝畾杈撳叆鍙傛暟鐨勬椂鍊欏彲浠ュ湪绋嬪簭閲屽皢鏁村紶琛ㄧ殑鏁版嵁閮界粦瀹氬ソ鐒跺悗璋冪敤涓娆℃墽琛屽氨鑳藉皢鏁村紶琛ㄧ殑鏁版嵁鎻掑叆锛姣旂敤mysql_query涓琛屼竴琛屾彃鍏ョ渷鐨勫嚑鍊嶇殑鏃堕棿 涓嶈繃浣犱竴娆″彂鍒癿ysql鏈嶅姟鍣ㄧ鐨勬暟鎹鐨勬儏鍐典笅锛岃璁剧疆my ini鏂囦欢涓嬬殑涓涓厤缃」锛屾妸鏈嶅姟鍣ㄥ厑璁镐竴娆″彂閫佺殑鏁版嵁鍖呯殑澶у皬璋冨ぇ灏辫 ...
绛旓細鐒跺悗鎻掑叆鏁版嵁锛鍏朵腑鑰楁椂鏈闀跨殑搴旇鏄痠nsert鎻掑叆鏁版嵁浜嗐備负浜嗗噺灏忔枃浠跺ぇ灏忥紝鎺ㄨ崘浣跨敤鎵╁睍鎻掑叆鏂规硶锛屽嵆澶氳涓璧锋壒閲廼nsert锛岀被浼艰繖鏍凤細insert into table_name values (),(),(),...,(); 銆備娇鐢ㄦ墿灞曟彃鍏ユ瘮涓鏉℃潯鎻掑叆锛屾枃浠跺ぇ灏忚灏忓緢澶氾紝鎻掑叆閫熷害瑕佸揩濂藉嚑鍊嶃備娇鐢╩ysqldump瀵煎嚭鐨勬枃浠堕粯璁ゆ槸浣跨敤鎵归噺鎻掑叆鐨...
绛旓細1銆佷娇鐢ㄧ储寮曪細鍦ㄥ啓鍏ュぇ閲忔暟鎹椂锛屽彲浠ヤ娇鐢ㄧ储寮曟潵鎻愰珮鍐欏叆閫熷害銆備絾鏄紝鍦ㄥ垱寤虹储寮曟椂闇瑕佹敞鎰忥紝绱㈠紩鍙互鍔犻熸煡璇紝浣嗕篃浼氬崰鐢ㄧ鐩樼┖闂村苟闄嶄綆鍐欏叆閫熷害銆2銆鎵归噺鎻掑叆锛氫娇鐢ㄦ壒閲忔彃鍏ュ彲浠ヤ竴娆℃ф彃鍏ュ鏉鏁版嵁锛鑰屼笉鏄愭潯鎻掑叆3銆佷簨鍔★細浣跨敤浜嬪姟鍙互灏嗗涓搷浣滅粍鍚堟垚涓涓師瀛愭搷浣滐紝浠ョ‘淇濇暟鎹殑瀹屾暣鎬у拰涓鑷存с傚悓鏃讹紝...
绛旓細1.棣栧厛鍦ㄥ懡浠よ鎺у埗鍙颁腑鎵撳紑mysql鏁欑▼ 鎴栬鍛戒护鐨勫涓:mysql -u root -p database_name 鐒跺悗鎴栬浼氭彁绀鸿緭鍏ュ搴旂殑瀵嗙爜 2.涓嬮潰杩欐潯鍛戒护鎴栬瀵逛綘鏈夌敤,褰撲綘鎯虫洿鎹竴涓鏁版嵁搴撴暀绋嬬殑鏃跺 mysql>use database_name 鐒跺悗浣跨敤涓嬮潰杩欎釜鍛戒护 mysql>source d:datafilename.sql 褰撶劧浣犻渶瑕佸皢鏂囦欢鎵鍦ㄧ殑璺緞鎼炴竻妤...
绛旓細INSERT INTO TBL_TEST (id) VALUES(1);寰堟樉鐒,鍦MYSQL涓锛岃繖鏍风殑鏂瑰紡涔熸槸鍙鐨勩備絾鏄綋鎴戜滑闇瑕鎵归噺鎻掑叆鏁版嵁鐨勬椂鍊欙紝杩欐牱鐨勮鍙ュ嵈浼氬嚭鐜版ц兘闂銆備緥濡傝锛屽鏋滄湁闇瑕佹彃鍏100000鏉鏁版嵁锛閭ｄ箞灏遍渶瑕佹湁100000鏉nsert璇彞锛屾瘡涓鍙ラ兘闇瑕佹彁浜ゅ埌鍏崇郴寮曟搸閭ｉ噷鍘昏В鏋愶紝浼樺寲锛岀劧鍚庢墠鑳藉鍒拌揪瀛樺偍寮曟搸鍋氱湡鐨勬彃鍏ュ伐浣...
绛旓細濡傛灉鐢变簬鍚勭鍘熷洜锛屽鑷磋繖涓鎻掑叆杩樻槸寰堟參锛 鑰屼笖浣犵殑MYSQL鍙堟槸5.0浠ヤ笂鐗堟湰鐨勮瘽锛屽彲浠ヤ娇鐢˙ulkCopy鏉ヨ繘琛鎵归噺鎿嶄綔銆侭ulkCopy鐨勫師鐞嗗氨鏄疌lient鐩存帴鎶婁竴涓暟缁勶紙DataTable锛変紶缁橠B锛岀劧鍚庝紶鍏ヨ〃鍚嶏紝鎵鏈夌殑缂栬瘧銆佹搷浣滈兘鐢盌B鑷繁瀹屾垚锛屾晥鐜囧緢楂樸傚紩鐢MySql.Data.dll 锛 璋冪敤MysqlBulkCopy鍑芥暟鍗冲彲銆傝繖涓嚱鏁板湪澶勭悊...
绛旓細, 'deng' , 'Beijing');杩欐牱灏鎵归噺鎻掑叆鏁版嵁浜嗭紝 閬靛惊杩欐牱鐨勮娉曪紝灏卞彲浠ユ壒閲忔彃鍏ユ暟鎹簡銆傛墽琛屾垚鍔燂紝鎴浘锛氭嵁璇达紝鍦ㄧ▼搴忓紑鍙戜腑锛屼竴娆℃彃鍏ュ鏉℃暟鎹紝姣旈愭涓鏉′竴鏉＄殑鎻掑叆鏁版嵁锛鏁堢巼楂樺緢澶 鎵浠ュ湪绋嬪簭寮鍙戠殑鏃跺欙紝浣跨敤姝ゆ壒閲忔彃鍏ワ紝涔熸槸姣旇緝涓嶉敊鐨勩傛璇彞鍦MySQL 5锛 postgreSQL 9.3鎵ц閫氳繃銆
绛旓細浣跨敤JDBC杩炴帴MySQL鏁版嵁搴撹繘琛鏁版嵁鎻掑叆鐨勬椂鍊欙紝鐗瑰埆鏄澶ф壒閲忔暟鎹杩炵画鎻掑叆锛10W+锛夛紝濡備綍鎻愰珮鏁堢巼鍛紵鍦↗DBC缂栫▼鎺ュ彛涓璖tatement 鏈変袱涓柟娉曠壒鍒煎緱娉ㄦ剰锛欰dds a set of parameters to this PreparedStatement object's batch of commands.Submits a batch of commands to the database for execution and if...
绛旓細1.鐢╯tart transaction鍏抽棴mysql鐨勮嚜鍔ㄦ彁浜わ紝鍚堢悊璁剧疆鎻掑叆鎵归噺澶у皬锛屼笉瑕佷竴鏉鏁版嵁鎻愪氦涓娆°2.淇敼琛ㄧ殑瀛樺偍寮曟搸InnoDB涓篗yISAM銆(鍥犱负InnoDB涓瓨鍦╮edo log鏃ュ織锛屾瘡娆℃洿鏂拌〃鐨勭粨鏋滃厛鍐欏叆redo log涓紝绛塺edo log婊′簡涔嬪悗鍐嶅啓鍏ョ鐩樿岃繖涓繃绋嬫槸浼氬仠姝㈠叾浠栨墍鏈夌殑浜嬪姟)3.浼樺寲SQL(涓鏉QL璇彞鎻掑叆澶氭潯鏁版嵁)4....
