婷婷综合国产,91蜜桃婷婷狠狠久久综合9色 ,九九九九九精品,国产综合av

主頁 > 知識庫 > 88秒插入1000萬條數據到MySQL數據庫表的操作方法

88秒插入1000萬條數據到MySQL數據庫表的操作方法

熱門標簽:高德地圖標注模式 湘潭電銷機器人咨詢電話 電銷機器人針對的 高德地圖標注中心個人注冊 外呼系統防封號違法嗎 寶應電信400電話辦理費用 如何在高德地圖標注新地址 外呼系統服務 400電話辦理都選易號網

我用到的數據庫為,mysql數據庫5.7版本的

首先自己準備好數據庫表

其實我在插入1000萬條數據的時候遇到了一些問題,現在先來解決他們,一開始我插入100萬條數據時候報錯,控制臺的信息如下:

com.mysql.jdbc.PacketTooBigException: Packet for query is too large (4232009 > 4194304). You can change this value on the server by setting the max_allowed_packet' variable.

出現上面的錯誤是因為數據庫表的 max_allowed_packet 這個配置沒配置足夠大,因為默認的為4M的,后來我調為100M就沒報錯了

set global max_allowed_packet = 100*1024*1024* 

記住,設置好后重新登錄數據庫才能看的設置后的值

show VARIABLES like '%max_allowed_packet%'

代碼如下:

package insert;
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.SQLException;
import java.util.Date;
import com.mysql.jdbc.PreparedStatement;
public class InsertTest {
   public static void main(String[] args) throws ClassNotFoundException, SQLException {
     final String url = "jdbc:mysql://127.0.0.1/teacher" ; 
     final String name = "com.mysql.jdbc.Driver" ; 
     final String user = "root" ; 
     final String password = "123456" ; 
     Connection conn = null ; 
     Class.forName(name); //指定連接類型 
     conn = DriverManager.getConnection(url, user, password); //獲取連接 
     if (conn!= null ) {
       System.out.println( "獲取連接成功" );
       insert(conn);
     } else {
       System.out.println( "獲取連接失敗" );
     }
   }
   public static void insert(Connection conn) {
     // 開始時間
     Long begin = new Date().getTime();
     // sql前綴
     String prefix = "INSERT INTO t_teacher (id,t_name,t_password,sex,description,pic_url,school_name,regist_date,remark) VALUES " ;
     try {
       // 保存sql后綴
       StringBuffer suffix = new StringBuffer();
       // 設置事務為非自動提交
       conn.setAutoCommit( false );
       // 比起st,pst會更好些
       PreparedStatement pst = (PreparedStatement) conn.prepareStatement( "" ); //準備執行語句
       // 外層循環,總提交事務次數
       for ( int i = 1 ; i = 100 ; i++) {
         suffix = new StringBuffer();
         // 第j次提交步長
         for ( int j = 1 ; j = 100000 ; j++) {
           // 構建SQL后綴
           suffix.append( "('" + uutil.UUIDUtil.getUUID()+ "','" +i*j+ "','123456'" + ",'男'" + ",'教師'" + ",'www.bbk.com'" + ",'XX大學'" + ",'" + "2016-08-12 14:43:26" + "','備注'" + ")," );
         }
         // 構建完整SQL
         String sql = prefix + suffix.substring( 0 , suffix.length() - 1 );
         // 添加執行SQL
         pst.addBatch(sql);
         // 執行操作
         pst.executeBatch();
         // 提交事務
         conn.commit();
         // 清空上一次添加的數據
         suffix = new StringBuffer();
       }
       // 頭等連接
       pst.close();
       conn.close();
     } catch (SQLException e) {
       e.printStackTrace();
     }
     // 結束時間
     Long end = new Date().getTime();
     // 耗時
     System.out.println( "1000萬條數據插入花費時間 : " + (end - begin) / 1000 + " s" );
     System.out.println( "插入完成" );
   }
}

總結

以上所述是小編給大家介紹的88秒插入1000萬條數據到MySQL數據庫表的操作方法,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復大家的。在此也非常感謝大家對腳本之家網站的支持!

您可能感興趣的文章:
  • MySql 快速插入千萬級大數據的方法示例
  • java中JDBC實現往MySQL插入百萬級數據的實例代碼
  • mysql中迅速插入百萬條測試數據的方法
  • 教你如何6秒鐘往MySQL插入100萬條數據的實現

標簽:蘭州 馬鞍山 南充 賀州 佛山 宿遷 黔南 黃山

巨人網絡通訊聲明:本文標題《88秒插入1000萬條數據到MySQL數據庫表的操作方法》,本文關鍵詞  88秒,插入,1000,萬條,數據,;如發現本文內容存在版權問題,煩請提供相關信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《88秒插入1000萬條數據到MySQL數據庫表的操作方法》相關的同類信息!
  • 本頁收集關于88秒插入1000萬條數據到MySQL數據庫表的操作方法的相關信息資訊供網民參考!
  • 推薦文章
    主站蜘蛛池模板: 南乐县| 长乐市| 乌拉特前旗| 夏河县| 虹口区| 潢川县| 内丘县| 罗甸县| 青浦区| 射洪县| 无锡市| 罗田县| 尼玛县| 察哈| 洪洞县| 威宁| 扎兰屯市| 天峨县| 大英县| 丰镇市| 恭城| 德化县| 奉贤区| 湖北省| 南乐县| 常德市| 龙泉市| 灵璧县| 大余县| 青神县| 台安县| 胶南市| 巴南区| 丰顺县| 阜宁县| 冀州市| 舞阳县| 彭山县| 清原| 海林市| 衡山县|