婷婷综合国产,91蜜桃婷婷狠狠久久综合9色 ,九九九九九精品,国产综合av

主頁 > 知識庫 > Perl訪問MSSQL并遷移到MySQL數據庫腳本實例

Perl訪問MSSQL并遷移到MySQL數據庫腳本實例

熱門標簽:熱門電銷機器人 上海企業外呼系統 河南虛擬外呼系統公司 萬利達百貨商場地圖標注 惠州龍門400電話要怎么申請 電話機器人哪里有賣 外呼電信系統 智能機器人電銷神器 okcc外呼系統怎么調速度

Linux下沒有專門為MSSQL設計的訪問庫,不過介于MSSQL本是從sybase派生出來的,因此用來訪問Sybase的庫自然也能訪問MSSQL,FreeTDS就是這么一個實現。
Perl中通常使用DBI來訪問數據庫,因此在系統安裝了FreeTDS之后,可以使用DBI來通過FreeTDS來訪問MSSQL數據庫,例子:

復制代碼 代碼如下:

using DBI;
my $cs = "DRIVER={FreeTDS};SERVER=主機;PORT=1433;DATABASE=數據庫;UID=sa;PWD=密碼;TDS_VERSION=7.1;charset=gb2312";
my $dbh = DBI->connect("dbi:ODBC:$cs") or die $@;

因為本人不怎么用windows,為了研究QQ群數據庫,需要將數據從MSSQL中遷移到MySQL中,特地為了QQ群數據庫安裝了一個Windows Server 2008和SQL Server 2008r2,不過過幾天評估就到期了,研究過MySQL的Workbench有從MS SQL Server遷移數據的能力,不過對于QQ群這種巨大數據而且分表分庫的數據來說顯得太麻煩,因此寫了一個通用的perl腳本,用來將數據庫從MSSQL到MySQL遷移,結合bash,很方便的將這二十多個庫上百張表給轉移過去了,Perl代碼如下:
復制代碼 代碼如下:

#!/usr/bin/perl
use strict;
use warnings;
use DBI;


die "Usage: qq db\n" if @ARGV != 1;
my $db = $ARGV[0];

print "Connectin to databases $db...\n";
my $cs = "DRIVER={FreeTDS};SERVER=MSSQL的服務器;PORT=1433;DATABASE=$db;UID=sa;PWD=MSSQL密碼;TDS_VERSION=7.1;charset=gb2312";

sub db_connect
{
    my $src = DBI->connect("dbi:ODBC:$cs") or die $@;
    my $target = DBI->connect("dbi:mysql:host=MySQL服務器", "MySQL用戶名", "MySQL密碼") or die $@;
    return ($src, $target);
}
my ($src, $target) = db_connect;

print "Reading table schemas....\n";

my $q_tables = $src->prepare("SELECT name FROM sysobjects WHERE xtype = 'U' AND name != 'dtproperties';");#獲取所有表名
my $q_key_usage = $src->prepare("SELECT TABLE_NAME, COLUMN_NAME from INFORMATION_SCHEMA.KEY_COLUMN_USAGE;");#獲取表的主鍵
$q_tables->execute;
my @tables = ();
my %keys = ();
push @tables, @_ while @_ = $q_tables->fetchrow_array;

$q_tables->finish;

$q_key_usage->execute();
$keys{$_[0]} = $_[1] while @_ = $q_key_usage->fetchrow_array;
$q_key_usage->finish;


#獲取表的索引信息
my $q_index = $src->prepare(qq(
    SELECT T.name, C.name
    FROM sys.index_columns I
    INNER JOIN sys.tables T ON T.object_id = I.object_id
    INNER JOIN sys.columns C ON C.column_id = I.column_id AND I.object_id = C.object_id;
));
$q_index->execute;
my %table_indices = ();
while(my @row = $q_index->fetchrow_array)
{
    my ($table, $column) = @row;
    my $columns = $table_indices{$table};
    $columns = $table_indices{$table} = [] if not $columns;
    push @$columns, $column;
}
$q_index->finish;

#在目標MySQL上創建對應的數據庫
$target->do("DROP DATABASE IF EXISTS `$db`;") or die "Cannot drop old database $db\n";
$target->do("CREATE DATABASE `$db` DEFAULT CHARSET = utf8 COLLATE utf8_general_ci;") or die "Cannot create database $db\n";
$target->disconnect;
$src->disconnect;


my $total_start = time;
for my $table(@tables)
{
    my $pid = fork;
    unless($pid)
    {
        ($src, $target) = db_connect;
        my $start = time;
        $src->do("USE $db;");
        #獲取表結構,用來生成MySQL用的DDL
        my $q_schema = $src->prepare("SELECT COLUMN_NAME, IS_NULLABLE, DATA_TYPE, CHARACTER_MAXIMUM_LENGTH from INFORMATION_SCHEMA.COLUMNS where TABLE_NAME = ? ORDER BY ORDINAL_POSITION;");
        $target->do("USE `$db`;");
        $target->do("SET NAMES utf8;");
        my $key_column = $keys{$table};
        my $ddl = "CREATE TABLE `$table` ( \n";
        $q_schema->execute($table);
        my @fields = ();
        while(my @row = $q_schema->fetchrow_array)
        {
            my ($column, $nullable, $datatype, $length) = @row;
            my $field = "`$column` $datatype";
            $field .= "($length)" if $length;
            $field .= " PRIMARY KEY" if $key_column eq $column;
            push @fields, $field;
        }
        $ddl .= join(",\n", @fields);
        $ddl .= "\n) ENGINE = MyISAM;\n\n";
        $target->do($ddl) or die "Cannot create table $table\n";
        #創建索引
        my $indices = $table_indices{$table};
        if($indices)
        {
            for(@$indices)
            {
                $target->do("CREATE INDEX `$_` ON `$table`(`$_`);\n") or die "Cannot create index on $db.$table$.$_\n";
            }
        }
        #轉移數據
        my @placeholders = map {'?'} @fields;
        my $insert_sql = "INSERT DELAYED INTO $table VALUES(" .(join ', ', @placeholders) . ");\n";
        my $insert = $target->prepare($insert_sql);
        my $select = $src->prepare("SELECT * FROM $table;");
        $select->execute;
        $select->{'LongReadLen'} = 1000;
        $select->{'LongTruncOk'} = 1;
        $target->do("SET AUTOCOMMIT = 0;");
        $target->do("START TRANSACTION;");
        my $rows = 0;
        while(my @row = $select->fetchrow_array)
        {
            $insert->execute(@row);
            $rows++;
        }
        $target->do("COMMIT;");
        #結束,輸出任務信息
        my $elapsed = time - $start;
        print "Child process $$ for table $db.$table done, $rows records, $elapsed seconds.\n";
        exit(0);
    }
}
print "Waiting for child processes\n";
#等待所有子進程結束
while (wait() != -1) {}
my $total_elapsed = time - $total_start;
print "All tasks from $db finished, $total_elapsed seconds.\n";

這個腳本會根據每一個表fork出一個子進程和相應的數據庫連接,因此做這種遷移之前得確保目標MySQL數據庫配置的最大連接數能承受。
然后在bash下執行

復制代碼 代碼如下:

for x in {1..11};do ./qq.pl QunInfo$x; done
for x in {1..11};do ./qq.pl GroupData$x; done

就不用管了,腳本會根據MSSQL這邊表結構來在MySQL那邊創建一樣的結構并配置索引。

您可能感興趣的文章:
  • MySQL 數據庫跨操作系統的最快遷移方法
  • mysql 備份與遷移 數據同步方法
  • mysql中用于數據遷移存儲過程分享
  • 關于MySQL數據遷移--data目錄直接替換注意事項的詳解
  • MySQL下海量數據的遷移步驟分享
  • MySQL數據庫遷移data文件夾位置詳細步驟
  • 使用perl實現拆分數據表(mysql)并遷移數據實例
  • 簡述MySQL分片中快速數據遷移

標簽:淮安 綏化 百色 合肥 周口 周口 綿陽 秦皇島

巨人網絡通訊聲明:本文標題《Perl訪問MSSQL并遷移到MySQL數據庫腳本實例》,本文關鍵詞  Perl,訪問,MSSQL,并,遷,移到,;如發現本文內容存在版權問題,煩請提供相關信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《Perl訪問MSSQL并遷移到MySQL數據庫腳本實例》相關的同類信息!
  • 本頁收集關于Perl訪問MSSQL并遷移到MySQL數據庫腳本實例的相關信息資訊供網民參考!
  • 推薦文章
    主站蜘蛛池模板: 蒙阴县| 上蔡县| 会昌县| 金川县| 亳州市| 盐池县| 永新县| 五家渠市| 孝义市| 莱州市| 尤溪县| 天全县| 铜鼓县| 义乌市| 湾仔区| 竹溪县| 长泰县| 班玛县| 盈江县| 正阳县| 巴南区| 浙江省| 锡林浩特市| 简阳市| 巴楚县| 诸暨市| 垦利县| 溆浦县| 拜泉县| 新建县| 永昌县| 镇雄县| 吕梁市| 东乌珠穆沁旗| 延边| 和平县| 正安县| 巴南区| 丽水市| 昆山市| 定兴县|