a亚洲精品_精品国产91乱码一区二区三区_亚洲精品在线免费观看视频_欧美日韩亚洲国产综合_久久久久久久久久久成人_在线区

首頁 > 編程 > Perl > 正文

Perl訪問MSSQL并遷移到MySQL數據庫腳本實例

2020-02-23 19:44:37
字體:
來源:轉載
供稿:網友

在項目開發中,有時項目開始使用的數據庫是SQL server,后來將存儲的數據庫調整為MySQL,上文是武林技術頻道小編帶給大家的Perl訪問MSSQL并遷移到MySQL數據庫腳本實例,一起來了解一下吧!

Linux下沒有專門為MSSQL設計的訪問庫,不過介于MSSQL本是從sybase派生出來的,因此用來訪問Sybase的庫自然也能訪問MSSQL,FreeTDS就是這么一個實現。
Perl中通常使用DBI來訪問數據庫,因此在系統安裝了FreeTDS之后,可以使用DBI來通過FreeTDS來訪問MSSQL數據庫,例子:

?

using DBI;
my $cs = "DRIVER={FreeTDS};SERVER=主機;PORT=1433;DATABASE=數據庫;UID=sa;PWD=密碼;TDS_VERSION=7.1;charset=gb2312";
my $dbh = DBI->connect("dbi:ODBC:$cs") or die $@;


因為本人不怎么用windows,為了研究QQ群數據庫,需要將數據從MSSQL中遷移到MySQL中,特地為了QQ群數據庫安裝了一個Windows Server 2008和SQL Server 2008r2,不過過幾天評估就到期了,研究過MySQL的Workbench有從MS SQL Server遷移數據的能力,不過對于QQ群這種巨大數據而且分表分庫的數據來說顯得太麻煩,因此寫了一個通用的perl腳本,用來將數據庫從MSSQL到MySQL遷移,結合bash,很方便的將這二十多個庫上百張表給轉移過去了,Perl代碼如下:

?

?

?


#!/usr/bin/perl
use strict;
use warnings;
use DBI;

?


die "Usage: qq db/n" if @ARGV != 1;
my $db = $ARGV[0];

print "Connectin to databases $db.../n";
my $cs = "DRIVER={FreeTDS};SERVER=MSSQL的服務器;PORT=1433;DATABASE=$db;UID=sa;PWD=MSSQL密碼;TDS_VERSION=7.1;charset=gb2312";

sub db_connect
{
??? my $src = DBI->connect("dbi:ODBC:$cs") or die $@;
??? my $target = DBI->connect("dbi:mysql:host=MySQL服務器", "MySQL用戶名", "MySQL密碼") or die $@;
??? return ($src, $target);
}
my ($src, $target) = db_connect;

print "Reading table schemas..../n";

my $q_tables = $src->prepare("SELECT name FROM sysobjects WHERE xtype = 'U' AND name != 'dtproperties';");#獲取所有表名
my $q_key_usage = $src->prepare("SELECT TABLE_NAME, COLUMN_NAME from INFORMATION_SCHEMA.KEY_COLUMN_USAGE;");#獲取表的主鍵
$q_tables->execute;
my @tables = ();
my %keys = ();
push @tables, @_ while @_ = $q_tables->fetchrow_array;

$q_tables->finish;

$q_key_usage->execute();
$keys{$_[0]} = $_[1] while @_ = $q_key_usage->fetchrow_array;
$q_key_usage->finish;


#獲取表的索引信息
my $q_index = $src->prepare(qq(
??? SELECT T.name, C.name
??? FROM sys.index_columns I
??? INNER JOIN sys.tables T ON T.object_id = I.object_id
??? INNER JOIN sys.columns C ON C.column_id = I.column_id AND I.object_id = C.object_id;
));
$q_index->execute;
my %table_indices = ();
while(my @row = $q_index->fetchrow_array)
{
??? my ($table, $column) = @row;
??? my $columns = $table_indices{$table};
??? $columns = $table_indices{$table} = [] if not $columns;
??? push @$columns, $column;
}
$q_index->finish;

#在目標MySQL上創建對應的數據庫
$target->do("DROP DATABASE IF EXISTS `$db`;") or die "Cannot drop old database $db/n";
$target->do("CREATE DATABASE `$db` DEFAULT CHARSET = utf8 COLLATE utf8_general_ci;") or die "Cannot create database $db/n";
$target->disconnect;
$src->disconnect;


my $total_start = time;
for my $table(@tables)
{
??? my $pid = fork;
??? unless($pid)
??? {
??????? ($src, $target) = db_connect;
??????? my $start = time;
??????? $src->do("USE $db;");
??????? #獲取表結構,用來生成MySQL用的DDL
??????? my $q_schema = $src->prepare("SELECT COLUMN_NAME, IS_NULLABLE, DATA_TYPE, CHARACTER_MAXIMUM_LENGTH from INFORMATION_SCHEMA.COLUMNS where TABLE_NAME = ? ORDER BY ORDINAL_POSITION;");
??????? $target->do("USE `$db`;");
??????? $target->do("SET NAMES utf8;");
??????? my $key_column = $keys{$table};
??????? my $ddl = "CREATE TABLE `$table` ( /n";
??????? $q_schema->execute($table);
??????? my @fields = ();
??????? while(my @row = $q_schema->fetchrow_array)
??????? {
??????????? my ($column, $nullable, $datatype, $length) = @row;
??????????? my $field = "`$column` $datatype";
??????????? $field .= "($length)" if $length;
??????????? $field .= " PRIMARY KEY" if $key_column eq $column;
??????????? push @fields, $field;
??????? }
??????? $ddl .= join(",/n", @fields);
??????? $ddl .= "/n) ENGINE = MyISAM;/n/n";
??????? $target->do($ddl) or die "Cannot create table $table/n";
??????? #創建索引
??????? my $indices = $table_indices{$table};
??????? if($indices)
??????? {
??????????? for(@$indices)
??????????? {
??????????????? $target->do("CREATE INDEX `$_` ON `$table`(`$_`);/n") or die "Cannot create index on $db.$table$.$_/n";
??????????? }
??????? }
??????? #轉移數據
??????? my @placeholders = map {'?'} @fields;
??????? my $insert_sql = "INSERT DELAYED INTO $table VALUES(" .(join ', ', @placeholders) . ");/n";
??????? my $insert = $target->prepare($insert_sql);
??????? my $select = $src->prepare("SELECT * FROM $table;");
??????? $select->execute;
??????? $select->{'LongReadLen'} = 1000;
??????? $select->{'LongTruncOk'} = 1;
??????? $target->do("SET AUTOCOMMIT = 0;");
??????? $target->do("START TRANSACTION;");
??????? my $rows = 0;
??????? while(my @row = $select->fetchrow_array)
??????? {
??????????? $insert->execute(@row);
??????????? $rows++;
??????? }
??????? $target->do("COMMIT;");
??????? #結束,輸出任務信息
??????? my $elapsed = time - $start;
??????? print "Child process $$ for table $db.$table done, $rows records, $elapsed seconds./n";
??????? exit(0);
??? }
}
print "Waiting for child processes/n";
#等待所有子進程結束
while (wait() != -1) {}
my $total_elapsed = time - $total_start;
print "All tasks from $db finished, $total_elapsed seconds./n";

?

這個腳本會根據每一個表fork出一個子進程和相應的數據庫連接,因此做這種遷移之前得確保目標MySQL數據庫配置的最大連接數能承受。
然后在bash下執行

?

for x in {1..11};do ./qq.pl QunInfo$x; done
for x in {1..11};do ./qq.pl GroupData$x; done


就不用管了,腳本會根據MSSQL這邊表結構來在MySQL那邊創建一樣的結構并配置索引。

以上就是武林技術頻道小編帶給大家的Perl訪問MSSQL并遷移到MySQL數據庫腳本實例,如果您覺得對您有所幫助,請繼續關注js.Vevb.com吧!

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表

圖片精選

主站蜘蛛池模板: 久久亚洲网 | 欧美一区二区三区黄色 | 久久网站免费视频 | 久久天堂 | 免费成人高清 | 狠狠干影院 | 欧美日本一区 | 日韩有码一区二区三区 | 久久久精品999 | 欧日韩在线观看视频 | 精品福利一区二区三区 | 亚洲欧洲一区二区三区 | 国产一区视频在线 | 91视频网 | 久久久久久亚洲 | 国产精品一区二区久久久久 | 在线久草 | 国产在线精品二区 | 日韩特级 | 久久久久久久伦理 | 亚洲精品久久久久久久久久久久久 | 亚洲成人免费影院 | 国产免费自拍 | 天堂a2022v乱码 | 中文字幕一区二区在线观看 | 欧美精品在线一区二区三区 | 国产精品色婷婷久久58 | 久久久在线视频 | 天天插天天干 | 日韩电影免费在线观看中文字幕 | 精品乱码一区二区 | 中文成人无字幕乱码精品 | av免费在线观看网址 | 国产九九九 | 精品久久一区 | 亚洲精品午夜国产va久久成人 | 色伊人久久 | 久久精品国产欧美 | 免费高潮视频95在线观看网站 | jizz18毛片 | 国产乱码精品一区二区三区忘忧草 |