Datax下載地址:/tupian/20230522/DataX

Datax MySQL讀: /tupian/20230522/DataX/blob/master/mysqlreader/doc/mysqlreader.md
Datax MySQL寫: /tupian/20230522/DataX/blob/master/mysqlwriter/doc/mysqlwriter.md
1.下載安裝Datax軟件(必須安裝jdk 1.8版本以上)
[root@localhost ~]# tar xvf jdk-8u65-linux-x64.tar.gz
[root@localhost ~]# mv jdk1.8.0_151 /usr/local/jdk1.8.0_151
[root@localhost ~]# vim /etc/profile
export PATH=$PATH:/usr/local/jdk1.8.0_151/bin
[root@localhost ~]# vim /etc/ld.so.conf.d/mysql-x86_64.conf
/usr/local/jdk1.8.0_151/lib
[root@localhost ~]# tar xvf datax.tar.gz
[root@localhost ~]# cd datax/job/
2.編輯配置文件(首先用kettle將表結(jié)構(gòu)同步過去)
[root@localhost job]# vim job1.json
{
"job": {
"setting": {
"speed": {
"channel": 5
}
},
"content": [
{
"reader": {
"name": "mysqlreader",
"parameter": {
"username": "wangying",
"password": "wangying",
"column": ["*"],
"connection": [
{
"table": ["t3"],
"jdbcUrl": ["jdbc:mysql://172.16.8.93:3306/db_stktag"]
}
]
}
},
"writer": {
"name": "oraclewriter",
"parameter": {
"username": "upcenter",
"password": "upcenter",
"column": ["*"],
"connection": [
{
"jdbcUrl": "jdbc:oracle:thin:@192.168.7.7:1521:upqc",
"table": ["t3"]
}
]
}
}
}
]
}
}
[root@localhost job]#
3.數(shù)據(jù)抽取
[root@localhost job]# python2 /root/datax/bin/datax.py job1.json
DataX (DATAX-OPENSOURCE-3.0), From Alibaba !
Copyright (C) 2010-2017, Alibaba Group. All Rights Reserved.
2019-01-29 16:10:00.236 [main] INFO VMInfo - VMInfo# operatingSystem class => sun.management.OperatingSystemImpl
2019-01-29 16:10:00.246 [main] INFO Engine - the machine info =>
osInfo:Oracle Corporation 1.8 25.151-b12
jvmInfo:Linux amd64 3.10.0-123.el7.x86_64
cpu num:8
totalPhysicalMemory:-0.00G
freePhysicalMemory:-0.00G
maxFileDescriptorCount:-1
currentOpenFileDescriptorCount:-1
。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。
。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。。
2019-01-29 15:10:04.908 [job-0] INFO JobContainer -
2019-01-29 16:10:14.407 [job-0] INFO JobContainer -
任務啟動時刻 : 2019-01-29 16:10:00
任務結(jié)束時刻 : 2019-01-29 16:10:14
任務總計耗時 : 14s
任務平均流量 : 176.48KB/s
記錄寫入速度 : 4047rec/s
讀出記錄總數(shù) : 40475
讀寫失敗總數(shù) : 0
[root@localhost job]#
新聞名稱:Datax離線數(shù)據(jù)抽取(MySQL--Oracle)-創(chuàng)新互聯(lián)
文章URL:http://chinadenli.net/article46/cogohg.html
成都網(wǎng)站建設公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站設計公司、外貿(mào)網(wǎng)站建設、電子商務、域名注冊、云服務器、品牌網(wǎng)站設計
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容