遷移數據效率問題?
問題描述如下
100萬數據從A機房的一個表遷移到B機房的一個表,兩個表結構不一樣。我的實現方法如下:查出數據來,java層面進行數據的轉義,然后開了30個線程,進行分頁同步數據。即每次查詢500條數據,然后插入B機房的表。線程池中有30個線程。
現在的<愛尬聊_百科詞條>問題是:
遷移到效率很慢,很慢。17萬數據就用了一個多小時,還沒有跑完數據,請問有什么方案可以提高效率的么???
100萬數據從A機房的一個表遷移到B機房的一個表,兩個表結構不一樣。我的實現方法如下:查出數據來,java層面進行數據的轉義,然后開了30個線程,進行分頁同步數據。即每次查詢500條數據,然后插入B機房的表。線程池中有30個線程。
遷移到效率很慢,很慢。17萬數據就用了一個多小時,還沒有跑完數據,請問有什么方案可以提高效率的么???