假設(shè)單線程查詢SQL耗時(shí)1S,那么開(kāi)啟兩個(gè)線程查詢SQL理想情況下也是1S多點(diǎn)才對(duì),機(jī)器是4核,但是目前結(jié)果近乎2倍顯然有異;
暫且不考慮從線程池獲取連接,任務(wù)線程核心代碼如下:
@Override
public void run() {
long s = System.currentTimeMillis();
System.out.println(Thread.currentThread().getName() + "準(zhǔn)備執(zhí)行");
try (Connection connection = DBUtils.openConnection();
PreparedStatement preparedStatement = connection.prepareStatement(querySql);
ResultSet resultSet = preparedStatement.executeQuery()) {
long e = System.currentTimeMillis();
System.out.println(Thread.currentThread().getName() + "執(zhí)行耗時(shí):" + (e - s));
} catch (Exception e) {
e.printStackTrace();
} finally {
latch.countDown();
}
}
目的是分表查詢采用多線程,使用CountDownLatch,結(jié)果匯總,提交任務(wù)代碼如下:
CountDownLatch countDownLatch = new CountDownLatch(TABLE_SIZE);
ExecutorService executor = Executors.newFixedThreadPool(TABLE_SIZE);
List<String> names = new LinkedList<>();
long s = System.currentTimeMillis();
System.out.println("獲取數(shù)據(jù)庫(kù)連接成功,準(zhǔn)備執(zhí)行SQL...");
try {
for (int i = 0; i < TABLE_SIZE; i++) {
Task task = new Task(countDownLatch, names, PRE_SQL + i);
executor.execute(task);
}
countDownLatch.await();
executor.shutdownNow();
} catch (InterruptedException e) {
e.printStackTrace();
}
long e = System.currentTimeMillis();
System.out.println("總耗時(shí):" + (e - s) + "ms");
當(dāng)指定1個(gè)任務(wù)時(shí),控制臺(tái)輸出:
獲取數(shù)據(jù)庫(kù)連接成功,準(zhǔn)備執(zhí)行SQL...
pool-1-thread-1準(zhǔn)備執(zhí)行
pool-1-thread-1執(zhí)行耗時(shí):708
總耗時(shí):708ms
當(dāng)指定2個(gè)任務(wù)時(shí),控制臺(tái)輸出:
獲取數(shù)據(jù)庫(kù)連接成功,準(zhǔn)備執(zhí)行SQL...
pool-1-thread-1準(zhǔn)備執(zhí)行
pool-1-thread-2準(zhǔn)備執(zhí)行
pool-1-thread-2執(zhí)行耗時(shí):2054
pool-1-thread-1執(zhí)行耗時(shí):2055
總耗時(shí):2057ms
當(dāng)指定4個(gè)任務(wù)時(shí),控制臺(tái)輸出:
獲取數(shù)據(jù)庫(kù)連接成功,準(zhǔn)備執(zhí)行SQL...
pool-1-thread-2準(zhǔn)備執(zhí)行
pool-1-thread-3準(zhǔn)備執(zhí)行
pool-1-thread-1準(zhǔn)備執(zhí)行
pool-1-thread-4準(zhǔn)備執(zhí)行
pool-1-thread-3執(zhí)行耗時(shí):3189
pool-1-thread-1執(zhí)行耗時(shí):3203
pool-1-thread-2執(zhí)行耗時(shí):3241
pool-1-thread-4執(zhí)行耗時(shí):3245
總耗時(shí):3248ms
在程序運(yùn)行期間查看mysql,show processlist;
| 136 | root | localhost:50225 | test | Query | 1 | Sending data | SELECT SQL_NO_CACHE `id`, `name` FROM test_3 |
| 135 | root | localhost:50224 | test | Query | 1 | Sending data | SELECT SQL_NO_CACHE `id`, `name` FROM test_1 |
| 138 | root | localhost:50227 | test | Query | 1 | Sending data | SELECT SQL_NO_CACHE `id`, `name` FROM test_0 |
| 137 | root | localhost:50226 | test | Query | 1 | Sending data | SELECT SQL_NO_CACHE `id`, `name` FROM test_2 |
然后SQL狀態(tài)就變成了Writing to net
,不知道是否正常,對(duì)Mysql不是很懂。
我也試過(guò)單線程for循環(huán)6次,耗時(shí)出入不大。
單條SQL執(zhí)行差不多在1S左右,現(xiàn)在4條SQL同時(shí)執(zhí)行,并沒(méi)有在1S多就返回結(jié)果,而是在3S多同時(shí)結(jié)束,那么這里的問(wèn)題到底是什么原因?qū)е碌哪兀?/p>
The server is writing a packet to the network. This state is called Sending to client as of MySQL 5.7.8.
ref: https://dev.mysql.com/doc/ref...
本地select 超過(guò)1S,推測(cè)你每次select出的數(shù)據(jù)集比較大,本地的packet設(shè)置得過(guò)小
在Mysql執(zhí)行下
show global variables like "max_allowed_packet"
解決方案:
max_allowed_packet
北大青鳥APTECH成立于1999年。依托北京大學(xué)優(yōu)質(zhì)雄厚的教育資源和背景,秉承“教育改變生活”的發(fā)展理念,致力于培養(yǎng)中國(guó)IT技能型緊缺人才,是大數(shù)據(jù)專業(yè)的國(guó)家
北大青鳥中博軟件學(xué)院創(chuàng)立于2003年,作為華東區(qū)著名互聯(lián)網(wǎng)學(xué)院和江蘇省首批服務(wù)外包人才培訓(xùn)基地,中博成功培育了近30000名軟件工程師走向高薪崗位,合作企業(yè)超4
中公教育集團(tuán)創(chuàng)建于1999年,經(jīng)過(guò)二十年潛心發(fā)展,已由一家北大畢業(yè)生自主創(chuàng)業(yè)的信息技術(shù)與教育服務(wù)機(jī)構(gòu),發(fā)展為教育服務(wù)業(yè)的綜合性企業(yè)集團(tuán),成為集合面授教學(xué)培訓(xùn)、網(wǎng)
達(dá)內(nèi)教育集團(tuán)成立于2002年,是一家由留學(xué)海歸創(chuàng)辦的高端職業(yè)教育培訓(xùn)機(jī)構(gòu),是中國(guó)一站式人才培養(yǎng)平臺(tái)、一站式人才輸送平臺(tái)。2014年4月3日在美國(guó)成功上市,融資1
浪潮集團(tuán)項(xiàng)目經(jīng)理。精通Java與.NET 技術(shù), 熟練的跨平臺(tái)面向?qū)ο箝_(kāi)發(fā)經(jīng)驗(yàn),技術(shù)功底深厚。 授課風(fēng)格 授課風(fēng)格清新自然、條理清晰、主次分明、重點(diǎn)難點(diǎn)突出、引人入勝。
曾工作于聯(lián)想擔(dān)任系統(tǒng)開(kāi)發(fā)工程師,曾在博彥科技股份有限公司擔(dān)任項(xiàng)目經(jīng)理從事移動(dòng)互聯(lián)網(wǎng)管理及研發(fā)工作,曾創(chuàng)辦藍(lán)懿科技有限責(zé)任公司從事總經(jīng)理職務(wù)負(fù)責(zé)iOS教學(xué)及管理工作。
精通HTML5和CSS3;Javascript及主流js庫(kù),具有快速界面開(kāi)發(fā)的能力,對(duì)瀏覽器兼容性、前端性能優(yōu)化等有深入理解。精通網(wǎng)頁(yè)制作和網(wǎng)頁(yè)游戲開(kāi)發(fā)。
具有10 年的Java 企業(yè)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)。曾經(jīng)歷任德國(guó)Software AG 技術(shù)顧問(wèn),美國(guó)Dachieve 系統(tǒng)架構(gòu)師,美國(guó)AngelEngineers Inc. 系統(tǒng)架構(gòu)師。