mysql - PHP 批量插入的時候 判斷數(shù)據(jù)表里面是否重復(fù)怎么優(yōu)化
問題描述
場景:從第三方接口獲取到數(shù)據(jù) 比如 獲取到了 500 條,然后批量插入到表,但是要保證唯一。代碼如果是這樣的(name 字段有索引的情況下怎么才能最大化的優(yōu)化),這樣的結(jié)果是有500次的I/O 這個邏輯怎么優(yōu)化最佳呢;這里還有個場景如果當(dāng)這 500條插入成功后馬上進行二次查詢第三方接口然后再批量插入,主要是考慮到第二種情況:
$datas = [];$Apps = new Apps();foreach ($lists as $k=>$v){ $name = $v[’name’]; $res = $Apps->where([’name’ => $name])->field(’name’)->find(); //如果沒有記錄 if (empty($res)){$datas[] = [’name’ => $name]; }}if (empty($datas)){ //批量插入 $Apps->saveAll($datas);}
問題解答
回答1:保證唯一放在數(shù)據(jù)庫那邊處理,設(shè)置個unique就好了吧。這個不需要PHP來處理。
回答2:設(shè)置聯(lián)合主鍵
回答3:不能重復(fù)的字段加唯一索引吧
回答4:首先對該字段加唯一索引,然后SQL改成這樣,?INSERT INTO xx (yy)VALUES(?) ON DUPLICATE KEY UPDATE yy=?但唯一鍵出現(xiàn)重復(fù)時更新字段,也可以忽略重復(fù),對重復(fù)的行不做修改INSERT IGNORE INTO
相關(guān)文章:
1. docker 17.03 怎么配置 registry mirror ?2. javascript - sublime快鍵鍵問題3. javascript - immutable配合react提升性能?4. DADB.class.php文件的代碼怎么寫5. javascript - html5多個label中其中一個觸發(fā)change,如何判斷是哪一個出發(fā)了change6. phpstudy8.1支持win11系統(tǒng)嗎?7. mysql事務(wù)回滾定位8. css - 寫頁面遇到個布局問題,求大佬們幫解答,在線等,急!~9. 實現(xiàn)bing搜索工具urlAPI提交10. 配置Apache時,添加對PHP的支持時語法錯誤

網(wǎng)公網(wǎng)安備