色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

接口優化的常見方案實戰總結

OSC開源社區 ? 來源:OSCHINA 社區 ? 2023-03-06 09:22 ? 次閱讀

作者 | 京東云開發者

一、背景

針對老項目,去年做了許多降本增效的事情,其中發現最多的就是接口耗時過長的問題,就集中搞了一次接口性能優化。本文將給小伙伴們分享一下接口優化的通用方案。

743a85c0-bb79-11ed-bfe3-dac502259ad0.png

二、接口優化方案總結

1. 批處理

批量思想:批量操作數據庫,這個很好理解,我們在循環插入場景的接口中,可以在批處理執行完成后一次性插入或更新數據庫,避免多次 IO。

//for循環單筆入庫
list.stream().forEatch(msg->{
    insert();
});
//批量入庫
batchInsert();

2. 異步處理

異步思想:針對耗時比較長且不是結果必須的邏輯,我們可以考慮放到異步執行,這樣能降低接口耗時。

例如一個理財的申購接口,入賬和寫入申購文件是同步執行的,因為是 T+1 交易,后面這兩個邏輯其實不是結果必須的,我們并不需要關注它的實時結果,所以我們考慮把入賬和寫入申購文件改為異步處理。如圖所示:

74502362-bb79-11ed-bfe3-dac502259ad0.png

至于異步的實現方式,可以用線程池,也可以用消息隊列,還可以用一些調度任務框架。

3. 空間換時間

一個很好理解的空間換時間的例子是合理使用緩存,針對一些頻繁使用且不頻繁變更的數據,可以提前緩存起來,需要時直接查緩存,避免頻繁地查詢數據庫或者重復計算。

需要注意的事,這里用了合理二字,因為空間換時間也是一把雙刃劍,需要綜合考慮你的使用場景,畢竟緩存帶來的數據一致性問題也挺令人頭疼。

這里的緩存可以是 R2M,也可以是本地緩存、memcached,或者Map。

舉一個股票工具的查詢例子:

因為策略輪動的調倉信息,每周只更新一次,所以原來的調接口就去查庫的邏輯并不合理,而且拿到調倉信息后,需要經過復雜計算,最終得出回測收益和跑贏滬深指數這些我們想要的結果。如果我們把查庫操作和計算結果放入緩存,可以節省很多的執行時間。如圖:

7460285c-bb79-11ed-bfe3-dac502259ad0.png

4. 預處理

也就是預取思想,就是提前要把查詢的數據,提前計算好,放入緩存或者表中的某個字段,用的時候會大幅提高接口性能。跟上面那個例子很像,但是關注點不同。

舉個簡單的例子:理財產品,會有根據凈值計算年化收益率的數據展示需求,利用凈值去套用年化收益率計算公式計算的邏輯我們可以采用預處理,這樣每一次接口調用直接取對應字段就可以了。

5. 池化思想

我們都用過數據庫連接池,線程池等,這就是池思想的體現,它們解決的問題就是避免重復創建對象或創建連接,可以重復利用,避免不必要的損耗,畢竟創建銷毀也會占用時間。

池化思想包含但并不局限于以上兩種,總的來說池化思想的本質是預分配與循環使用,明白這個原理后,我們即使是在做一些業務場景的需求時,也可以利用起來。

比如:對象池

6. 串行改并行

串行就是,當前執行邏輯必須等上一個執行邏輯結束之后才執行,并行就是兩個執行邏輯互不干擾,所以并行相對來說就比較節省時間,當然是建立在沒有結果參數依賴的前提下。

比如,理財的持倉信息展示接口,我們既需要查詢用戶的賬戶信息,也需要查詢商品信息和 banner 位信息等等來渲染持倉頁,如果是串行,基本上接口耗時就是累加的。如果是并行,接口耗時將大大降低。

如圖:

746e9572-bb79-11ed-bfe3-dac502259ad0.png

7. 索引

加索引能大大提高數據查詢效率,這個在接口設計之出也會考慮到,這里不再多贅述,隨著需求的迭代,我們重點整理一下索引不生效的一些場景,希望對小伙伴們有所幫助。

具體不生效場景不再一一舉例,后面有時間的話,單獨整理一下。

7480839a-bb79-11ed-bfe3-dac502259ad0.png

8. 避免大事務

所謂大事務問題,就是運行時間較長的事務,由于事務一致不提交,會導致數據庫連接被占用,影響到別的請求訪問數據庫,影響別的接口性能。

舉個例子:

@Transactional(value ="taskTransactionManager", propagation =Propagation.REQUIRED, isolation =Isolation.READ_COMMITTED, rollbackFor ={RuntimeException.class,Exception.class})
    publicBasicResultpurchaseRequest(PurchaseRecordrecord){
        BasicResult result =newBasicResult();
        //插入賬戶任務
        taskMapper.insert(ManagerParamUtil.buildTask(record,TaskEnum.Task_type.pension_account.type(),TaskEnum.Account_bizType.purchase_request.type()));
        //插入同步任務
        taskMapper.insert(ManagerParamUtil.buildTask(record,TaskEnum.Task_type.pension_sync.type(),TaskEnum.Sync_bizType.purchase.type()));
        //插入影像件上傳任務
        taskMapper.insert(ManagerParamUtil.buildTask(record,TaskEnum.Task_type.pension_sync.type(),TaskEnum.Sync_bizType.cert.type()));
        result.setInfo(ResultInfoEnum.SUCCESS);
        return result;
    }
上面這塊代碼主要是申購申請完成后,執行一系列的后續操作,如果現在新增申購完成后,發送 push 通知用戶的需求。很有可能我們會在后面直接追加,如下圖所示:事務中嵌套 RPC 調用,即非 DB 操作,這些非 DB 操作如果耗時較大的話,可能會出現大事務問題。大數據引發的問題主要有:死鎖、接口超時、主從延遲等。
@Transactional(value ="taskTransactionManager", propagation =Propagation.REQUIRED, isolation =Isolation.READ_COMMITTED, rollbackFor ={RuntimeException.class,Exception.class})
    publicBasicResultpurchaseRequest(PurchaseRecordrecord){
        BasicResult result =newBasicResult();
        ...
        pushRpc.doPush(record);        
        result.setInfo(ResultInfoEnum.SUCCESS);
        return result;
    }
所以為避免大事務問題,我們可以通過以下方案規避: 1,RPC 調用不放到事務里面 2,查詢操作盡量放到事務之外 3,事務中避免處理太多數據

9. 優化程序結構

程序結構問題一般出現在多次需求迭代后,代碼疊加形成。會造成一些重復查詢、多次創建對象等耗時問題。在多人維護一個項目時比較多見。解決起來也比較簡單,我們需要針對接口整體做重構,評估每個代碼塊的作用和用途,調整執行順序。

10. 深分頁問題

深分頁問題比較常見,分頁我們一般最先想到的就是 limit ,為什么會慢,我們可以看下這個 SQL:

select*from purchase_record where productCode ='PA9044'andstatus=4orderby orderTime desclimit100000,200
limit 100000,200 意味著會掃描 100200 行,然后返回 200 行,丟棄掉前 100000 行。所以執行速度很慢。一般可以采用標簽記錄法來優化,比如:
select*from purchase_record where productCode ='PA9044'andstatus=4and id >100000limit200
這樣優化的好處是命中了主鍵索引,無論多少頁,性能都還不錯,但是局限性是需要一個連續自增的字段

11.SQL 優化

sql 優化能大幅提高接口的查詢性能,由于本文重點講述接口優化的方案,具體 sql 優化不再一一列舉,小伙伴們可以結合索引、分頁、等關注點考慮優化方案。

12. 鎖粒度避免過粗

鎖一般是為了在高并發場景下保護共享資源采用的一種手段,但是如果鎖的粒度太粗,會很影響接口性能。 關于鎖粒度:就是你要鎖的范圍有多大,不管是 synchronized 還是 redis 分布式鎖,只需要在臨界資源處加鎖即可,不涉及共享資源的,不必要加鎖,就好比你要上衛生間,只需要把衛生間的門鎖上就可以,不需要把客廳的門也鎖上。 錯誤的加鎖方式:

//非共享資源
        privatevoidnotShare(){
        }
        //共享資源
        privatevoidshare(){
        }
        privateintwrong(){
            synchronized(this){
                share();
                notShare();
            }
        }

正確的加鎖方式:

//非共享資源
        privatevoidnotShare(){
        }
        //共享資源
        privatevoidshare(){
        }
        privateintright(){
            notShare();
            synchronized(this){
                share();

            }
        }

三、最后

接口性能問題形成的原因思考

我相信很多接口的效率問題不是一朝一夕形成的,在需求迭代的過程中,為了需求快速上線,采取直接累加代碼的方式去實現功能,這樣會造成以上這些接口性能問題。 變換思路,更高一級思考問題,站在接口設計者的角度去開發需求,會避免很多這樣的問題,也是降本增效的一種行之有效的方式。 以上,共勉!

審核編輯:湯梓紅
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 接口
    +關注

    關注

    33

    文章

    8575

    瀏覽量

    151021
  • 文件
    +關注

    關注

    1

    文章

    565

    瀏覽量

    24727
  • 優化
    +關注

    關注

    0

    文章

    220

    瀏覽量

    23890
  • 代碼
    +關注

    關注

    30

    文章

    4779

    瀏覽量

    68524

原文標題:接口優化的常見方案實戰總結

文章出處:【微信號:OSC開源社區,微信公眾號:OSC開源社區】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    PCBA測試的常見方

    以看出整個工藝流程存在的問題,比如前期工序SMT、DIP等,存在問題,就進行調整,讓整個工藝更加完善。PCBA測試常見方法,主要有以下幾種: 1.手工測試手工測試就是直接依靠視覺進行測試,通過視覺與比較來
    發表于 11-08 17:19

    前端性能怎么優化

    前端性能優化常見方
    發表于 03-27 11:42

    光耦隔離的4種常見方法對比

    光耦隔離的4種常見方法對比
    發表于 05-31 11:06 ?13.2w次閱讀
    光耦隔離的4種<b class='flag-5'>常見方</b>法對比

    運放使用常見問題總結

    實戰電子的經驗總結。實用的運放問題答疑。適合初學者和進一步提高的友友。
    發表于 07-29 18:31 ?0次下載

    嵌入式接口保護設計方案

    接口是嵌入式設備中最常見的組成部分,是數據傳輸的通道,它起著數據傳輸與隔離保護電路的作用,今天我們一起探討接口保護設計一種常見方案
    發表于 10-13 11:24 ?847次閱讀

    DSP程序優化總結

    DSP程序優化總結
    發表于 10-23 14:24 ?2次下載
    DSP程序<b class='flag-5'>優化</b><b class='flag-5'>總結</b>

    檢測LED單元板的常見方

    LED電子顯示屏很重要的組成部分就有LED單元板,如果單元板有問題,會直接影響LED顯示屏的整體質量!所以,如何辨別LED單元板的好壞是LED顯示屏商家關心的問題,下面整理了一些檢測LED單元板的常見方法。
    發表于 05-04 17:31 ?3818次閱讀

    電平轉換常見方法的匯總比較資料下載

    電子發燒友網為你提供電平轉換常見方法的匯總比較資料下載的電子資料下載,更有其他相關的電路圖、源代碼、課件教程、中文資料、英文資料、參考設計、用戶指南、解決方案等資料,希望可以幫助到廣大的電子工程師們。
    發表于 04-09 08:44 ?9次下載
    電平轉換<b class='flag-5'>常見方</b>法的匯總比較資料下載

    HarmonyOS測試技術與實戰-HarmonyOS自研圖形棧總結

    HDC 2021華為開發者大會 HarmonyOS測試技術與實戰-HarmonyOS自研圖形棧總結
    的頭像 發表于 10-23 15:47 ?1612次閱讀
    HarmonyOS測試技術與<b class='flag-5'>實戰</b>-HarmonyOS自研圖形棧<b class='flag-5'>總結</b>

    18種接口優化方案匯總1

    之前工作中,遇到一個`504`超時問題。原因是因為接口耗時過長,超過`nginx`配置的`10`秒。然后 真槍實彈搞了一次接口性能優化,最后接口從`11.3s`降為`170ms`。本文
    的頭像 發表于 02-15 15:59 ?852次閱讀
    18種<b class='flag-5'>接口</b><b class='flag-5'>優化</b><b class='flag-5'>方案</b>匯總1

    18種接口優化方案匯總2

    之前工作中,遇到一個`504`超時問題。原因是因為接口耗時過長,超過`nginx`配置的`10`秒。然后 真槍實彈搞了一次接口性能優化,最后接口從`11.3s`降為`170ms`。本文
    的頭像 發表于 02-15 15:59 ?663次閱讀
    18種<b class='flag-5'>接口</b><b class='flag-5'>優化</b><b class='flag-5'>方案</b>匯總2

    箱式變壓器保養的常見方法和事項

      箱式變壓器是工業、礦山、建筑等各個領域中常見的基礎設施,作為電力系統中不可缺少的設備之一,需要定期進行保養與維護,以確保其正常、安全、穩定地運行。以下是箱式變壓器保養的常見方法:
    發表于 04-19 14:45 ?2890次閱讀

    MCU批量生產下載程序的幾種常見方

    MCU批量生產下載程序的幾種常見方
    的頭像 發表于 10-24 17:22 ?1606次閱讀
    MCU批量生產下載程序的幾種<b class='flag-5'>常見方</b>法

    無功補償的原理、作用及常見方

    無功補償的原理、作用及常見方式? 無功補償是電力系統中的一項重要技術措施,用于改善電力質量和提高能源利用效率。本文將詳細介紹無功補償的原理、作用以及常見的補償方式。 一、無功補償的原理 無功功率
    的頭像 發表于 01-19 14:19 ?8976次閱讀

    性能優化之路總結

    針對老項目,去年做了許多降本增效的事情,其中發現最多的就是接口耗時過長的問題,就集中搞了一次接口性能優化。本文將給小伙伴們分享一下接口優化
    的頭像 發表于 06-17 15:00 ?321次閱讀
    主站蜘蛛池模板: 成电影人免费网站| 丝袜诱惑qvod| 久久热国产在线视频| 国语精彩对白2021| 国产午夜AV无码无片久久96| 国产精品久久久久久精品...| chinese耄耋70老太性| 99er久久国产精品在线| 佐山爱巨大肥臀在线| 在线精品视频免费观看| 在线观看免费亚洲| 在线日韩欧美一区二区三区| 一本道高清无码v| 一个人视频日本在线观看| 亚洲视频在线观看免费| 亚洲免费一区| 一本一本之道高清在线观看| 亚洲精品久久久一区| 亚洲欧美中文字幕5发布| 亚洲精品无码午夜福利在线观看| 羞羞答答影院在线| 亚洲欧美综合在线中文| 亚洲日韩成人| 做你的爱人BD日本| h片下载地址| 高h肉文合集| 国产一区二区不卡老阿姨| 黄色三级网络| 美女挑战50厘米长的黑人 | 一边捏奶头一边啪高潮会怎么样 | 免费高清国产| 日本乱子伦一区二区三区| 日本人吃奶玩奶虐乳| 十八禁啪啦啪漫画| 亚洲地址一地址二地址三| 亚洲综合免费视频| 97人妻无码AV碰碰视频| 达达兔欧美午夜国产亚洲| 国产免费人成在线看视频| 天美传媒在线观看免费完整版| 手机毛片免费看|