整合營銷服務商

          電腦端+手機端+微信端=數據同步管理

          免費咨詢熱線:

          Python可視化神器-pyecharts(實例之人口地圖)

          方教程:http://pyecharts.herokuapp.com/

          pyecharts 是一個用于生成 Echarts 圖表的類庫。Echarts 是百度開源的一個數據可視化 JS 庫。用 Echarts 生成的圖可視化效果非常棒,為了與 Python 進行對接,方便在 Python 中直接使用數據生成圖。

          繪圖步驟:

          from pyecharts import Chart,configure             #導入所需繪圖函數
          configure(output_image=True)                      #可以將圖表保存為svg/jpeg/png/pdf/gif    
          chart = Chart('主標題','副標題')                  #Chart是我們繪圖函數
          attr = ['x1','x2','x3','x4']                      #attr是屬性,也就是常見的X軸標簽
          v = [y1,y2,y3,y4]                                 #v是各個屬性對應的值,也就是常見的Y值
          chart.use_theme()                                 #設置圖表主題                
          chart.add('圖標',attr,v1)                         #add畫圖圖層,添加我們所需的參數
          chart.render(path = '***.jpeg')                   #圖表輸出,path是輸出路徑

          render會默認將圖表輸出為html格式,可在瀏覽器打開。但是想要插入到ppt當中,清晰度會下降,因此需要將其轉化為其他格式,如svg/jpeg/png/pdf/gif 等等。要實現格式的轉換,需要安裝:

          • Nodejs
          • $ npm install -g phantomjs-prebuilt
          • $ pip install pyecharts-snapshot

          常用的參數(可以在add()中設置,實現各種需求):

          • is stack:是否堆積
          • is convert:x,y軸是否交換
          • is_legend_show:是否顯示圖例
          • legend_orient:圖列方向,有'horizontal'(默認水平顯示),'vertical'(垂直)可選
          • legend_pos:圖例位置,有'left', 'center'(默認), 'right'可選
          • legend_text_size/color:圖例名稱字體大小/顏色
          • is_x/yaxis_show:是否顯示x/y軸
          • x/yaxis_interval:x/y軸標簽的顯示間隔
          • x/yaxis_min/max:x/y軸刻度最小值/最大值
          • x/yaxis_label_textsize/textcolor:x/y軸標簽字體大小/顏色
          • xaxis_rotate:x軸標簽旋轉角度
          • is_splitline_show:是否顯示網格線
          • is_label_show:是否顯示標簽
          • label_pos:標簽的位置,有'top'(默認), 'left', 'right', 'bottom', 'inside','outside'可選
          • label_text_color/size:標簽字體顏色/大小
          • is_random:是否隨機排列顏色列表
          • label_color:自定義標簽顏色
          • mark_point/line:標記點/線,默認有'min', 'max', 'average'可選。可自定義標記點線,具體格式如:[{'coord': [x, y], 'name': '目標標記點'}],記住格式是一個列表
          • mark_point/line_symbol:標記點/線圖形,默認為'pin'(點),有'circle'(圓形), 'rect'(正方形), 'roundRect'(圓角正方形), 'triangle'(三角形), 'diamond'(菱形), 'pin'(點), 'arrow'(箭頭)可選
          • mark_point/line_symbolsize:標記點/線圖形大小
          • mark_point/line_textcolor:標記點/線字體顏色


          代碼

          . ImageGP 2.0

          https://www.bic.ac.cn/BIC/

          在 ImageGP 的基礎上,網站架構重新設計,可以快速部署更多類型的工具和有更豐富的結果展示形式。ImageGP 2.0 支持 17 種基本圖形繪制,經過數十個參數的組合,可以獲得上百種圖形可視化結果;支持數據格式在線轉換、提取、合并,快捷準備繪圖數據;增加 28 種生信在線分析工具和 3 種生信在線分析流程,支持從原始數據到結果可視化的全流程定制;新增交互式圖表的繪制;支持數據上傳、個人中心管理歷史記錄、結果查看和結果再分析。


          生信寶典

          ,贊13


          1. ImageGP

          https://www.bic.ac.cn/ImageGP/

          2022年2月21日,iMeta 期刊在線發表了中國中醫科學院黃璐琦院士、陳同副研究員和中國科學院遺傳與發育生物學研究所劉永鑫高級工程師合作題為“ImageGP: An easy-to-use data visualization web server for scientific researchers”的研究論文。

          ImageGP 可以在線生成常見的線圖、柱狀圖、散點圖、箱線圖、集合圖、熱圖和直方圖等。用戶只要粘貼進去數據矩陣,就可以快速出圖。同時 ImageGP 還支持火山圖、富集分析泡泡圖、主成分分析類圖等 和 4 種微生物領域的功能預測和生物標志物鑒定分析,包括 FAPROTAX, BugBase, PICRUSt 和 LEFSe。在滿足方便易用的同時, ImageGP 也提供了靈活性,可以設置常見參數、調整樣式,輸出發表質量的圖。引文:https://doi.org/10.1002/imt2.5,引用過千次。

          2. EVenn

          http://www.ehbio.com/test/venn/

          2021年8月2日,JGG在線發表了中國中醫科學院黃璐琦院士團隊和中國科學院遺傳與發育生物學研究所劉永鑫高級工程師合作題為“EVenn: Easy to create repeatable and editable Venn diagrams and Venn networks online”的研究論文。該論文介紹了一款用于數據交互性探索和可視化的一站式Venn圖和Venn網絡在線繪制平臺。目前已引用過百次。

          該研究開發出的EVenn可以通過一次性輸入數據,3分鐘內完成上述5種Venn圖和Venn網絡的繪制,特別適合整合數據集的探索分析和比較可視化。同時EVenn還提供了3種統計分析方法 (Fisher’s exact test, random sample test, Jaccard similarity test) 用于評估2個集合的相似性,并可以計算任意組數據的交并關系,對于關鍵基因或菌群的篩選更加便捷有效。

          3. Sangerbox

          http://vip.sangerbox.com

          Sangerbox (http://vip.sangerbox.com)是基于網絡的工具平臺,用戶可以在一個友好的交互頁面中進行不同的分析。平臺提供可交互的圖形化分析工具,包括相關性分析工具,通路富集分析、WGCNA分析等常見的工具和功能。

          2022年7月8日,哈爾濱醫科大學宋湘團隊聯合杭州慕谷科技有限公司在iMeta 發表了題為“Sangerbox: A comprehensive, interaction-friendly clinical bioinformatics analysis platform”的文章。https://doi.org/10.1002/imt2.36

          Sangerbox平臺還為用戶提供了多種廣泛使用的生物信息分析工具,包括文本處理和數據標準化處理工具;數據分析包括降維、聚類、差異分析等以及一些常見的生物信息分析,例如加權相關網絡分析(WGCNA)、生存分析、基因集富集分析(GSEA)等。Sangerbox將根據用戶的不同需求不斷改進工具、更新更多方法和統計數據,讓Sangerbox的用戶可以更高效的處理更多的臨床生物數據、進而為臨床研究發出貢獻。

          4. OmicStudio

          https://www.omicstudio.cn/

          2023年2月6日,杭州聯川生物技術股份有限公司方超團隊在 iMeta 在線發表了題為 “OmicStudio: A composable bioinformatics cloud platform with real-time feedback that can generate high-quality graphs for publication ” 的文章。原文鏈接DOI: https://doi.org/10.1002/imt2.85

          本研究提供了一個基于云技術的生物信息學平臺:OmicStudio。該云平臺能夠快速獲取生信分析的圖表結果,生成高質量的圖表供發表,并自動與下游分析模塊連接。此外,不受開發者審美的限制,用戶可以自定義定制更優雅的圖形。模塊化設計,讓用戶在不同的應用場景下獲得最舒適的體驗。

          5. shinyCircos

          https://venyao.xyz/shinyCircos/

          2023年5月8日,河南農業大學姚文團隊在 iMeta 在線發表了題為 “shinyCircos-V2.0: Leveraging the creation of Circos plot with enhanced usability and advanced features” 的文章。原文鏈接DOI: https://doi.org/10.1002/imt2.109

          本研究開發的shinyCircos-V2.0是shinyCircos的升級版本,包括了一個新的用戶界面,增強了其易用性,并提供許多用于創建高級Circos圖形的新功能。

          6. TOmicsVis

          https://shiny.hiplot.cn/tomicsvis-shiny/

          2023年10月13日,廈門大學游偉偉團隊在 iMeta 在線發表了題為 “TOmicsVis: an all-in-one transcriptomic analysis and visualization R package with Shinyapp interface” 的文章。原文鏈接DOI: https://doi.org/10.1002/imt2.137

          本研究系統開發了TOmicsVis (Transcriptomics Visualization)R包(CRAN:https://cran.r-project.org/package=TOmicsVis,v2.0.0),為轉錄組項目提供全面的分析和可視化解決方案。

          7. Chiplot

          https://www.chiplot.online/

          Chiplot:是一個基于Web的在線可視化工具,用于創建交互式圖表和數據可視化。它主要面向數據科學家、分析師和報告人員,可幫助他們快速輕松地創建和分享可視化結果。

          Chiplot支持多種圖表類型,包括散點圖、折線圖、柱狀圖、餅圖、熱力圖、地圖等。用戶可以使用拖放界面添加數據、選擇圖表類型、自定義顏色和字體等選項,并進行交互式數據探索和過濾。Chiplot還支持團隊協作和分享,用戶可以邀請其他人來共同編輯和查看他們的可視化結果。此外,Chiplot還提供了API和開發工具包,使開發人員可以輕松地將可視化結果集成到自己的應用程序中。總之,Chiplot是一個強大、易于使用的在線可視化工具,能夠幫助用戶快速創建交互式圖表和數據可視化,并與團隊成員共享和協作。

          8. hiplot

          www.hiplot.com.cn

          2020年09月,Hiplot平臺正式開放注冊及使用,僅半年時間,上線工具200余個,平臺使用突破百萬人次。這一由國內眾多高層次學術人才合力開發的學術版(社區版)Hiplot,于2022年05月在著名生物信息學期刊《Briefings in Bioinformatics》雜志發表,影響因子13.994分。

          9. Apache Echarts

          https://echarts.apache.org/examples/zh/index.html

          百度Echarts是經典的交互式繪圖工具,圖形類型豐富,可在線直接準備數據,調整出圖。有時輸入數據并不是標準的矩陣格式,需要自己做轉換。


          10. RAWGraphs

          https://app.rawgraphs.io/

          網站為全英文界面!RAWGraphs能夠讓用戶輕松地將數據轉化為各種可視化圖表,可隨時預覽和修改,同時支持導入多種不同形式的數據格式。而且,RAWGraphs支持自定義顏色、標簽和圖表風格,讓用戶能夠創作出美觀的定制化圖表。具體操作流程分為Load your data、Choose a chart、Mapping、Customize,與上述幾種工具的步驟類似。

          網站中的數據可視化畫廊(Gallery)板塊也是其一大特色,集中展示了使用RAWGraphs做的經典可視化圖表,在這樣獨特的在線畫廊里漫步一番,將會使我們對數據可視化有更深刻的理解和認知。

          11. Flourish

          https://flourish.studio/examples/

          Flourish是一款在線數據可視化工具,可以幫助用戶創建各種類型的圖表和動畫。它提供了多種預設模板和圖表類型,并具有強大的自定義選項和動畫效果,可以創建非常酷炫的數據可視化效果。Flourish支持多種圖表類型,包括線圖、柱狀圖、散點圖、地圖、熱力圖、詞云等。用戶可以使用簡單的拖放界面添加數據、選擇圖表類型、自定義顏色和字體等選項,并進行交互式數據探索和過濾。Flourish還提供了許多高級功能,例如動畫效果、時間軸、自動化報告生成和定制、數據分析和機器學習模型的集成等。此外,Flourish也支持團隊協作和分享,用戶可以邀請其他人來共同編輯和查看他們的可視化結果。總之,Flourish是一款功能強大、易于使用的在線可視化工具,能夠幫助用戶快速創建各種類型的交互式圖表和數據可視化,并與團隊共享和協作。它還提供了許多高級功能,以幫助用戶更好地理解和發現數據中的模式和洞察力,從而更好地做出決策和解決問題。

          12. ChartCube 圖表魔方

          https://chartcube.alipay.com/

          螞蟻集團出品:ChartCube;頁面全中文/英文,操作簡便:上傳數據-選擇圖表-修改樣式-導出 圖表類型:折線圖、柱狀圖、條形圖、餅圖、面積圖、散點圖、熱圖、雷達圖等。


          13. 花火數圖

          https://hanabi.cn/h2/dataVideo

          花火提供了各種各樣的可視化類型,包括折線圖、柱狀圖、餅圖等,以及高級可視化類型,如熱力圖、極坐標圖等。它還具有數據透視和過濾功能,可以協助用戶對數據進行深入的分析和探索。在花火模板中心,鼠標滑過想了解的圖表,就會自動浮現該圖表的應用場景,能夠比較直觀地幫助我們選擇最恰當的數據表達方式。

          花火雖然功能豐富、支持多種可視化類型,能夠滿足用戶對于數據可視化的多種需求。但對于龐大數據量的計算和可視化,花火的執行速度可能不如桌面端的程序快速和高效。在使用時,需要根據具體的情況選用適合的圖表類型,并注意其性能和速度的限制。

          14.微科盟生科云

          https://www.bioincloud.tech/

          隨著宏組學(meta-omics)方法在研究微生物結構、功能和互作等方面的廣泛應用,我們積累了大量寶貴的數據資源。然而,如此豐富的人類/環境微生物組數據也為現有的生物信息學工具提出了新的挑戰。因此,我們開發了微科盟生科云(Wekemo Bioincloud)——一個專業的宏組學(meta-omics)數據分析平臺。該平臺提供了全面的分析解決方案,方便用戶在處理大量組學數據中選擇適用的工具。目前Wekemo Bioincloud已配備了22個工作流程和65個可視化工具,可用于研究不同的數據集,是一個便于用戶使用的平臺。此外,該平臺支持在線修改矢量圖,并通過獨立的注冊賬號,確保了用戶的隱私和數據的可追溯性。Wekemo Bioincloud可以通過以下鏈接獲取:https://www.bioincloud.tech/。目前“Wekemo”已經被引用300余次(Google Scholar,截止2024年2月),歡迎大家使用本平臺并正確引用。


          寫在越前面,越推薦使用!

          能每一個前端工程師都想要理解瀏覽器的工作原理。

          我們希望知道從在瀏覽器地址欄中輸入 url 到頁面展現的短短幾秒內瀏覽器究竟做了什么;

          我們希望了解平時常常聽說的各種代碼優化方案是究竟為什么能起到優化的作用;

          我們希望更細化的了解瀏覽器的渲染流程。

          瀏覽器的多進程架構

          一個好的程序常常被劃分為幾個相互獨立又彼此配合的模塊,瀏覽器也是如此,以 Chrome 為例,它由多個進程組成,每個進程都有自己核心的職責,它們相互配合完成瀏覽器的整體功能,每個進程中又包含多個線程,一個進程內的多個線程也會協同工作,配合完成所在進程的職責。

          對一些前端開發同學來說,進程和線程的概念可能會有些模糊,為了更好的理解瀏覽器的多進程架構,這里我們簡單討論一下進程和線程。

          進程(process)和線程(thread)


          進程就像是一個有邊界的生產廠間,而線程就像是廠間內的一個個員工,可以自己做自己的事情,也可以相互配合做同一件事情。

          當我們啟動一個應用,計算機會創建一個進程,操作系統會為進程分配一部分內存,應用的所有狀態都會保存在這塊內存中,應用也許還會創建多個線程來輔助工作,這些線程可以共享這部分內存中的數據。如果應用關閉,進程會被終結,操作系統會釋放相關內存。更生動的示意圖如下:

          一個進程還可以要求操作系統生成另一個進程來執行不同的任務,系統會為新的進程分配獨立的內存,兩個進程之間可以使用 IPC (Inter Process Communication)進行通信。很多應用都會采用這樣的設計,如果一個工作進程反應遲鈍,重啟這個進程不會影響應用其它進程的工作。

          如果對進程及線程的理解還存在疑惑,可以參考下述文章:

          http://www.ruanyifeng.com/blog/2013/04/processes_and_threads.html

          瀏覽器的架構

          有了上面的知識做鋪墊,我們可以更合理的討論瀏覽器的架構了,其實如果要開發一個瀏覽器,它可以是單進程多線程的應用,也可以是使用 IPC 通信的多進程應用。


          不同瀏覽器的架構模型

          不同瀏覽器采用了不同的架構模式,這里并不存在標準,本文以 Chrome 為例進行說明 :

          Chrome 采用多進程架構,其頂層存在一個 Browser process 用以協調瀏覽器的其它進程。


          Chrome 的不同進程

          具體說來,Chrome 的主要進程及其職責如下:

          Browser Process:

          • 負責包括地址欄,書簽欄,前進后退按鈕等部分的工作;
          • 負責處理瀏覽器的一些不可見的底層操作,比如網絡請求和文件訪問;

          Renderer Process:

          • 負責一個 tab 內關于網頁呈現的所有事情

          Plugin Process:

          • 負責控制一個網頁用到的所有插件,如 flash
          • GPU Process
          • 負責處理 GPU 相關的任務



          不同進程負責的瀏覽器區域示意圖

          Chrome 還為我們提供了「任務管理器」,供我們方便的查看當前瀏覽器中運行的所有進程及每個進程占用的系統資源,右鍵單擊還可以查看更多類別信息。

          通過「頁面右上角的三個點點點 — 更多工具 — 任務管理器」即可打開相關面板。

          Chrome 多進程架構的優缺點

          優點

          某一渲染進程出問題不會影響其他進程

          更為安全,在系統層面上限定了不同進程的權限

          缺點

          由于不同進程間的內存不共享,不同進程的內存常常需要包含相同的內容。

          為了節省內存,Chrome 限制了最多的進程數,最大進程數量由設備的內存和 CPU 能力決定,當達到這一限制時,新打開的 Tab 會共用之前同一個站點的渲染進程。

          測試了一下在 Chrome 中打開不斷打開知乎首頁,在 Mac i5 8g 上可以啟動四十多個渲染進程,之后新打開 tab 會合并到已有的渲染進程中。

          Chrome 把瀏覽器不同程序的功能看做服務,這些服務可以方便的分割為不同的進程或者合并為一個進程。以 Broswer Process 為例,如果 Chrome 運行在強大的硬件上,它會分割不同的服務到不同的進程,這樣 Chrome 整體的運行會更加穩定,但是如果 Chrome 運行在資源貧瘠的設備上,這些服務又會合并到同一個進程中運行,這樣可以節省內存,示意圖如下。

          iframe 的渲染 – Site Isolation

          在上面的進程圖中我們還可以看到一些進程下還存在著 Subframe,這就是 Site Isolation 機制作用的結果。

          Site Isolation 機制從 Chrome 67 開始默認啟用。這種機制允許在同一個 Tab 下的跨站 iframe 使用單獨的進程來渲染,這樣會更為安全。


          iframe 會采用不同的渲染進程

          Site Isolation 被大家看做里程碑式的功能, 其成功實現是多年工程努力的結果。Site Isolation 不是簡單的疊加多個進程。這種機制在底層改變了 iframe 之間通信的方法,Chrome 的其它功能都需要做對應的調整,比如說 devtools 需要相應的支持,甚至 Ctrl + F 也需要支持。關于 Site Isolation 的更多內容可參考下述鏈接:

          https://developers.google.com/web/updates/2018/07/site-isolation

          介紹完了瀏覽器的基本架構模式,接下來我們看看一個常見的導航過程對瀏覽器來說究竟發生了什么。

          導航過程發生了什么

          也許大多數人使用 Chrome 最多的場景就是在地址欄輸入關鍵字進行搜索或者輸入地址導航到某個網站,我們來看看瀏覽器是怎么看待這個過程的。

          我們知道瀏覽器 Tab 外的工作主要由 Browser Process 掌控,Browser Process 又對這些工作進一步劃分,使用不同線程進行處理:

          • UI thread : 控制瀏覽器上的按鈕及輸入框;
          • network thread: 處理網絡請求,從網上獲取數據;
          • storage thread: 控制文件等的訪問;



          瀏覽器主進程中的不同線程

          回到我們的問題,當我們在瀏覽器地址欄中輸入文字,并點擊回車獲得頁面內容的過程在瀏覽器看來可以分為以下幾步:

          1. 處理輸入

          UI thread 需要判斷用戶輸入的是 URL 還是 query;

          2. 開始導航

          當用戶點擊回車鍵,UI thread 通知 network thread 獲取網頁內容,并控制 tab 上的 spinner 展現,表示正在加載中。

          network thread 會執行 DNS 查詢,隨后為請求建立 TLS 連接。


          UI thread 通知 Network thread 加載相關信息

          如果 network thread 接收到了重定向請求頭如 301,network thread 會通知 UI thread 服務器要求重定向,之后,另外一個 URL 請求會被觸發。

          3. 讀取響應

          當請求響應返回的時候,network thread 會依據 Content-Type 及 MIME Type sniffing 判斷響應內容的格式。


          判斷響應內容的格式

          如果響應內容的格式是 HTML ,下一步將會把這些數據傳遞給 renderer process,如果是 zip 文件或者其它文件,會把相關數據傳輸給下載管理器。

          Safe Browsing 檢查也會在此時觸發,如果域名或者請求內容匹配到已知的惡意站點,network thread 會展示一個警告頁。此外 CORB 檢測也會觸發確保敏感數據不會被傳遞給渲染進程。


          4. 查找渲染進程

          當上述所有檢查完成,network thread 確信瀏覽器可以導航到請求網頁,network thread 會通知 UI thread 數據已經準備好,UI thread 會查找到一個 renderer process 進行網頁的渲染。


          收到 Network thread 返回的數據后,UI thread 查找相關的渲染進程

          由于網絡請求獲取響應需要時間,這里其實還存在著一個加速方案。當 UI thread 發送 URL 請求給 network thread 時,瀏覽器其實已經知道了將要導航到那個站點。UI thread 會并行的預先查找和啟動一個渲染進程,如果一切正常,當 network thread 接收到數據時,渲染進程已經準備就緒了,但是如果遇到重定向,準備好的渲染進程也許就不可用了,這時候就需要重啟一個新的渲染進程。

          5. 確認導航

          進過了上述過程,數據以及渲染進程都可用了, Browser Process 會給 renderer process 發送 IPC 消息來確認導航,一旦 Browser Process 收到 renderer process 的渲染確認消息,導航過程結束,頁面加載過程開始。

          此時,地址欄會更新,展示出新頁面的網頁信息。history tab 會更新,可通過返回鍵返回導航來的頁面,為了讓關閉 tab 或者窗口后便于恢復,這些信息會存放在硬盤中。


          6. 額外的步驟

          一旦導航被確認,renderer process 會使用相關的資源渲染頁面,下文中我們將重點介紹渲染流程。當 renderer process 渲染結束(渲染結束意味著該頁面內的所有的頁面,包括所有 iframe 都觸發了 onload 時),會發送 IPC 信號到 Browser process, UI thread 會停止展示 tab 中的 spinner。


          Renderer Process 發送 IPC 消息通知 browser process 頁面已經加載完成。

          當然上面的流程只是網頁首幀渲染完成,在此之后,客戶端依舊可下載額外的資源渲染出新的視圖。

          在這里我們可以明確一點,所有的 JS 代碼其實都由 renderer Process 控制的,所以在你瀏覽網頁內容的過程大部分時候不會涉及到其它的進程。不過也許你也曾經監聽過 beforeunload 事件,這個事件再次涉及到 Browser Process 和 renderer Process 的交互,當當前頁面關閉時(關閉 Tab ,刷新等等),Browser Process 需要通知 renderer Process 進行相關的檢查,對相關事件進行處理。


          瀏覽器進程發送 IPC 消息給渲染進程,通知要離開當前網站了

          如果導航由 renderer process 觸發(比如在用戶點擊某鏈接,或者 JS 執行 window.location = "http://newsite.com" ) renderer process 會首先檢查是否有 beforeunload 事件處理器,導航請求由 renderer process 傳遞給 Browser process。

          如果導航到新的網站,會啟用一個新的 render process 來處理新頁面的渲染,老的進程會留下來處理類似 unload 等事件。

          關于頁面的生命周期,更多內容可參考 Page Lifecycle API 。


          瀏覽器進程發送 IPC 消息到新的渲染進程通知渲染新的頁面,同時通知舊的渲染進程卸載。

          除了上述流程,有些頁面還擁有 Service Worker (服務工作線程),Service Worker 讓開發者對本地緩存及判斷何時從網絡上獲取信息有了更多的控制權,如果 Service Worker 被設置為從本地 cache 中加載數據,那么就沒有必要從網上獲取更多數據了。

          值得注意的是 service worker 也是運行在渲染進程中的 JS 代碼,因此對于擁有 Service Worker 的頁面,上述流程有些許的不同。

          當有 Service Worker 被注冊時,其作用域會被保存,當有導航時,network thread 會在注冊過的 Service Worker 的作用域中檢查相關域名,如果存在對應的 Service worker,UI thread 會找到一個 renderer process 來處理相關代碼,Service Worker 可能會從 cache 中加載數據,從而終止對網絡的請求,也可能從網上請求新的數據。


          Service Worker 依據具體情形做處理。

          關于 Service Worker 的更多內容可參考:

          https://developers.google.com/web/fundamentals/primers/service-workers/lifecycle

          如果 Service Worker 最終決定通過網上獲取數據,Browser 進程 和 renderer 進程的交互其實會延后數據的請求時間 。Navigation Preload 是一種與 Service Worker 并行的加速加載資源的機制,服務端通過請求頭可以識別這類請求,而做出相應的處理。

          更多內容可參考:

          https://developers.google.com/web/updates/2017/02/navigation-preload

          渲染進程是如何工作的?

          渲染進程幾乎負責 Tab 內的所有事情,渲染進程的核心目的在于轉換 HTML CSS JS 為用戶可交互的 web 頁面。渲染進程中主要包含以下線程:


          渲染進程包含的線程

          1. 主線程 Main thread

          2. 工作線程 Worker thread

          3. 排版線程 Compositor thread

          4. 光柵線程 Raster thread

          后文我們將逐步介紹不同線程的職責,在此之前我們先看看渲染的流程。

          1. 構建 DOM

          當渲染進程接收到導航的確認信息,開始接受 HTML 數據時,主線程會解析文本字符串為 DOM。

          渲染 html 為 DOM 的方法由 HTML Standard 定義。

          2. 加載次級的資源

          網頁中常常包含諸如圖片,CSS,JS 等額外的資源,這些資源需要從網絡上或者 cache 中獲取。主進程可以在構建 DOM 的過程中會逐一請求它們,為了加速 preload scanner 會同時運行,如果在 html 中存在 <img><link> 等標簽,preload scanner 會把這些請求傳遞給 Browser process 中的 network thread 進行相關資源的下載。

          3.JS 的下載與執行

          當遇到 <script> 標簽時,渲染進程會停止解析 HTML,而去加載,解析和執行 JS 代碼,停止解析 html 的原因在于 JS 可能會改變 DOM 的結構(使用諸如 documwnt.write()等 API)。

          不過開發者其實也有多種方式來告知瀏覽器應對如何應對某個資源,比如說如果在<script> 標簽上添加了 async 或 defer 等屬性,瀏覽器會異步的加載和執行 JS 代碼,而不會阻塞渲染。更多的方法可參考 Resource Prioritization – Getting the Browser to Help You。

          4. 樣式計算

          僅僅渲染 DOM 還不足以獲知頁面的具體樣式,主進程還會基于 CSS 選擇器解析 CSS 獲取每一個節點的最終的計算樣式值。即使不提供任何 CSS,瀏覽器對每個元素也會有一個默認的樣式。


          渲染進程主線程計算每一個元素節點的最終樣式值

          5. 獲取布局

          想要渲染一個完整的頁面,除了獲知每個節點的具體樣式,還需要獲知每一個節點在頁面上的位置,布局其實是找到所有元素的幾何關系的過程。其具體過程如下:

          通過遍歷 DOM 及相關元素的計算樣式,主線程會構建出包含每個元素的坐標信息及盒子大小的布局樹。布局樹和 DOM 樹類似,但是其中只包含頁面可見的元素,如果一個元素設置了 display:none ,這個元素不會出現在布局樹上,偽元素雖然在 DOM 樹上不可見,但是在布局樹上是可見的。


          6. 繪制各元素

          即使知道了不同元素的位置及樣式信息,我們還需要知道不同元素的繪制先后順序才能正確繪制出整個頁面。在繪制階段,主線程會遍歷布局樹以創建繪制記錄。繪制記錄可以看做是記錄各元素繪制先后順序的筆記。


          主線程依據布局樹構建繪制記錄

          7. 合成幀

          熟悉 PS 等繪圖軟件的童鞋肯定對圖層這一概念不陌生,現代 Chrome 其實利用了這一概念來組合不同的層。

          復合是一種分割頁面為不同的層,并單獨柵格化,隨后組合為幀的技術。不同層的組合由 compositor 線程(合成器線程)完成。

          主線程會遍歷布局樹來創建層樹(layer tree),添加了 will-change CSS 屬性的元素,會被看做單獨的一層。


          主線程遍歷布局樹生成層樹

          你可能會想給每一個元素都添加上 will-change,不過組合過多的層也許會比在每一幀都柵格化頁面中的某些小部分更慢。為了更合理的使用層,可參考 堅持僅合成器的屬性和管理層計數 。

          一旦層樹被創建,渲染順序被確定,主線程會把這些信息通知給合成器線程,合成器線程會柵格化每一層。有的層的可以達到整個頁面的大小,因此,合成器線程將它們分成多個磁貼,并將每個磁貼發送到柵格線程,柵格線程會柵格化每一個磁貼并存儲在 GPU 顯存中。


          柵格線程會柵格化每一個磁貼并存儲在 GPU 顯存中

          一旦磁貼被光柵化,合成器線程會收集稱為繪制四邊形的磁貼信息以創建合成幀。

          合成幀隨后會通過 IPC 消息傳遞給瀏覽器進程,由于瀏覽器的 UI 改變或者其它拓展的渲染進程也可以添加合成幀,這些合成幀會被傳遞給 GPU 用以展示在屏幕上,如果滾動發生,合成器線程會創建另一個合成幀發送給 GPU。


          合成器線程會發送合成幀給 GPU 渲染

          合成器的優點在于,其工作無關主線程,合成器線程不需要等待樣式計算或者 JS 執行,這就是為什么合成器相關的動畫 最流暢,如果某個動畫涉及到布局或者繪制的調整,就會涉及到主線程的重新計算,自然會慢很多。

          瀏覽器對事件的處理

          瀏覽器通過對不同事件的處理來滿足各種交互需求,這一部分我們一起看看從瀏覽器的視角,事件是什么,在此我們先主要考慮鼠標事件。

          在瀏覽器的看來,用戶的所有手勢都是輸入,鼠標滾動,懸置,點擊等等都是。

          當用戶在屏幕上觸發諸如 touch 等手勢時,首先收到手勢信息的是 Browser process, 不過 Browser process 只會感知到在哪里發生了手勢,對 tab 內內容的處理是還是由渲染進程控制的。

          事件發生時,瀏覽器進程會發送事件類型及相應的坐標給渲染進程,渲染進程隨后找到事件對象并執行所有綁定在其上的相關事件處理函數。


          事件從瀏覽器進程傳送給渲染進程

          前文中,我們提到過合成器可以獨立于主線程之外通過合成柵格化層平滑的處理滾動。如果頁面中沒有綁定相關事件,組合器線程可以獨立于主線程創建組合幀。如果頁面綁定了相關事件處理器,主線程就不得不出來工作了。這時候合成器線程會怎么處理呢?

          這里涉及到一個專業名詞「理解非快速滾動區域(non-fast scrollable region)」由于執行 JS 是主線程的工作,當頁面合成時,合成器線程會標記頁面中綁定有事件處理器的區域為 non-fast scrollable region ,如果存在這個標注,合成器線程會把發生在此處的事件發送給主線程,如果事件不是發生在這些區域,合成器線程則會直接合成新的幀而不用等到主線程的響應。


          涉及 non-fast scrollable region 的事件,合成器線程會通知主線程進行相關處理。

          web 開發中常用的事件處理模式是事件委托,基于事件冒泡,我們常常在最頂層綁定事件:

          復制代碼

          document.body.addEventListener('touchstart', 
          event => {
           if (event.target === area) {
           event.preventDefault();
           }
          }
          );
           
          

          上述做法很常見,但是如果從瀏覽器的角度看,整個頁面都成了 non-fast scrollable region 了。

          這意味著即使操作的是頁面無綁定事件處理器的區域,每次輸入時,合成器線程也需要和主線程通信并等待反饋,流暢的合成器獨立處理合成幀的模式就失效了。


          由于事件綁定在最頂部,整個頁面都成為了 non-fast scrollable region。

          為了防止這種情況,我們可以為事件處理器傳遞 passive: true 做為參數,這樣寫就能讓瀏覽器即監聽相關事件,又讓組合器線程在等等主線程響應前構建新的組合幀。

          復制代碼

          document.body.addEventListener('touchstart', 
          event => {
           if (event.target === area) {
           event.preventDefault()
           }
           }, {passive: true}
          );
           
          

          不過上述寫法可能又會帶來另外一個問題,假設某個區域你只想要水平滾動,使用 passive: true 可以實現平滑滾動,但是垂直方向的滾動可能會先于event.preventDefault()發生,此時可以通過 event.cancelable 來防止這種情況。

          復制代碼

          document.body.addEventListener('pointermove', event => {
           if (event.cancelable) {
           event.preventDefault(); // block the native scroll
           /*
           * do what you want the application to do here
           */
           } 
          }, {passive: true});
           
          

          也可以使用 css 屬性 touch-action 來完全消除事件處理器的影響,如:

          復制代碼

          #area { 
           touch-action: pan-x; 
          }
           
          

          查找到事件對象

          當組合器線程發送輸入事件給主線程時,主線程首先會進行命中測試(hit test)來查找對應的事件目標,命中測試會基于渲染過程中生成的繪制記錄( paint records )查找事件發生坐標下存在的元素。


          主線程依據繪制記錄查找事件相關元素。

          事件的優化

          一般我們屏幕的刷新速率為 60fps,但是某些事件的觸發量會不止這個值,出于優化的目的,Chrome 會合并連續的事件 (如 wheel, mousewheel, mousemove, pointermove, touchmove ),并延遲到下一幀渲染時候執行 。

          而如 keydown, keyup, mouseup, mousedown, touchstart, 和 touchend 等非連續性事件則會立即被觸發。


          Chrome 會合并連續事件到下一幀觸發。

          合并事件雖然能提示性能,但是如果你的應用是繪畫等,則很難繪制一條平滑的曲線了,此時可以使用 getCoalescedEvents API 來獲取組合的事件。示例代碼如下:

          復制代碼

          window.addEventListener('pointermove', event => {
           const events = event.getCoalescedEvents();
           for (let event of events) {
           const x = event.pageX;
           const y = event.pageY;
           // draw a line using x and y coordinates.
           }
          });
           
          



          花了好久來整理上面的內容,整理的過程收獲還挺大的,也希望這篇筆記能對你有所啟發,如果有任何疑問,歡迎一起來討論。

          本文經作者授權轉載,原文鏈接為:

          https://zhuanlan.zhihu.com/p/47407398

          參考鏈接

          • https://developers.google.com/web/updates/2018/09/inside-browser-part1
          • https://developers.google.com/web/updates/2018/09/inside-browser-part2
          • https://developers.google.com/web/updates/2018/09/inside-browser-part3
          • https://developers.google.com/web/updates/2018/09/inside-browser-part4
          • https://www.html5rocks.com/zh/tutorials/internals/howbrowserswork/#Layered_representation

          主站蜘蛛池模板: 最新欧美精品一区二区三区 | 美女免费视频一区二区| 亚洲AV香蕉一区区二区三区| 一区二区三区四区无限乱码| 久久精品国产亚洲一区二区三区| 亚洲一区二区三区四区在线观看| 国产精品盗摄一区二区在线| 大帝AV在线一区二区三区| 国产激情一区二区三区成人91| 亚洲AV无码一区二区三区人| 精品成人一区二区三区四区| 免费无码A片一区二三区| 亚洲av日韩综合一区在线观看| 大香伊蕉日本一区二区| 内射白浆一区二区在线观看| 日本一区午夜爱爱| 亚洲综合激情五月色一区| 久久99精品国产一区二区三区| 色窝窝无码一区二区三区成人网站| 91精品一区二区| 亚洲AV日韩AV一区二区三曲| 久久精品一区二区东京热| 交换国产精品视频一区| 国产激情一区二区三区四区 | 91精品福利一区二区| 亲子乱av一区二区三区| 精品视频在线观看一区二区| 无码夜色一区二区三区| 精品一区精品二区制服| 无码一区二区三区视频| 伊人久久一区二区三区无码| 精品一区二区三区四区| 国产午夜精品一区理论片飘花| 99精品一区二区三区| 国产无套精品一区二区| 亚洲AV成人一区二区三区在线看 | 亚洲AV无码一区二区三区系列| 日本片免费观看一区二区| 国产伦精品一区二区三区四区 | 国产一区二区三区亚洲综合 | 国产精品99精品一区二区三区|