資料介紹
針對(duì)并行爬蟲系統(tǒng)在多任務(wù)并發(fā)執(zhí)行時(shí)所遇到的模塊間負(fù)載平衡問題,提出流水線負(fù)載平衡模型(PLB),將不同的任務(wù)抽象為獨(dú)立模塊而達(dá)到各模塊的處理速度相等,采用多線程的方式實(shí)現(xiàn)基于PLB的并行爬蟲,根據(jù)線程的休眠和緩沖區(qū)的變化對(duì)線程數(shù)量進(jìn)行動(dòng)態(tài)調(diào)整以實(shí)現(xiàn)PLB。實(shí)驗(yàn)結(jié)果表明該方法具有良好的運(yùn)行效率和穩(wěn)定性。
關(guān)鍵詞:爬蟲;并行;流水線;負(fù)載平衡
關(guān)鍵詞:爬蟲;并行;流水線;負(fù)載平衡
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- 負(fù)載平衡監(jiān)控系統(tǒng)設(shè)計(jì)源碼分享 3次下載
- 嵌入式_流水線
- 12bit200MSPS時(shí)間交織流水線ADC研究與設(shè)計(jì)
- EE-383:基于MDMA的雙SHARC+并行流水線音頻直通
- 使用FPGA設(shè)計(jì)流水線的資料和程序詳細(xì)概述 3次下載
- 移植到全新的PIC24F流水線ADC和Σ-ΔADC免費(fèi)下載.pdf
- 負(fù)載平衡云存儲(chǔ)算法 0次下載
- 電能計(jì)量設(shè)備自動(dòng)檢定流水線調(diào)度優(yōu)化研究_方彥軍 1次下載
- 裝配流水線控制系統(tǒng)設(shè)計(jì) 14次下載
- 電鍍流水線的PLC控制 36次下載
- 流水線ADC的行為級(jí)仿真 21次下載
- 基于流水線結(jié)構(gòu)的多級(jí)數(shù)字混沌編碼方案 32次下載
- 基于流水線的并行FIR濾波器設(shè)計(jì) 63次下載
- 周期精確的流水線仿真模型
- MPI并行程序設(shè)計(jì)的負(fù)載平衡實(shí)現(xiàn)方法
- 流水線中Half-Buffer與Skid-Buffer的使用 422次閱讀
- 新版本Jenkins推薦使用聲明式流水線 709次閱讀
- Google GPipe為代表的流水線并行范式 1061次閱讀
- 以Gpipe作為流水線并行的范例進(jìn)行介紹 1128次閱讀
- 如何通過Vivado Synthesis中的URAM矩陣自動(dòng)流水線化來實(shí)現(xiàn)最佳時(shí)序性能 1844次閱讀
- 一個(gè)典型的流水線設(shè)計(jì) 1430次閱讀
- 報(bào)文解析規(guī)則定義 流水線劃分提取方案 1025次閱讀
- CPU流水線優(yōu)缺點(diǎn) 4484次閱讀
- 一文詳細(xì)了解流水線設(shè)計(jì) 5034次閱讀
- FPGA中流水線的原因和方式 6190次閱讀
- 通過并行流水線結(jié)構(gòu)實(shí)現(xiàn)直接型FIR濾波器的系統(tǒng)設(shè)計(jì)方案 3635次閱讀
- 流水線設(shè)計(jì)的思想介紹與設(shè)計(jì)實(shí)例 8103次閱讀
- 淺談GPU的渲染流水線實(shí)現(xiàn) 3843次閱讀
- 一文讀懂處理器流水線 2.2w次閱讀
- 新型流水線實(shí)現(xiàn)高速低功耗ADC的原理及方法 4522次閱讀
下載排行
本周
- 1DC電源插座圖紙
- 0.67 MB | 2次下載 | 免費(fèi)
- 2AN158 GD32VW553 Wi-Fi開發(fā)指南
- 1.51MB | 2次下載 | 免費(fèi)
- 3AN148 GD32VW553射頻硬件開發(fā)指南
- 2.07MB | 1次下載 | 免費(fèi)
- 4AN111-LTC3219用戶指南
- 84.32KB | 次下載 | 免費(fèi)
- 5AN153-用于電源系統(tǒng)管理的Linduino
- 1.38MB | 次下載 | 免費(fèi)
- 6AN-283: Σ-Δ型ADC和DAC[中文版]
- 677.86KB | 次下載 | 免費(fèi)
- 7SM2018E 支持可控硅調(diào)光線性恒流控制芯片
- 402.24 KB | 次下載 | 免費(fèi)
- 8AN-1308: 電流檢測(cè)放大器共模階躍響應(yīng)
- 545.42KB | 次下載 | 免費(fèi)
本月
- 1ADI高性能電源管理解決方案
- 2.43 MB | 450次下載 | 免費(fèi)
- 2免費(fèi)開源CC3D飛控資料(電路圖&PCB源文件、BOM、
- 5.67 MB | 138次下載 | 1 積分
- 3基于STM32單片機(jī)智能手環(huán)心率計(jì)步器體溫顯示設(shè)計(jì)
- 0.10 MB | 130次下載 | 免費(fèi)
- 4使用單片機(jī)實(shí)現(xiàn)七人表決器的程序和仿真資料免費(fèi)下載
- 2.96 MB | 44次下載 | 免費(fèi)
- 53314A函數(shù)發(fā)生器維修手冊(cè)
- 16.30 MB | 31次下載 | 免費(fèi)
- 6美的電磁爐維修手冊(cè)大全
- 1.56 MB | 24次下載 | 5 積分
- 7如何正確測(cè)試電源的紋波
- 0.36 MB | 17次下載 | 免費(fèi)
- 8感應(yīng)筆電路圖
- 0.06 MB | 10次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935121次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設(shè)計(jì)
- 1.48MB | 420062次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233088次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191367次下載 | 10 積分
- 5十天學(xué)會(huì)AVR單片機(jī)與C語言視頻教程 下載
- 158M | 183335次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81581次下載 | 10 積分
- 7Keil工具M(jìn)DK-Arm免費(fèi)下載
- 0.02 MB | 73810次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評(píng)論