强引蜘蛛之某度蜘蛛

发包版本

逆向JS、模拟数据包、检测更新等成本较高;多线程高效率,蜘蛛爬取后收录率更新期略有波动。

除了点击tc?等数据包,还包括mwb、webb、w.gif等。现在已经实现了模拟计算result高度等,及重要衍生参数算法等已实现。

如w.gif:

tag: ecom_wise_listen_n
baiduid: **
searchid: **
osid: 2
bwsid: 4
adt: 0
adb: 0
wst: 155.1875
top: 0
wise: 10
middle: 0
bottom: 0
adpos: t_0_0.00
pbt: 148
yxh: 0
zoom: 1
validHeight: 592
initViewZone: w_1_0.00:w_3_0.94
adsHeight: _w1:157_w2:191_w3:237_w4:237_w5:258_w6:181_w7:157_w8:191_w9:157_w10:246
adsCmatch: 
availHeight: 740
availWidth: 360
winHeight: 740
winWidth: 360
action: init
model: {"vt":"w1:0#w2:0#w3:0#w4:0#w5:0#w6:0#w7:0#w8:0#w9:0#w10:0","pt":"","ext":[],"vsh":592,"asid":"","rd":1668479384655}
searchId: **
asp_time: 1668479383948
query: **
queryUtf8: **
rand: 1668479384657.4326
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21
  • 22
  • 23
  • 24
  • 25
  • 26
  • 27
  • 28
  • 29
  • 30
  • 31

其中initViewZone、adsHeight渲染算法等。

模拟版本

效率相对偏低,收录率相对较为稳定。与SEO系统师出同门,采用了基于chromium的修改内核版本,稳定一如既往。

版权声明:跳动 发表于 2024年11月29日 pm6:29。
转载请注明:强引蜘蛛之某度蜘蛛 | 梦导航

相关文章