rogee
221ed65e32
- 竞品同步不再依赖自有采集账号：每次同步按名额（并发上限 2）创建匿名浏览器， 导航至抖音首页等待访客 cookie 稳定后经网关受限 fetch 拉取作品 - 调度器对到期竞品并发同步，名额耗尽时排队等待 - 平台风控语义（实测，与公开爬虫项目一致）：作品列表匿名仅能取第一页 （16-20 条），后续页一律空 envelope；空 envelope 视为正常分页终止 - 评论解析适配真实响应：reply_id="0" 为顶层评论、作者取 user 对象、 纯图片评论（text 空但带 image_list）记为「[图片]」 - fetch 签名与白名单：注入 byted_acrawler.frontierSign 的 a_bogus， 网关放宽响应上限至 8MB 并允许签名参数