博客
指南、教程与 洞见
从 Shifter 团队了解住宅代理、网页抓取、数据采集策略及行业最佳实践。
知识
知识 2 分钟阅读
用于调查报道的公开记录收集:方法、伦理与核实
公开记录推动调查报道,但前提是谨慎收集、按原样保存并在发布前核实。这是一套适用于新闻编辑室的方法。
知识
知识 2 分钟阅读
制定企业数据采集政策:一份实用模板
大多数采集网络数据的团队都没有成文规则。一份实用的政策模板:涵盖范围、审批、数据来源、个人数据及下架处理。
知识
知识 3 分钟阅读
跨市场无障碍审计:测试每个国家用户实际看到的内容
对美国首页的审计几乎说明不了你的德国或日本首页的情况。我们审计了来自四个国家的23个网站:四分之一存在仅特定市场才有的问题。
知识
知识 3 分钟阅读
价格一致性监控:发现自家库存被低价竞标
当酒店房间在其他渠道上显示更便宜的价格时,酒店会失去直接预订。如何在不引发误报的情况下监控各渠道和市场的价格一致性。
知识
知识 4 分钟阅读
如何大规模检测虚假评论和评论欺诈
美国、英国和欧盟均已禁止虚假评论,各平台也删除了数以亿计的虚假评论。如何在众多产品中检测评论欺诈,附经过测试的代码。
知识
知识 4 分钟阅读
使用 hreflang 查找页面的所有语言和国家版本
hreflang 列出页面的所有本地化版本。我们检查了顶级网站如何使用它、哪些地方会出错,以及为什么有些版本只能在特定国家内打开。
知识
知识 3 分钟阅读
跨地区规范化价格、数字和日期
1.234,56 € 和 $1,234.56 都是价格,而 03/04/2026 是两个不同的日期。如何根据地区正确解析抓取到的数值,并附有经过测试的代码。
知识
知识 3 分钟阅读
抓取数据中的模式漂移:在用户发现之前捕获失效的提取器
网站发生变化时,抓取器很少会崩溃。它们会继续运行,并返回细微错误的数据。数据契约和批量画像分析如何及早发现漂移。
知识
知识 3 分钟阅读
去重抓取数据:产品、公司和列表的实体解析
同一产品、公司或列表在不同来源和不同抓取批次中多次出现。如何规范化标识符,大规模安全匹配,并保留一条干净的记录。