LinkedIn 不再允许我使用 Google 用户 - "sentinel_org_block"

Question

不确定这是否与最近对 LinkedIn api 的紧缩有关(也许不是发布此内容的正确 Stack 位置)，但我在从我的服务器使用 LinkedIn 时遇到了一个奇怪的错误。

我知道他们真的锁定了“网络抓取工具”(我没有在他们的网站上这样做)。我的网站所做的只是让您单击一个名称并执行谷歌搜索。

点击John Doe who works for Acme Corp将您重定向到 Google，以搜索“John Doe Acme Corp LinkedIn”，这通常会在第一个结果中提供正确的用户个人资料。嘘!

但是，当我单击该结果时，我得到一个错误页面。事实上，当我点击任何 LinkedIn 谷歌搜索结果(即使我有机地用谷歌搜索)时，我都会被重定向到“找不到页面”结果。

所有错误页面都有/uas/login?trk=sentinel_org_block在他们中。

知道这里发生了什么吗？当然，LinkedIn 并没有阻止我简单地用谷歌搜索别人吗？

Answer 1

“sentinel_org_block”表示您的请求由于 IP 地址的反抓取限制而被阻止。看看lawsuit LinkedIn 对 100 个匿名爬虫提起诉讼。在第 4 页，第 25 行，有对他们的“哨兵”系统的引用，在第 5 页，第 1 行，对“组织 block ”系统的引用(因此是“sentinel_org_block”)。

基于上述和我的个人经验，我认为 LinkedIn 对给定 ISP 的公开个人资料查看次数有每日限制。

我正在构建 interactive resume它会为我当前的职位抓取我的公共(public) LinkedIn 个人资料并自动填充仪表板。在测试 ETL 脚本时，我多次调用公共(public)个人资料页面，在大约 50 到 100 次调用后，页面停止工作——它会重定向到 LinkedIn 注册页面。

有趣的是，它似乎阻止了来自我的 ISP 的任何 IP 地址(我请同一个 ISP 上的几个 friend 尝试加载页面，他们也遇到了同样的问题)。当我问另一个 ISP 的 friend 时，它工作得很好。

好消息是，这是一个临时封锁。根据之前的经验，它似乎会在 24 小时后升起。