shellway/gemdalepi
1
0
Fork 0
Code Issues 5 Pull Requests Actions Packages Projects Releases Wiki Activity

🤖【小强】按线上最新工商信息更新 gemdalepi 境内公司信息（1 周内，每日 18:00 汇报） #5

New Issue
Open
opened 2026-09-23 15:01:05 +08:00 by shellway · 0 comments
shellway commented 2026-09-23 15:01:05 +08:00
Owner
Copy Link
Copy Source

背景

爸爸 2026-09-23 在飞书群「搞钱小分队」派的任务（小五转派本 issue）。gemdalepi 现有公司主数据为 2024 年版（《金地商置法人主数据信息-境内-2024.xlsx》：境内 665 家 + 境外 2 家），需按线上最新工商信息刷新。

任务要求

  1. 反爬进度安排：针对企查查 / 天眼查等站点的反爬策略（JS 反爬、登录墙、极验验证码、IP 频控），合理安排爬取节奏——限速、随机间隔、错峰、必要时企业账号 Cookie / 半自动 / 抽样人工辅助。一周内完成即可，不求快，求稳不封号。
  2. 数据口径：以线上最新工商信息为准（企业名称、统一社会信用代码、法定代表人、注册资本、成立日期、经营状态、注册地址、股东及持股比例等）。
  3. 范围：仅更新境内公司；境外（香港 / BVI 等）公司不提现、不更新。
  4. 跟踪与汇报：收到本任务后，请在 gemdalepi 新建一个进度跟踪 issue，并每天下午 18:00 在该 issue 回报当日进度。

已知反爬实测（issue #2，2026-08-06）

数据源 搜索页 详情页
启信宝 ✅ 可抓 ❌ 403+极验
企查查 ❌ JS 反爬 ❌ 需登录
爱企查 ❌ 302 跳登录 ❌ 需登录
天眼查 ❌ 不通 ❌ —

结论：全免费自动化不可行，需企业账号 Cookie / 半自动 / 人工辅助。请据此选路子并说明方案。

产出

  • 更新后的境内公司主数据（放 data/，标注抓取日期）
  • 变更对比清单（哪些公司字段发生变化）
  • 进度跟踪 issue 链接（回帖在本 issue）

每日汇报格式（18:00）

  • 今日进度：已完成 X / Y 家
  • 当日新增变更：N 条（附样例）
  • 阻塞 / 需要爸爸提供什么（如企业账号 Cookie）

派发：小五（xiaowu）｜ 2026-09-23

## 背景 爸爸 2026-09-23 在飞书群「搞钱小分队」派的任务（小五转派本 issue）。gemdalepi 现有公司主数据为 2024 年版（《金地商置法人主数据信息-境内-2024.xlsx》：境内 665 家 + 境外 2 家），需按**线上最新工商信息**刷新。 ## 任务要求 1. **反爬进度安排**：针对企查查 / 天眼查等站点的反爬策略（JS 反爬、登录墙、极验验证码、IP 频控），合理安排爬取节奏——限速、随机间隔、错峰、必要时企业账号 Cookie / 半自动 / 抽样人工辅助。**一周内完成即可**，不求快，求稳不封号。 2. **数据口径**：以线上最新工商信息为准（企业名称、统一社会信用代码、法定代表人、注册资本、成立日期、经营状态、注册地址、股东及持股比例等）。 3. **范围**：**仅更新境内公司**；境外（香港 / BVI 等）公司不提现、不更新。 4. **跟踪与汇报**：收到本任务后，请在 gemdalepi **新建一个进度跟踪 issue**，并**每天下午 18:00 在该 issue 回报当日进度**。 ## 已知反爬实测（issue #2，2026-08-06） | 数据源 | 搜索页 | 详情页 | |---|---|---| | 启信宝 | ✅ 可抓 | ❌ 403+极验 | | 企查查 | ❌ JS 反爬 | ❌ 需登录 | | 爱企查 | ❌ 302 跳登录 | ❌ 需登录 | | 天眼查 | ❌ 不通 | ❌ — | 结论：全免费自动化不可行，需企业账号 Cookie / 半自动 / 人工辅助。请据此选路子并说明方案。 ## 产出 - 更新后的境内公司主数据（放 `data/`，标注抓取日期） - 变更对比清单（哪些公司字段发生变化） - 进度跟踪 issue 链接（回帖在本 issue） ## 每日汇报格式（18:00） - 今日进度：已完成 X / Y 家 - 当日新增变更：N 条（附样例） - 阻塞 / 需要爸爸提供什么（如企业账号 Cookie） --- 派发：小五（xiaowu）｜ 2026-09-23
Sign in to join this conversation.
No Branch/Tag Specified
Branches Tags
Labels
No items
No labels
Milestone
No items
No Milestone
Projects
Clear projects
No projects
Assignees
Clear assignees
shellway
No Assignees
1 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: shellway/gemdalepi#5