如何从"国家药品监督管理"局获取全量产品成分数据

2023 年 11 月 11 日
 lxwlxc

发现一些 APP 能查到各种食品、化妆品成分数据，例如"成分喵"、"美丽修行"这种。好奇，他们是如何拿到数据的。

我直接去国家药品监督管理局官方查询，每次搜索都需要验证码，所以他们怎么拿到全量数据的？是爬虫绕过验证码爬的、还是官方有合作渠道、还是别的手段，有知道的小伙伴吗？

下面是成分喵截图：

2129 次点击
所在节点    问与答
15 条回复
bigdogbigpig
2023 年 11 月 11 日
卖数据的，只是不卖给你
sakura6264
2023 年 11 月 11 日
这大概率不是个技术问题。
lxwlxc
2023 年 11 月 11 日
@mazyi 你是指官方内鬼卖数据？还是说有官方有合作渠道付费接口
lxwlxc
2023 年 11 月 11 日
@sakura6264 所以好奇他们什么渠道搞来的
bigdogbigpig
2023 年 11 月 11 日
@lxwlxc 都可能有，但是你不知道，肯定就是没有了。据我所知，有些内部接口完全不公开的。
Ericcccccccc
2023 年 11 月 11 日
你感觉你做一个企查查能成立吗?
me1onsoda
2023 年 11 月 11 日
基本上是内部 api 。
逆向国家机构的风控系统法律风险太大了。
1145148964
2023 年 11 月 11 日
这是人家的生意啊。
lxwlxc
2023 年 11 月 11 日
@Ericcccccccc 没这本事，所以老哥觉得上面 app 的数据怎么来的
lxwlxc
2023 年 11 月 11 日
@me1onsoda 我也觉得不太可能爬取或入侵国家官方系统，内部 api 是指和官方有合作吗？
lxwlxc
2023 年 11 月 11 日
@1145148964 不怕笑话，我本来也打算搞一个这种 app ，做一些特有的功能，后来发现拿不到数据
PbCopy111
2023 年 11 月 11 日
这个可以合法买数据啊，合法的。
lxwlxc
2023 年 11 月 12 日
@PbCopy111 #12 多谢回复，这么说，看来是有官方正规合作渠道
lingalonely
2024 年 8 月 15 日
就是采集的，那美丽修行为例，他们在 16 年就采集了，那时候一个小团队，你觉得回去哪里买数据
lxwlxc
2024 年 10 月 17 日
@lingalonely 多谢回复，那就是绕过验证码或者自动识别验证码强行爬的？这么嚣张？

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://study.congcong.us/t/990875

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX