微信 iOS 版 8.0.18 “聊天图片搜索”功能的工作原理是什么？

2022 年 2 月 17 日
 microka
微信 iOS 版 8.0.18 已广泛支持“聊天图片搜索”功能：二维码、截图、人物、食物、植物...
https://www.ithome.com/0/603/437.htm

微信支持聊天图片搜索上热搜！网友：出点有用的功能有多难？
https://news.mydrivers.com/1/815/815307.htm

好奇这个识图搜索是调用 iOS 的 api ？还是用微信自己的识图引擎？
可以排除云端识图，刚试了开飞行模式也能识图搜索。
2409 次点击
所在节点    微信
7 条回复
JeffGe
2022 年 2 月 17 日
开飞行模式怎么能排除云端？关键字和 OCR 可以一起保存到本地数据库啊
jr55475f112iz2tu
2022 年 2 月 17 日
微信这种国民级应用，手上拿着的数据多到你无法想象
microka
2022 年 2 月 17 日
@JeffGe #1 “聊天图片搜索”功能选项刚开启的，没多久就开飞行模式，然后打开一个之前没搜索过的群聊，都能识图搜索，而且能看到随着时间的推移索引关键字逐渐增多，很明显就不是通过云端来识图的。
microka
2022 年 2 月 17 日
@czfy #2 所以你意思是？
vandort
2022 年 2 月 17 日
看着感觉上像是图片打 tag 和调用本地 OCR 服务（ iOS 的或者微信自己的）
em957
2022 年 2 月 19 日
微信上周日，后台自动下载 http://dldir1.qq.com/weixin/Kara/KaraImage.mlmodel.zst


参考 apple Classifying Images with Vision and Core ML
https://developer.apple.com/documentation/vision/classifying_images_with_vision_and_core_ml

本地 OCR 服务可行性高一点
microka
2022 年 2 月 19 日
@em957 #6 意思是微信调用了 iOS 的 api 进行本地 OCR 吗？后台自动下载的 KaraImage.mlmodel.zst 是给机器参考的样本？

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://study.congcong.us/t/834618

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX