【Skill分享】:网络安全领域标讯采集助手Skill


标讯就是知己知彼,百战不殆的关键来源。

通常企业有相关标讯系统进行漫长的信息搬运——中国政府采购网、采招网、深交所电子招投标系统、知了标讯、金融采购网……然后通过CRM等平台同步到一线团队,随着AI时代的到来,标讯的获取或许不需要从总部一级一级传递下来,每个前场,销售都可以尝试通过Skill+AI Agent的方式获取定制化的标讯。

我算过,如果手工采集标讯,时间少则两三个小时,多则半天。做的都是机械的事情,但没有捷径可走。而且金融行业的网络安全标讯来源实在太分散了,你少看一个网站,可能就漏掉一条几十万甚至上百万的项目信息。

Part.01 那些年,我翻过的标讯网站

做安全行业的朋友,大概多少都经历过类似的事情。

金融行业的网络安全标讯,来源极其分散。国家级平台有中国政府采购网、招标投标公共服务平台、全国公共资源交易平台、中央政府采购网、中国采购与招标网五个,这五个是最权威的,覆盖率高,公告格式也规范。但光靠它们远远不够。

金融直连平台更多。深交所有自己的电子招投标系统,上交所、中金所各有各的采购信息页面。央行集中采购中心负责央行及下属机构的采购公告,成方金融信息技术经常发布安全产品的采购项目。国家开发银行用的是"征集+采购"模式,金融采购网则聚合了大量银行、证券、保险机构的标讯。

再往外围看,三大运营商的采购平台——中国移动、中国电信、中国联通,还有能源央企——国家电网、南方电网、国家能源集团、华能、大唐、华电、中石化,这些看起来跟金融行业关系不大,但实际上它们的信息安全采购量不小,而且供应商群体跟金融机构高度重叠。如果你在做市场分析或者竞争情报,这些信息必不可少。

更不用说采招网、千里马、乙方宝、政采云这些商业聚合平台,加上深圳公共资源交易中心、蚂蚁投标等辅助渠道。

加在一起,一个比较完整的标讯采集,需要覆盖的信息源至少有几十个。一个人每天要翻完这些网站,还要确保不遗漏、不重复、不记错金额和日期,几乎是不可能完成的任务。

但过去很长一段时间,我就是这么过来的。因为这是工作需要,因为没有更好的办法。

Part.02 从10个渠道到40个渠道

转机出现在我开始认真研究AI技能的时候。

我想的是:既然AI已经能帮我做很多事情了,标讯采集这件事,能不能也交给它?

说干就干。最先做出来的版本叫 bid-news-collection,v1.0,只覆盖了10个采集渠道,三线关键词体系——安全服务线、安全产品线、运维平台线。每条线配一组关键词,用AND和OR的组合去搜索引擎里搜。

跑完第一轮,结果出来了。十几二十条标讯,不多,但确实能用。比手动翻快了不少,我心里清楚,10个渠道远远不够。

问题在哪?覆盖面太窄。央行系的项目在中国政府采购网上能看到一些,但深交所、上交所的采购公告要去各自的平台才能找到。能源央企的安全采购虽然不是金融机构发的,但那些项目背后的供应商信息,对于判断市场趋势有参考价值。10个渠道只是冰山一角。

于是开始了迭代。

v1.3,加了中国移动和国家电网两个渠道,10变成12。

v1.4,做了一个比较重要的改动——关键词体系重构。原来三线的颗粒度太粗,我重新梳理了一遍。安全服务线从几个关键词扩展到了12个——等保、等级保护、密评、密码评估、渗透测试、攻防演练、重保、护网、安全评估、安全检测、安全审计、风险评估。安全产品线扩展到15个——防火墙、IPS、IDS、WAF、漏洞扫描、态势感知、堡垒机、数据库审计、邮件安全、DLP、零信任、EDR、XDR、数据安全、数据防泄漏。运维平台线9个词。

同时引入了第四条线——"行业搜索线"。工控安全、电力监控安全、物联网安全、云安全、数据分类分级、主机安全、终端安全,7个垂直领域的关键词。

这四条线形成了一个交叉搜索网络:前三线按采购内容纵向切分——你要找什么类型的服务或产品;行业线按应用领域横向切分——你要覆盖哪些行业场景。纵线和横线交叉,理论上能把绝大部分金融行业网安标讯都捞到。

v1.5正式定型了四线43词体系,搜索策略从原来的几轮变成了8轮横纵交叉搜索——每条线配不同的机构限定词(银行/证券/保险/金融),再叠加时效过滤(2026),形成完整的查询组合。

到了v1.6,我做了一次比较大的渠道扩展。12个渠道一下子扩到了40个,按优先级分成四个层级:

P0是5个国家级官方平台,必须采集,这是最权威的数据源。P1是22个重点渠道——9个金融直连平台、3个运营商、10个能源央企,覆盖了金融行业和关联行业的主要采购信息源。P2是12个商业聚合平台,用来扩大覆盖面,从不同搜索引擎的角度补充数据。P3是4个辅助渠道,按需查询,补漏用。

从10到40,看起来只是一个数字的变化,但背后的工作量不小。每个新渠道都要研究它的页面结构、搜索方式、注意事项——深交所的页面是JS渲染的,搜索引擎抓不全;采招网和知了标讯部分内容需要会员才能查看;国家电网的ECP2.0平台公告格式有自己…

— 以上为试看内容(约 40%),开通会员后阅读全文 —