分享一个今天做的爬虫脚本
主要是为了解决我找词的一个痛点
也就是如何才能在trending now这么多词里找到“商业化意图的词”,更准确的可以说是有发展为web saas或者工具站潜力的词
我设置的流程是爬取指定国家在trending now最近24小时的词,然后让ai去分析这些词,根据这个词以及相关细分词打分
分数越高就说明商业化潜力越大
图一是爬取了十个国家后去分析接近1500个词,创建了5个gemini api来轮流总结防止超过限制(图二)。图三是输出的结果,也就是商业化潜力较高的词
后续工作是准备做定时任务接邮箱,每天设置一个时间点去跑指定的国家队列,把跑出的结果发到我邮箱。还有一个就是对收集到的词继续自动化去查看最近一年的趋势,再做进一步的分析