[经验] 255

M100700 · 发表于 2023-10-12 23:25:30

本帖最后由 M100700 于 2023-10-12 23:26 编辑

cyz971337 发表于 2023-10-12 22:17
我看了几个索引，就这个采集有一定技术含量，有的机器人采集的内容都是垃圾的几十人小群。有的连刷流量的 ...

不管啥搜索引擎，数据爬出来之后，肯定会用一定规则筛选一下的，如果只以人数为参数筛选的话，应该不是很难的一件事。

其实我以前用过这些个所谓的索引，感觉数据量并不是很大，大家感兴趣的其实就那么一些关键词，基本都是灰黑产，涩情之类的东西，它每个关键词只返回一二十条数据，有一些数据会符合多个关键词，所以我大概估算了一下，就它这个数据量，人工审核都不是不可能，假设你有一万个群的数据，10秒审核一个群，一天86400秒，你算算，大概几天就审核完了。然后就是定时更新，这个就更不需要花太多时间。

这东西其实就跟导航网站差不多

cyz971337 · 发表于 2023-10-12 23:55:14

M100700 发表于 2023-10-12 23:25
不管啥搜索引擎，数据爬出来之后，肯定会用一定规则筛选一下的，如果只以人数为参数筛选的话，应该不是很 ...

系统怎么排名挺重要的，好群排在前面，人数还不能太低，有的索引拍前面的都是100人的，内容也很少，不知道啥程序员搞出来的

cyz971337 · 发表于 2023-10-12 23:56:28

M100700 发表于 2023-10-12 23:25
不管啥搜索引擎，数据爬出来之后，肯定会用一定规则筛选一下的，如果只以人数为参数筛选的话，应该不是很 ...

你说得对，总共群+频道的数量应该是一千个左右，而且搜索结果基本固定，并不是频道更新

MukaichiMion · 发表于 2023-10-13 00:37:24

有个1年~2年以上的后端开发经验就可以弄了

龙腾宇内 · 发表于 2023-10-13 09:35:25

cyz971337 发表于 2023-10-12 22:27
多线程多模块并发高的

你指的是采集数据还是机器人的响应能力？

cyz971337 · 发表于 2023-10-13 11:38:33

龙腾宇内发表于 2023-10-13 09:35
你指的是采集数据还是机器人的响应能力？

响应能力，能承受高并发的

jqbaobao · 发表于 2023-10-13 11:40:39

1，有一定成本，包括人工和金钱
2，没什么收益，除了灰黑产

Myeng · 发表于 2023-10-13 17:48:14

jqbaobao 发表于 2023-10-13 11:40
1，有一定成本，包括人工和金钱
2，没什么收益，除了灰黑产

涉案流水2亿，扣除资产4000多万这还是官方公布的，这叫没啥收益？？

jqbaobao · 发表于 2023-10-13 18:30:15

Myeng 发表于 2023-10-13 17:48
涉案流水2亿，扣除资产4000多万这还是官方公布的，这叫没啥收益？？

有没有一种可能，灰黑产的收益才有这么多
纯索引哪里的收益

Myeng · 发表于 2023-10-13 18:38:43

jqbaobao 发表于 2023-10-13 18:30
有没有一种可能，灰黑产的收益才有这么多
纯索引哪里的收益

有道理有道理

		自动登录	找回密码
密码			注册

[经验] 255

浏览过的版块