V2EX › Justin3go 的所有回复 › 第 4 页 / 共 5 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 2 3 4 5

❮

❯

2023-09-02 00:04:28 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

刚收到短信，没想到这么快这个网站就被 DDos 攻击了，终于轮到我了

2023-09-01 20:55:33 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@2NUT 感谢认可

2023-09-01 20:55:13 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@hsksg 对，这个网址我也看到过，参考了它的免责声明哈哈哈哈

2023-09-01 20:54:01 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@gogolive 确实，目前爬虫运行了 2 周多，数据 1w 左右，爬虫的策略还得优化，去过滤那些不可能包含网盘资源的链接的网址来节省资源，但目前没啥思路

2023-09-01 17:28:21 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@galphaxie 可以，感谢反馈

2023-09-01 16:05:45 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@sunnicholas 慢慢来嘛，爬虫正在收集中，没有想要的资源：1.互联网上没有使用阿里云盘分享该资源； 2.爬虫还没有爬到该位置； 3.有些网站禁止爬虫进入

2023-09-01 16:03:59 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@Jirajine 周围也有一些人使用过这个，我对 ES 稍微熟悉一点，还行

2023-09-01 16:02:22 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@BBCCBB 可以

2023-09-01 15:11:23 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@baoei 然后就是互联网上的资源可能太多了，对比下来阿里云盘的资源就太少了，爬虫策略可能还得优化一下，但目前没什么思路

2023-09-01 15:09:26 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@heylogo 确实，用户体验还是你这样好一点，感谢建议

2023-09-01 15:08:41 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@baoei 还没做多久，爬虫一直在运行，资源还在搜集

2023-09-01 14:23:55 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@amlee web 应用是单独一台服务器，ES 爬虫是另外一台

2023-09-01 14:06:04 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@Justin3go 目前的情况来看，2 核 4g 差不多合适

2023-09-01 14:02:43 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@amlee 4 核 8g ，但没吃满

2023-09-01 14:01:40 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@Equiliu 提取码的获取策略是获取互联网某社区帖子中分享链接附近的，有些没有提供提取码，或者根本不需要提取码，亦或者没有提取码字眼的就没有获取

2023-09-01 13:48:07 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@usauk1998 爬虫一直在运行，有可能还没收集到，也有可能互联网上没有人分享这个资源

2023-09-01 13:47:19 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@amlee 不太敢商业化，就技术分享，免费给大家用吧

2023-09-01 12:31:16 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@fak111 重复性工作了，暂时不打算做，并不盈利，只是想实践一下技术

2023-09-01 11:38:08 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@goodryb 不太清楚，手机种链接点击是自动跳转的网盘 APP 的，可能是链接中的资源失效了

2023-09-01 11:37:08 +08:00

回复了 Justin3go 创建的主题 › 分享创造 › 做了一个阿里云盘的搜索引擎

@Trinity99 这个不好做，需要请求阿里云盘的接口，容易违规，而我这种就只是类似于搜索的文章

1 2 3 4 5

❮

❯