V2EX › sxm 的所有回复 › 第 4 页 / 共 5 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 2 3 4 5

❮

❯

2017-10-16 10:19:46 +08:00

回复了 Newyorkcity 创建的主题 › 问与答 › 请问这两种搜索要求必应能否实现？

“” 和 + 在谷歌上是可以满足要求的

2017-10-15 02:21:30 +08:00

回复了 alexapollo 创建的主题 › 程序员 › 乃们知道吗，迅雷更新了

晚上发现好多种子直接不给你下，一直提示错误，💊

2017-10-11 21:54:22 +08:00

回复了 syhsyh9696 创建的主题 › 问与答 › 把一个小爬虫写成了个简单的网站(Avdict) 是不是没救了。

@syhsyh9696 源站是 javbus,当时也只是写写玩的，只按图片类型及尺寸分文件夹，忘记了单个文件夹内文件过多的问题。之后转移到另一块硬盘上时才发现，那复制速度，差不多一天了。删除时只好把硬盘上的其他大文件又转移下，然后直接格盘了。影片数量大概 30 多万吧，我发现大图他是直接引用 DMM 的，而 DMM 编号与番号略有差异，所以抓取时就直接存图片 URL，毕竟也要不了多少容量。硬盘我也是不够用，本机上的 2 块硬盘可用空间常年是 20G 不到，移动硬盘我是用 3.5 硬盘+硬盘盒

2017-10-11 20:41:06 +08:00

回复了 syhsyh9696 创建的主题 › 问与答 › 把一个小爬虫写成了个简单的网站(Avdict) 是不是没救了。

几个月前用 PHP 做过一个，各种尺寸图片全部抓取差不多 400G 左右，再写了个数据展示，基本和原站类似。当时踩的坑是，单个文件夹内存放了百万+的小文件，导致之后文件夹复制删除那耗时惨不忍睹。

2017-10-04 13:56:14 +08:00

回复了 jizhu 创建的主题 › 问与答 › 你们喝喜酒，回礼是什么？

1 包不错的烟+几颗糖，外面用一个喜庆点的包装。毛巾只在附近农村里的白事有这个习俗

2017-08-11 10:03:29 +08:00

回复了 eben 创建的主题 › 宽带症候群 › 求推荐路由器，三层楼，装一台

装在二楼大致距居中的位置，这样 3 楼和 1 楼信号就差不多了。

2017-08-08 23:02:31 +08:00

回复了 datou 创建的主题 › YouTube › youtube 的 HDR 视频有什么黑科技?

HDR 的视频色域是 bt 2020 而传统解码器按照 bt709 就会出现颜色发白，potplayer 可以在着色器里选择 2084 修正，或者使用 madvr 来解码就能显示正常的颜色了。

2017-08-07 21:38:25 +08:00

回复了 Sanko 创建的主题 › 正则表达式 › 正则表达式在捕获时重复如何精简？

(a(\d+))+

2017-07-18 18:42:20 +08:00

回复了 julyclyde 创建的主题 › Python › 你们一般都爬些什么？

@lxml 前不久用 PHP 爬过，3 大类的车牌差不多 34 万+，磁力 85 万+，各类图片 1 千万+（下载下来 4 百多 G，开了 30 个 PHP 进程来抓，花了 1 天多）

2017-03-15 17:52:30 +08:00

回复了 ydxred 创建的主题 › 程序员 › PHP 写一个爬虫(v 友注意详细看正文详情)

@ydxred 我用 redis 作用是做队列，先把要抓取的页面 ID 全部 push 进去，然后抓取页面就从 redis 里 pop 一个页面 ID 出来去抓取，所以多运行几个 php 页面就能提升抓取速度，相当于多进程模仿多线程。本来是不用 redis 的，因为 access 并发读取修改的问题，用文件锁都锁不住。

2017-03-15 15:25:58 +08:00

回复了 onetrlee 创建的主题 › 分享发现 › 又一款路由免费送了,腾达的,套路跟斐讯的一样.

看激活码页面介绍 https://sale.jd.com/act/Ynrhu0H8tAfCcNkD.html ，应该要买定期理财产品，选那个新手专项理财，然后用这个 269 的卷来抵扣，

2017-03-15 15:08:57 +08:00

回复了 ydxred 创建的主题 › 程序员 › PHP 写一个爬虫(v 友注意详细看正文详情)

简单的就是 curl 获取页面内容，然后就是写正则提取需要的数据了。

之前某论坛要关闭，我是花了 2 个夜晚写了 PHP 抓取程序把那个论坛的数据都抓下来了并入库。因为单进程抓取速度太慢，又写了个多进程页面管理，前端页面能实时查看各个进程的抓取速度，开新进程或者结束指定进程等等。
curl 获取页面， redis 做队列， access 做数据库（喜欢单个文件数据库，小巧方便带走）

2017-01-16 17:44:49 +08:00

回复了 freethink 创建的主题 › 问与答 › 都有谁是把笔记本摄像头贴住的？吱一声~~~

话说，手机前摄像头有贴的吗

2017-01-11 15:19:33 +08:00

回复了 realpg 创建的主题 › 程序员 › 还记得上次的盗版软件黑科技案么，后续进展通告给关心的朋友。

老司机稳

2016-12-29 16:41:13 +08:00

回复了 sxm 创建的主题 › 问与答 › 大家怎么看待淘宝的“好评返现暂时不接受举报”

@wesley 本来商品没问题也要评价的，当然夸大事实的评价算是作恶，可作恶没有措施予以制止就是问题的根本了。

2016-10-25 01:33:09 +08:00

回复了 chousb 创建的主题 › 推广 › 青云 QingCloud 祝大家节日快乐（必须有礼物、有愿望）

#1024#希望一切顺利

1 2 3 4 5

❮

❯