V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  pubby  ›  全部回复第 86 页 / 共 87 页
回复总数  1735
1 ... 78  79  80  81  82  83  84  85  86  87  
2013-07-11 17:00:56 +08:00
回复了 kenneth 创建的主题 程序员 如何设计一台能存海量图片的服务器?
手头有2台图片存储,海量说不上,也就200w张左右
freebsd8.x+zfs ( 3块SATA硬盘做 raidz,1块SAS盘做系统和缓存)
08年的时候搭建的,当时还是freebsd7.x 硬盘是500G的,所以可用的存储容量是1T(1U机器最多4硬盘)
后来容量不够了,又加了1台类似配置的。

说一些使用感受:
1. 要跑zfs必须要64位系统配大内存。
2. 前端加上squid缓存,减少热图访问给zfs带来压力。(squid是在单独的SAS盘上做的)
3. 用C+ImageMagick写了一个动态生成任意尺寸缩略图的网关(fastcgi挂到nginx上,同样用squid做了缓存)

注意事项:
1. zfs下单目录不要放太多图片文件,影响性能
2. 做好硬盘smart监控,发现异常及时更换硬盘。我们这2台都发生过硬盘挂掉的情况。
2013-07-08 19:53:40 +08:00
回复了 kenneth 创建的主题 Python Python如何快速获得图片的大小,但是不要下载。
根据各种图片格式,一般只要前面几十个字节就能得到 width ,height数据,不需要下载整张图。

以前拿php的getimagesize()的源代码改过一个的,识别算法都在里头。
08年的时候用php实现过类似的功能,但是并发能力真心不太行。另外gd的可控参数实在太少,缩略图质量有点渣
几个月后用C 和 ImageMagick重写了。通过fastcgi连接到nginx,并配合squid做缓存。
2013-07-05 21:53:37 +08:00
回复了 cj1324 创建的主题 VPS 求香港比较不错的VPS,要求能搭VPN
问了vr,说每月第一周会上架一批,但是这几天也没看到VR-HK的有货 -_-
只好留了email让他们HK有货的时候给个通知。
2013-07-05 12:17:35 +08:00
回复了 kenneth 创建的主题 PHP Nginx+php-fpm无法支撑大流量的并发访问?
一味调大进程数最终只会导致整体性能下降

优化程序,请求处理越快越好。

找到瓶颈,如果瓶颈在php本身,那么考虑其它的高并发方案,比如用node.js 或者 golang重写。

如果一台机器达到上限,那就增加机器分流。

ps. 统计这玩意我都是node.js做的,直接写文件,然后后台脚本定时处理日志文件。
2013-07-03 14:19:06 +08:00
回复了 saharabear 创建的主题 Linux Slackware的中文圈
14年前,第一次接触linux就是Slackware。
2013-06-28 13:26:20 +08:00
回复了 raptor 创建的主题 VPS buyvm的网络状况一向这么差?
在用的有10家vps,还没碰到过不抽的,频率快慢问题。burst的每天都会抽个几分钟。

再加上那堵墙,丫就不可能有靠谱的玩意。

电信adsl拨号的你隔几天就得为丢包率上升而重新拨,局域网内还偶尔碰到arp问题而抽风的。

习惯了就好 -_-
2013-06-26 13:30:01 +08:00
回复了 someFork 创建的主题 Linode 想买linode的注意了,基本上很难买additional ip的。
很多vps最多支持3-5个,再多就需要给出合理的理由了
2013-06-23 10:34:53 +08:00
回复了 wtbhk 创建的主题 程序员 万能的V2,问个运维的问题,关于如何导出SAS硬盘数据
5I R可以不作为RAID成员的,我用过的SAS卡都只用来挂硬盘,自己做zfs。从来不使用卡自己的RAID功能。
2013-06-22 20:39:37 +08:00
回复了 chuhades 创建的主题 tmux tmux 很赞啊!
一直用screen
只是默认的最大40个window实在是太少了
2013-06-21 00:35:02 +08:00
回复了 wtbhk 创建的主题 程序员 万能的V2,问个运维的问题,关于如何导出SAS硬盘数据
@wtbhk 是PCI-E接口的,我是要在台式机上挂这个SAS盘,所以没办法买了个卡。
2013-06-21 00:33:09 +08:00
回复了 refresh 创建的主题 程序员 有没有发现在多种编程语言中切换很分裂?
php / javascript / bash / go / c
html / css
emacs里每天几百个buffer,啥语言都有,可能分裂已经成为习惯了 :(
2013-06-21 00:23:57 +08:00
回复了 bigeagle 创建的主题 程序员 新封锁方式的猜测
真的被墙了?

昨天一批vps连不上,过了十几小时全恢复了。
2013-06-21 00:17:45 +08:00
回复了 wtbhk 创建的主题 程序员 万能的V2,问个运维的问题,关于如何导出SAS硬盘数据
我遇到过类似问题:
有块SAS盘HITACHI HUS156030VLS600,需要装上系统配置完善后直接替换机房服务器的快挂的盘(smart报错,驱动偶尔报错)。


用过SAS转SATA线接在台式机SATA口上,无法识别出来,这种方式本身要求硬盘能工作在SATA指令下。
后来买了块SAS卡搞定的,淘宝上买的
DELL 5I R 四口SAS阵列卡
http://item.taobao.com/item.htm?spm=0.0.0.0.5ryNXz&id=18796035763
2013-06-20 21:47:59 +08:00
回复了 rAYz 创建的主题 程序员 cnBeta换新界面了…
小字体用雅黑,真叫一个累啊,哎~~~
2013-06-20 15:31:38 +08:00
回复了 vibbow 创建的主题 VPS ChicagoVPS被人脱裤了
额,123systems有没有沦陷啊,上面还有好几个vps
-_- 怎么空格都没了
| | | | | | | | | |
| | | | | VS \ \ \ \ \
| | | | | \ \ \ \ \
[--缸--] [--缸--]
1 ... 78  79  80  81  82  83  84  85  86  87  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2601 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 35ms · UTC 11:56 · PVG 19:56 · LAX 04:56 · JFK 07:56
Developed with CodeLauncher
♥ Do have faith in what you're doing.