Chun Tian (binghe)

超越自我，洞察宇宙

日志

关于我

冰河

Common Lisp 程序员

文章分类

年前连续加班一周

2007-02-17 03:33:08| 分类：工作 | 标签： |举报 |字号大中小订阅

下载LOFTER 我的照片书 |

周一晚 22:00 开始常州机房重装网易相册62台服务器，相册服务停；

周二凌晨 4:00 开始部署服务器基本系统，重建盘阵服务器的挂载表，晚 20:00 开始部署应用，dfs, php, upload, control, ... 趁机写了大量有创意的配置文件；

周三早晨开发人员调试应用，我们管理员调整配置文件，至晚间 20:00 左右已经把所有功能调通。由于控制服务器无法挂载所有NFS，突发奇想用 Apache 根据请求中的用户id分拆请求到17台页面服务器；主数据库经过 jabber 多天的努力也准备好了。

周四上午醒来以后开始做域名变更和切换测试数据库到主数据库，中午时分相册开通，然后开始调试大量重负载下的新问题，NFS带来的问题始终无法彻底解决。下午抽空去火车站买了周六出发的火车票。晚上首次回家睡觉，但是决定用 Samba 代替 NFS 试试，说服 CG 继续开放上传之后，开始实际操作，至周五凌晨 4:00 才睡。

周五下午醒来以后到公司，发现 Samba 令上传有所好转但仍然没能完全解决问题，再把 PHP 服务器的索引从 NFS 换成 Samba 以后不久，可能是一台索引服务器故障，导致 PHP 服务器全部挂起，相册瘫痪，联系常州机房人员重启了 30 多台相关服务器以后一度恢复正常，于是我回家收拾行李准备回老家过年。但 1 小时后服务器又全部挂掉，找不到明确原因。不得不深夜在回到公司和 kghost 会诊。

周六零点以后在和 CG 讨论相册形势时突发奇想用上传服务器兼做页面服务器，理由是对系统资源的使用互相不冲突，同时关闭控制服务器的图片删除和移动功能，重配 LVS 和 DNS 指向这些新页面服务器。目前状态良好但不一定过得去下一个白天。

本周共上班五天，回家两次，其中一次在家睡觉。问题是相册仍然生死未卜。

评论这张

转发至微博

阅读(1232)| 评论(3)

历史上的今天

this.p={  m:2,
              b:2,
              loftPermalink:'',
              id:'fks_085066084086083074085095074068084086080',
              blogTitle:'年前连续加班一周',
              blogAbstract:'<p\>周一晚 22:00 开始常州机房重装网易相册62台服务器，相册服务停；</p\> <p\>周二凌晨 4:00 开始部署服务器基本系统，重建盘阵服务器的挂载表，晚 20:00 开始部署应用，dfs, php, upload, control, ... 趁机写了大量有创意的配置文件；</p\> <p\>周三早晨开发人员调试应用，我们管理员调整配置文件，至晚间 20:00 左右已经把所有功能调通。由于控制服务器无法挂载所有NFS，突发奇想用 Apache 根据请求中的用户id分拆请求到17台页面服务器；主数据库经过 jabber 多天的努力也准备好了。</p\> <p\>周四上午醒来以后开始做域名变更和切换测试数据库到主数据库，中午时分相册开通，然后开始调试大量重负载下的新问题，NFS带来的问题始终无法彻底解决。下午抽空去火车站买了周六出发的火车票。晚上首次回家睡觉，但是决定用 Samba 代替 NFS 试试，说服 CG 继续开放上传之后，开始实际操作，至周五凌晨 4:00 才睡。</p\>',
              blogTag:'163,work',
              blogUrl:'blog/static/700120071173338580',
              isPublished:1,
              istop:false,
              type:1,
              modifyTime:1325423843612,
              publishTime:1171654388580,
              permalink:'blog/static/700120071173338580',
              commentCount:3,
              mainCommentCount:3,
              recommendCount:0,
              bsrk:-100,
              publisherId:0,
              recomBlogHome:false,
              currentRecomBlog:false,
              attachmentsFileIds:[],
              vote:{},
              groupInfo:{},
              friendstatus:'none',
              followstatus:'unFollow',
              pubSucc:'',
              visitorProvince:'',
              visitorCity:'',
              visitorNewUser:false,
              postAddInfo:{},
              mset:'000',
              mcon:'',
              srk:-100,
              remindgoodnightblog:false,
              isBlackVisitor:false,
              isShowYodaoAd:false,
              hostIntro:'Common Lisp 程序员',
              hmcon:'0',
              selfRecomBlogCount:'0',
              lofter_single:'<iframe width="140" height="560" style="overflow:hidden;" src="http://www.lofter.com/mailEntry.do?blogad=1&blog" frameBorder="0"></iframe>'
            }

{list a as x}
    {if !!x}
    <div class="iblock nbw-fce nbw-f40">
      <a class="fc03 noul" target="_blank" hidefocus="true" href="http://blog.163.com/${x.visitorName}/">
      {if x.visitorName==visitor.userName}
      <img alt="${x.visitorNickname|escape}" onerror="this.src=location.f40" class="cwd bdwa bdc0" src="${fn1(x.visitorName)}&r=${visitor.imageUpdateTime}"/>
      {else}
      <img alt="${x.visitorNickname|escape}" onerror="this.src=location.f40" class="cwd bdwa bdc0" src="${fn1(x.visitorName)}"/>
      {/if}
      </a>
      <div class="cwd vname thide">
        {if x.moveFrom=='wap'}
          <a class="noul pnt" target="_blank" href="http://blog.163.com/services/wapblog.html?frompersonalbloghome"><span title="来自网易手机博客" class="iblock wapIcon"> </span></a>
        {elseif x.moveFrom=='iphone'}
          <a class="noul pnt" target="_blank"><span title="来自iPhone客户端" class="iblock iphoneIcon"> </span></a>
        {elseif x.moveFrom=='android'}
          <a class="noul pnt" target="_blank"><span title="来自Android客户端" class="iblock androidIcon"> </span></a>
        {elseif x.moveFrom=='mobile'}
          <a class="noul pnt" target="_blank" href="http://blog.163.com/services/emsblog.html?frompersonalbloghome"><span title="来自网易短信写博" class="iblock wapIcon"> </span></a>
        {/if}
        <a class="fc03 m2a"  target="_blank" hidefocus="true" href="http://blog.163.com/${x.visitorName}/">
          ${fn(x.visitorNickname,8)|escape}
        </a>
      </div>
    </div>
    {/if}
    {/list}

<#--最新日志，群博日志--> <#--推荐日志-->

<p class="fc06">推荐过这篇日志的人：</p>
    <div>
      {list a as x}
      {if !!x}
      <div class="iblock nbw-fce nbw-f40">
        <a class="fc03 noul" target="_blank" hidefocus="true" href="http://blog.163.com/${x.recommenderName}/">
        <img alt="${x.recommenderNickname|escape}" onerror="this.src=location.f40" class="cwd bdwa bdc0" src="${fn1(x.recommenderName)}"/>
        </a>
        <div class="cwd thide">
          <a class="fc03 m2a" target="_blank" hidefocus="true" href="http://blog.163.com/${x.recommenderName}/">
            ${fn(x.recommenderNickname,6)|escape}
          </a>
        </div>
      </div>
      {/if}
      {/list}
    </div>
    {if !!b&&b.length>0}
    <p  class="fc06">他们还推荐了：</p>
    <ul>
    {list b as y}
      {if !!y}
        <li class="rrb"><span class="iblock">·</span><a class="fc03 m2a" target="_blank" href="http://blog.163.com/${y.recommendBlogPermalink}/?from=blog/static/700120071173338580">${y.recommendBlogTitle|escape}</a></li>
      {/if}
    {/list}
    </ul>
    {/if}

<#--引用记录--> <#--博主推荐--> <#--随机阅读--> <#--首页推荐--> <#--历史上的今天--> <#--被推荐日志--> <#--上一篇，下一篇--> <#-- 热度 -->

{list a as x}
    {if !!x}
    <div class="hotItem iblock nbw-fce nbw-f40">
      <a class="fc03 noul" target="_blank" hidefocus="true" href="http://blog.163.com/${x.publisherUsername}/">
      {if x.publisherUsername==visitor.userName}
      <img alt="${x.publisherNickname|escape}" onerror="this.src=location.f40" class="cwd bdwa bdc0" src="${fn1(x.publisherUsername)}&r=${visitor.imageUpdateTime}"/>
      {else}
      <img alt="${x.publisherNickname|escape}" onerror="this.src=location.f40" class="cwd bdwa bdc0" src="${fn1(x.publisherUsername)}"/>
      {/if}
      </a>
      <div class="cwd vname thide">
        <a class="fc03 m2a"  target="_blank" hidefocus="true" href="http://blog.163.com/${x.publisherUsername}/">
          ${fn(x.publisherNickname,8)|escape}
        </a>
      </div>
      <a class="f-myLikeIcons hottype {if x.type==1} js-liketype{elseif x.type==2} js-reblogtype{elseif x.type==3} js-sharetype{else}{/if}" target="_blank" hidefocus="true" href="http://blog.163.com/${x.publisherUsername}/"> </a>
    </div>
    {/if}
    {/list}

<#-- 网易新闻广告 --> <#--右边模块结构--> <#--评论模块结构--> <#--引用模块结构--> <#--博主发起的投票-->

页脚

我的照片书 - 手机博客 - 下载LOFTER APP - 订阅此博客

Chun Tian (binghe)

导航

日志

年前连续加班一周

历史上的今天

最近读者

热度

评论

页脚