查看原文
其他

我的中兴十年-二入天竺-3

周圣君 周圣君 2019-04-07

今天把二入天竺写完吧。

这个系列我原以为一个月之内能够写完的,没想到写起来才发现收不住,很多事情过去那么多年了,以为都记不得了,结果就像打开了记忆的阀门,都涌现在脑海里。短期内是无法完成的了,只能慢慢地写下去,需要更多的耐心。

回到孟买之后,马不停蹄就去kharlapur(卡拉普)了。卡拉普在印度的东北边,离加尔各答比较近。所以要先坐印度国内航班到加尔各答,然后转汽车去卡拉普。前面也说过,卡拉普是端局项目的第一个点,是示范局,所以售后中方和研发,带队去的卡拉普,人比较多,力量也是最强的。但那边的条件非常艰苦,各方面都非常困难。站在现在的角度看,卡拉普作为第一个点是非常不利和被动的。

从孟买飞加尔各答,是我第一次坐印度国内航空公司的航班。印度的航空公司非常多,最好的是kingfisher,然后是Jet Airway,剩下的就是INDIGO,SPICE等廉价航空公司。Kingfisher和JetAirway的飞机非常干净,服务也很好,一点也不输给我们国内的航空公司,某种程度上说,比我们国内的很多航空公司都还好,属于高端航空公司。那个时候我们在印度坐飞机,并没有要求必须坐最便宜的,或者要打折什么的,所以我们坐飞机全部是选择Kingfisher或者JetAirway,非常舒服和惬意。隐约印象中,孟买的国内和国际航班也是不一样的机场,国内航班的机场明显要好很多。

飞到加尔各答后,并没有在那里停留,直接由当地办事处安排了车辆,送我到卡拉普。虽然只是路过这个城市,但觉得这个城市比海德拉巴或孟买都干净很多,让我印象比较深。这个城市因为离我们国家要稍微近些,而且可能是历史原因(郑和下西洋,来过这边),作为一个重要的港口城市,在我们国家的知名度比较高。

从加尔各答到卡拉普,道路条件还是不错的,属于印度的高速公路,比较平坦,车速很快。路边是荒地、农田和村庄,感觉人口密度不如海德拉巴或索拉普那么高。 村庄比较落后,很多都是茅草屋,干活的人们看上去也比较清贫。大约开车好几个小时,就到了卡拉普了。

如果说索拉普还算是一个县的话,那卡拉普真的就是一个村镇了,更加小,更加破,更加落后。由此可以看出,印度东北部地区的经济发展和中部地区没法比。事实上,不仅是经济落后,那边还比较动荡,很多地区都不稳定,据说是有游击队,经常会发生袭击事件,懂一些国际政治的朋友可能知道,印度东北部和尼泊尔孟加拉那边交接的地方,有一部分是突出去的,和印度国家的主体只有很窄的一个连接区域,那边经常闹一些独立运动。在印度东北边,很多都是在印度共产党的控制下,注意了,并不是国家分裂,印度党派众多,共产党也是印度的党派之一,在印度东北部很受欢迎。所以那边也经常能够看到镰刀锤子的旗帜,也算是当地特色。

卡拉普的条件艰苦,到了什么程度呢? 当地所谓最好的酒店,其实也就和我们国家七八十年代的招待所差不多,有时候,你把枕头掀开,底下都有不少的蚂蚁。。。现在想想,都觉得起鸡皮疙瘩。囧。 那边吃的也不咋地,酒店的食物都比较难吃,所以,我们在当地经常去找些蔬菜水果摊子,自己买点东西做着吃。我喜欢买腰果和绿豆,呵呵,尤其是绿豆。我自备了一个小的加热的锅,一有空,就在酒店房间里面煮绿豆汤吃,这也是当时不多的选择之一了。当时我去的时候,之前在那边的我们部门的张世强强哥,还有研发 同事林剑钧小林,都已经离开了,还有平台的李亚峰和刘超两位在,其他就是无线和网优的兄弟们在。中国人比较多,每天一起吃饭一起上班也算是热闹。当时他们最大的热情就是炒股,呵呵,每天在酒店餐厅吃饭,都不忘抱着笔记本,看股票行情,互相交流讨论,不亦乐乎。峰哥是个很斯文的人,和我是老乡,一看就是个研发形象。超哥留了一大大胡子,专门在印度留的,看上去很有个性,不像研发,像个艺术家,至今印象深刻。我们这帮人,在当地也算成了一道风景线,经常有印度当地人围观我们,并主动上来要求合影。。。

卡拉普作为一个示范局,本地员工比较多,有几个因为带得久了,所以水平也还不错,尤其是一个叫Ayan的小伙子,挺能干的。但当地的局方就不咋地了,比较傲慢,也不讲道理,虽然地处贫困落后地区,逼格倒是不低,总是趾高气扬颐指气使,对我们的设备不信任,对我们中方工程师也不信任。那个时候我也是开始逐步熟悉印度当地的各种变态通信业务,例如CCB啊之类的,经常会搞不懂那边变态业务到底是怎么实现的,所以也被局方鄙视过好几次。话说,印度的业务真心是多,而且杂,每次翻特性指导书都够你翻的。当时很多安全变量开关,都是公司专门为印度开发的,各种莫名其妙的业务,能都搞清楚的,就是大神。业务之所以多,主要是因为穷,呵呵,没错,就是穷,越是穷,越是有这种特定的需求,去做功能限制,去做费率限制。还有各种五花八门的终端类型,就像刚才所说的CBB,就是Coin Box,就是那种投币电话,打一分钟,投一个币,再打一分钟,再投一个币。。当时也使用了各种OI,对权限进行限制和区分,现在想起来都觉得头大。

在那边的日子,主要是割接和处理投诉,还有就是远程支持其他地方端局的开通。因为有全国网,所以支持别的局点,是非常方便的,直接网管登录过去,就可以帮忙调试,效率很高。就这样,日子过得比较稀松平常。直到后来,遇到一个大麻烦,给我们带来了一次难忘的折磨和考验。这个麻烦,就是索拉普语音质量问题。当时,随着割接的逐渐深入,业务量越来越大,突然,客户反馈有用户投诉,打电话有语音断断续续的问题,而且是大面积的投诉,大家都很紧张,赶紧分析。当时,如果是一般的问题,我们都不是太担心的,因为要么是业务问题,影响一部分业务的实现,要么是号码分析之类的配置问题,影响一部分用户,但是,我们最怕的,就是语音质量问题。因为这个问题太难查了,而且往往影响范围还特别广。最开始,怀疑是无线或传输问题,结果发现是全局性的,也就排除了某个站点的问题,问题肯定在BSC和MSC上。接着,我们以为是某个硬件单板的问题,因为当时SDTB或VTCD单板经常出问题,如果板子坏了,就会出现语音质量问题,后来投诉逐一分析和复现,发现并没有规律在某个单板上,这个时候,麻烦就大了,那个时候,找问题原因主要的办法就是找规律,可是这次的语音质量问题,毫无规律可言,基本上是全局性的。客户投诉越来越多,局方高层也越来越重视,不断施压,问题迟迟得不到解决,我们的压力就越来越大。前一集提到过,我司3G设备并没有经历过大话务量的考验,所以大家心里都没底,是不是业务量已经到了设备的极限?没过多久,现场实在是没有办法,无线产品线派来了几位大牛,带头组织进行问题排查。那个时候主要是怀疑无线BSC方面的问题,MSC也存在可能性,所以我们也不敢掉以轻心,全力配合无线进行排查。无线产品线派来的是曹建总,组织我们一起排查故障,那个时候现场的气氛是非常紧张的,每天到了话务量高峰期,语音质量问题就会大规模发生,我们在话务量闲时需要做各种准备,和孟买、深圳、南京的产品线、研发、售后开会讨论,做各种方案,还要做各种测试,到了话务量高峰期,全力扑上去进行拨测。当时测试了几乎每一块单板,每一根网线,还对配置数据进行大规模修改,都未能解决问题,只能抓包这最后的手段了。抓包是解决语音质量问题的最有效手段,呵呵。当时抓包手段很落后,都是交换机上做端口镜像,然后用wireshark抓包,因为端口多,所以当时机房的人都是一起上,每个人抱着自己的笔记本,负责抓一个端口,然后抓完之后,汇总在一起分析,抓包还要掐准时间点,核对数据报文的收发地址和端口,相当不容易。我有好几次因为没记对抓包顺序,结果被曹总狠批。说实话,那个时候已经连续奋战很多天了,我记得我连续3天,加起来的睡眠时间不足10个小时,基本上是困得直接趴在机房的地上睡觉的。精神高度紧张,身体高度透支,差一点人就要崩溃了。熬到还剩最后一口气, 终于,在前后方的共同努力下,国内研究所里成功复现了故障,查出来原因是因为CISCO交换机上的一个配置参数,是关于QoS的,设置参数后,如果端口数据量太大,就会自动进行报文抛弃,语音报文丢弃,造成语音质量问题。至此,这段噩梦才算彻底结束,大家欢欣鼓舞,很快缓过劲来。

迄今为止,那段时间是我人生中最痛快最难熬的一段日子,没有之一。但是,也真的学到了很多东西,技术上明显进步很多,对包括交换机在内的数通知识也是恶补了很多。语音质量问题解决后,整个团队得到了公司的嘉奖,我们也算是立了个大功,毕竟问题出在CISCO交换机上,并不是我们的设备有问题,所以这个结果也算是皆大欢喜。孟买那边,老大们也舒了口气,如果查到最后,发现是我们的问题,不管是核心网问题,还是无线问题,都会是个大“麻烦”,谁都担不起这个责任。

设备这个东西啊,虽然是人造的,但是人有时候对这个造出来的玩意完全不可控。经常这里出点毛病,那里出点毛病,让你头疼不已,然后又莫名其妙诡异地恢复了,更让你晕头转向。现在我们常常看到网上有工程师给设备烧香磕头的搞笑图片,其实,很多时候我们遇到这些搞不定的诡异问题,心里真心是想给它磕头烧香的!

语音质量问题解决后没多久,忙忙碌碌中, 我的第一次签证的第二次入境,也到期了,我从加尔各答中转,回到孟买,稍作停留,就再次返回了国内。

当时在印度出差,一共6次,每次都会遭个罪,经历一场折磨,卡拉普的语音质量问题,是最惨最痛快的一次,所以印象最深刻。 人啊,就是在痛苦中学习,在磨练中成长。所以,虽然当时很悲催,但事后都会觉得很感激。能遇到这些苦逼事,也算是这辈子宝贵的人生经历。 这么想想,也就豁然了。

好了,今天就写到这里了。  困觉!


▼孟买的国内航班机场


▼卡拉普的三轮车师傅



▼卡拉普的街道和民房



▼卡拉普用户办公室里(左二蓝色衣服是峰哥,右一带眼睛是超哥)



▼卡拉普 去机房的路上 标准的农村 中间好像是镰刀锤子旗


▼大胡子超哥 八成在看股市


▼文质彬彬峰哥 估计在看超哥的股市


▼印度的大巴车“外挂”


▼小车也外挂 车顶风景独好


写于2016.06.16  00:18


    您可能也对以下帖子感兴趣

    文章有问题?点此查看未经处理的缓存