第二百三十九章(上)

一觉醒来,日上三竿,孙董和杨婷早已坐在电脑面前开始整理论文。我躺在沙发上,美美的伸了一个懒腰,从沙发上坐起来,揉了揉惺忪睡眼。

“神童起来了?”孙董关心的问我,“昨天是不是很晚才睡!”

“是呀,模型改到三点钟才改好,”我走到我的电脑面前,敲了一个键,去掉屏保,看了看电脑屏幕,高兴的说:“嗯,好不错了,模型已经优化完了!”

“真的!YEAH!”杨婷兴奋的叫了一声,“接下来是不是可以开始运算了?”

“嗯,先去比赛的服务器上看看到底有多少数据需要运算!”我一边说,一边登录到比赛组织方的数据服务器上。

“*!居然有50个G的数据量,疯了!”我吃惊的看着举办方提供的数据文件,立刻从半梦半醒的状态清醒过来,“用我们这三台破PC,估计一星期都算不出来!”

杨婷和孙董也跑过来,吃惊的看着电脑屏幕上显示的文件大小,“难怪举办方竟然会提供专用的运算服务器,看来是有备而来!”

“孙董,你把数据导到运算服务器上,并加载到运算服务器的数据库里面,杨婷,你负责把我们的模型程序也迁移到运算服务器上,我先研究一下服务器的硬件配置!”我一边对孙董,杨婷下达命令,一边登录到运算服务器上,飞快的敲入了一堆命令。

“stafenie和叶莲娜果然又抢在我们前面了!”我指着屏幕上几个用户名是usa和russia的进程对孙董,杨婷说。

“好像就她们两个队,其他队都没有上来,看来我们还算*前的!”杨婷有点得意的说。

“大小姐,你有点追求好不好,我们这次来参加比赛就是要争取冠军的,对我们威胁最大的两个对手都赶在我们前面了,有什么好得意的!”我不满的对杨婷说。

杨婷一脸闷闷不乐,转身回座位上开始迁移程序。

“神童,你过来看stafenie在数据库上建的表好奇怪,她没有把整个数据表放在一起,而是分了四块,放在四个不同的地方!”孙董奇怪的对我说。

我侧着身子过去看了一眼孙董的电脑屏幕,沉思了一会儿,然后又回到我的电脑面前,霹雳啪嗒敲了几个指令。

“stafenie果然是厉害,知道通过分片的方式来加快数据处理,”我啧啧赞叹的对孙董说,“一般我们建模用的数据表都很小,所以数据放在一起对的处理速度并不会产生什么影响,但是对于50G大数据量的处理,CPU、内存固然是瓶颈,但是更大的瓶颈是硬盘的IO,我看了一下,这台服务器一共有四个硬盘通道,每个通道的平均处理速度应该在五十兆每秒左右,如果数据全部放在一个通道上,硬盘IO的速度也就五十兆每秒,如果像stafenie那样,把数据分散在四个通道上,可以获得两百兆每秒的IO速度,整整提高了四倍……”

我一口气把情况给孙董分析了一下,孙董似懂非懂的点了点头,对我的崇敬之情油然而生,“神童,你太牛了,接着我们该怎么办?”

“你学satfenie,把数据表分成四块,不过stafenie是随机分块的,你待会儿按照我给你的规则对数据进行分块!”我用毋庸置疑的口吻对孙董说,孙董虽然不明白其中的原因,但这时候她唯一能做的就是无条件的照办。

我把数据分块的条件给孙董,孙董按照我的要求写SQL语言,把50G的数据分块的存放到数据表中。

杨婷很快把程序迁移到运算服务器上,对我说:“神童,我开始运行模型了!?”

“等一下,”我跑到杨婷的电脑面前,仔细的检查了一边杨婷的程序,摇摇头说,“这样的程序肯定不行!”

“为什么?”杨婷被我泼了一头冷水,有点泄气的说,“以前我都是这样写的!”

“这先看这段代码,对数据做排序的操作,你没有加内存参数,缺省是用系统的配置的最大内存,”

“这样有问题吗,内存越多不是跑的越快吗?”杨婷歪着头看着我,觉得不可思议。

“如果是你独占这台服务器,你说的就没错,但是现在stafenie和叶莲娜的程序都在上面跑,可用的内存不到百分之三十,如果你不限制内存,进程就会按照系统的最大内存去申请,那会出什么结果?”我问杨婷。

“那就申请不到这么多内存了!”

“聪明,申请不到这么多内存,又怎么办呢?”我接着问。

杨婷挠了挠头,“这就不知道了!”

“申请不到,进程就会使用虚拟内存,虚拟内存其实是运算服务器的硬盘空间,硬盘的IO速度其实远小于真正的内存的,所以程序就会不停的在硬盘和内存这件换入换出数据,反而使程序运行的速度大大变低,因此根据目前的状况,你现在将内存参数设置为百分之三十,绝对比你设置为百分之百要快的多!”

杨婷听了我这番大道理,吐了吐舌头说:“没想到计算机这么复杂,我以前怎么从来没听三石说过这些!”

“哎,这些东西书本上是没有的!”我叹了一口气说,心想,要是*书本那点过时的知识,毕业肯定失业。

孙董终于把数据导完了,杨婷在我的协助下也把程序修改完毕,程序在服务器上疯狂的跑起来,和stafenie,叶莲娜的程序开始竞争硬盘IO,内存资源。我仔细研究了一下stafenie和叶莲娜的程序,不由的感叹这两位天才果然心思缜密,想得非常周到。

()