第八章:一吻定情(3)

    你们为什用流式处理呢?吕秀萍放开鼠标抬头满怀期盼自己学子们流式处理速度快用事先把数据储存起来再分析数据流过系统系统会立刻启动直到得出结果方便又快捷

    吕秀萍脸上带困惑可流式处理对内存要求很高六室电脑多32位内存限应该能满足流式处理速度吧?当初他们就考虑到这点才选择批处理

    吕秀萍微微笑说没关系我们可以用分布式处理系统操作电脑室里几十台机我们把它们建成个数据集群把数据平分到每台机里执任务这个项目数据虽然多但上海量平均下来每台机负荷量并

    伙认真想觉得确实可眉目间忧愁终于淡些只眉头紧皱知道想什

    沈盛也很开心可很快他又想到个问题可数据从进入系统到出来结果需要间少则、两个小多则十多个小同运几十台电脑而且运间这久还要开空调和风扇给电脑散热耗电量会很学校会会意见?

    这小问题你们用担心我会跟院长沟通你们专心做项目就

    谢谢吕老师

    伙都开心向吕老师道谢没人注意到旁边心事重重众人副欲言又止样子

    无论如何项目总可以正常运作

    伙松口气却敢松懈马停蹄按照吕老师指示开始编写拓扑结构

    流式处理三种框架分别Storm、Spark和Samza这三种实系统都具低延迟、可扩展和容错性等优点因为Storm允许增量所以现很多人都会首选这种框架使用Storm首先要设个用于实图状结构就上同说到拓扑程序运这个拓扑会被提交给集群由集群中主控节点分发代码将任务分配给工作节点执

    因为拓扑结构十分重要家都敢马虎写代码都十分认真但凡点点完美都重新编写家共同努力下代码很快就完成

    测试家都很紧

    电脑室里很静偌教室里只听到机和空调运发出细微声响坐主机前目转睛盯显示器握鼠标手微微颤抖伙站她四周眼睛同样紧紧盯显示器神情紧又期待

    按下确定键系统接收到指令室内数十台机同运起来显示器窗口里内容以肉眼清速度飞快变换速度快而节奏

    伙屏呼吸眼睛紧紧盯显示器眼十多分钟过去系统依旧正常运伙高悬心终于放下些

    此墙上挂钟已显示晚上六点多正想跟家说自己这里他们先去吃饭旁边已率先开口数据需要间你们先去吃饭我个人这里守就好

    说师兄你个人怎我跟你块留下吧?

    用现除盯机也没什事情要做我个人就

    见他十分坚持便再勉强那我给你带饭你想吃什?

    肉丝炒米粉谢谢

    点点头跟伙起朝外走去走到电脑室门口她下意识回头眼——穿梭电脑间正认真巡视模样上去并无妥可知道为什她老觉得他眉目间似乎藏丝忧虑

    走她旁边陆苗苗好奇问小你什?

    秀眉微蹙轻声说师兄好像心事

    陆苗苗回头眼那成熟国字脸上去如既往严肃跟平常并无两样你肯定想多!前两天家因为批处理事情都烦恼已现问题好容易解决师兄高兴都来及怎可能心事呢?

    深深眼没再说什跟众人消失教室门口……

    当沈盛他们回到教室已半个小后事吃带回来米粉刘宇森和关成悦电脑间巡视

    突然刘宇森台电脑前停下窗口里刚才还飞速变换、现却缓缓滑内容脸上神色顿变好!

    发生什事?他突然种好预感

    刘宇森白脸眼神慌乱语气急促说集群内存容量足数据溢出部分数据丢失!

    伙惊快步朝他走去拿筷子手顿脸上神情变得凝重——

    他直担心事情还发生!