随梦书屋 通过搜索各大小说站为您自动抓取各类小说的最快更新供您阅读!

“当然可以,你拿去看吧,有什么意见尽管跟我说。” 李卫脸上挂着温和的笑容,语气客气地说道。

秦奕接过论文,迫不及待地开始快速浏览其中的关键论述——这篇论文主要阐述了并行程序中并行、汇聚、通讯、映射及归纳等机制的语义。

看着看着,他的眼中闪过一丝惊喜,这里面描述的不正是前世互联网大数据处理框架 mApREdUcE 里的基本操作吗!

前世,搜索引擎巨头谷歌在 2004 年前后发布了三篇奠定大数据处理基础的论文 ——《the Google File System》《mapReduce: Simplified data processing on Large clusters》《bigtable: A distributed Storage System for Structured data》。

这三篇论文为大数据处理领域带来了全新的思路和方法,宛如一把火,瞬间点燃了学术界和工业界对大规模数据处理技术的研究热情,也有力推动了 hadoop 等开源项目的发展。

这些项目在之后的十几年里迅速成为了大数据基础设施,对整个大数据、云计算甚至是后来的人工智能行业都产生了深远影响。

其中,《mapReduce》这篇论文里使用的核心操作 map 和 Reduce,与李卫这篇论文中的映射和归纳两个机制,本质上如出一辙。

秦奕不禁思索,原来早在这个时候,相关的核心操作就已经在并行程序领域得到应用了吗?

或许当时撰写那三篇论文的谷歌程序员正是从这些并行程序的论文中获得了灵感。

当然,《mapReduce》论文不只是应用了这两个关键操作,它还围绕这两个核心操作,精心设计了一套完整的系统架构和实现机制,涵盖数据划分、任务调度、容错处理、数据 \/ 代码互定位等功能,确保在大规模集群上能够稳定、高效地运行。

秦奕接着又仔细看了看李卫论文里的具体实验内容,是关于 Ada 语言在一些单机程序中的处理。

“李卫同志,我有个疑惑。” 他抬起头,目光看向李卫。

“说吧。” 李卫挑了挑眉,他刚才让对方提意见不过是句客气话,没想到这个秦奕还真敢有想法。

“你这里的并行程序,似乎只涉及单台计算机的多处理器并行,没有涉及多台计算机的并行处理。” 秦奕认真地说道。

“多台计算机的并行处理?” 李卫低声重复着这个词,随后笑道,“这需要用到计算机网络了,是吧?”

秦奕连忙点头,回答道:“对的。”

“我理解单台计算机虽然具备低延迟通信、易于管理和调度以及数据一致性维护简单等优势,但是它的处理器数量和内存容量等硬件资源有限。”

“一旦并行任务规模持续扩大,很快就会遭遇资源瓶颈,难以满足大规模计算需求。如果想要进一步提升其性能,往往需要采用高端的多核处理器、大容量高速内存等硬件设备,硬件成本高昂,且能耗也相对较高。”

“如果借助计算机网络来实现程序的并行,那就可以通过增加计算机的数量,轻松扩展计算能力,理论上能够满足任意大规模的计算需求。”

李卫听后,笑着反驳:“你可别把计算机网络说得太神了。计算机网络通信开销还是很大的,和单机通信比起来,延迟成百上千倍,对于一些对通信实时性要求极高的任务,这可是无法接受的。”

秦奕自然不会轻易放弃,他耐心解释道:“您说得很有道理,这确实不适用于对实时性要求高的任务。”

“但我觉得,在大多数情况下,程序对实时性的要求并没有那么严苛。而且,随着赵老那边对光纤传输介质的研究不断深入,网络的延迟会越来越低,网络并行的适用性也会越来越广。”

“很有想法啊!” 李卫赞许地说道,“你现在是研究生还是本科生?有没有兴趣来我们京航大学继续进修?来我这里读博士,我可以专门为你开设你说的这个研究课题。”

“啊,不了不了。” 秦奕连忙摆手,“我只是提出一些粗浅的想法,我觉得自己还是更适合在产业界继续深耕发展。”

“哈哈哈,你就是想光靠动动嘴搞科研,是吧。” 李卫半开玩笑地说道,“科研可不是有一个想法就可以的,还需要有大量的实验佐证的。”

“那倒不是。我真心觉得,随着计算机网络的逐渐流行,我们很快就会面临需要处理海量数据的情况。到时候,如果科研界能提供一些指导,我们产业发展也能走得更顺畅,说不定还能在海量数据这上面走在前头。” 秦奕认真地解释道。

不过他心里也清楚,现在距离处理海量数据还有很长的路要走。

前世从 1994 年万维网联通世界,到 2004 年大数据概念的提出,中间还历经了十年的发展,而如今,万维网的雏形都还未出现。

“那我就期待一下你说的计算机网络的流行了!” 李卫笑着说,“到时候,要是你这个产业界人士真遇到海量数据处理的问题,也可以来找我们合作,哈哈。”

秦奕又和李卫闲聊了几句关于全球即将通过计算机网络互联的话题,便离开了标准化协会,前往海淀区找董德绍他们。

“啊!为什么这个程序运行结果是 4!”

秦奕刚一进门,就听到了董德绍绝望的哀嚎。

李勇军满脸困惑地看着他:“我刚才就给你解释过这个程序的整体运行逻辑了,至于你为什么就是弄不明白,我也实在搞不懂。”

周瑾龙在一旁劝道:“小董,你就别挣扎了,数学学霸的世界你不懂,编程这种东西,我这种上过大学的都放弃了,更何况你这种大学都没考上的。”

随梦书屋推荐阅读:豪婿韩三千赵旭李晴晴都市极品医神叶辰全集免费叶君临李子染全文免费阅读怪医圣手叶皓轩都市之最强狂兵完整版我在霸总文里直播普法叶辰萧初然最新章节更新珠光宝器乔梁叶心仪重生八零甜蜜军婚都市医道高手我的绝色总裁未婚妻(神级龙卫)我老婆是冰山女总裁血妖姬镇国战神叶君临李子染豪婿战神叶君临李子染免费特战医王80年代剽悍土着女我家有绝世女战神商界大佬想追我战神归来叶君临都市之最强狂兵完整版最新章官缘从挂职干部开始到高位最强狂兵陈六何沈轻舞皇后是朕的黑月光都市仙尊洛尘叶辰夏若雪孙怡最新章节暴君哭着撩我却天天沉迷基建扶贫能与动物交流助他成为特种兵王双修:欲满大道修炼界追美高手大戏骨霸天龙帝沈浪叶辰夏若雪是哪部小说的男主角官场先锋重生1990:开局就撩又甜又飒白月光凌依然小说免费阅读[红楼+倩女幽魂]目标!探花郎汉奸搅屎棍后续离婚后前妻成债主第二季重生之农女当自强我的绝色总裁未婚妻(又名:神级龙卫)这只皇帝会读心重生之芬芳人生红楼之魔门妖女回到过去当富翁激活男神系统的我被倒追很正常吧?都市之罗小黑传奇
随梦书屋搜藏榜:带着包子去捉鬼从陵墓中苏醒的强者大小姐偷偷给我生个娃独宠名门前妻女配升级攻略:医蛊王妃农家丑妻宋不凡的超级系统怕什么,我有无敌空间洛少霸道:娇妻哪里逃被渣后她嫁给了九千岁兵之王者契约农妃的马甲又被扒了什么流量艺人,我是实力派山村野花开神说你要对女人负责极品龙婿终极一班:重生成雷克斯重生之丁二狗的别样生活异界之学徒巫妖和步行骑士过气歌手出走半生,归来仍是巨星万古长空一朝风月重生之人渣反派自救系统高山果园炼狱孤行者转生成兽娘被神收编了陌上花开我要当影后保护校花半世浮生半世殇重生八零我每天靠败家躺赢敢霸凌我妹妹:那就杀个痛快!闹婚之宠妻如命极品警察穿越之黎明的秦重生之低调富翁他似春火燎原娱乐:表白失败后,拒绝当舔狗!小青梅她有点难追转职人皇,技能变态点很合理吧穿成癌症老头,还好我有遗愿清单前妻好可口:首席,别闹男神娇宠之医妻通灵民国,我在淞沪打造特战旅弃妃无双[综+剑三]明眸善媚都市妖孽狂兵灵启都市纪元:佣兵的平凡幻变灵气复苏:我走向无敌路他今夜又来撒野了这只皇帝会读心穿书后我渣了偏执大佬
随梦书屋最新小说:我,魔剑!带疯批剑神杀穿高武按摩带法术,这谁扛得住全球冰封:末日王国【2】国家帮我垄断百年家族:百战求生战火风云:反法西斯的伟大征程诡异复苏:开局成了尸邪重生官场:我闪婚了美女县长糙汉夺妻:大王,您豢养的金丝雀逃了重生之我要成首富官场巅峰路,我爸那么多高武御兽,我玩哥莫拉的重生1989,弥补遗憾顶级权谋,我比贪官更奸诈华娱之我的导演生涯上帝模拟器我能修改万物数据黑科技奶爸:开局杨蜜生下龙凤胎说好当替身,你怎么还想假戏真做?做最凶的那个被绝色小姨子陷害,我快顶不住了半夜和女鬼抢影子,她红温了NBA:烈火焚钢肘,再铸活塞退役老兵创业记都市之我要交好运重生乌鸦,无限进化至世界最终四合院开局傻柱娘舅带他步入仕途见证老爸战死,我成为版本T0刷爆高武年上姐姐偶尔会变成病娇大封印假装是弱鸡大蜜蜜的小助理小说里的叛逆路人甲【个人汉化】高武:开局强吻了裂口女从变成铠甲召唤器开始玻璃之笼我和我的四只猫?浪子情医都市:我有一家文娱公司黑道风云之我的灰色人生表白的她,怎么心动的是隔壁校花我和邻家阿姨,在出租屋的那些事混在娱乐圈,给女明星们送温暖傲娇校花学姐,竟是隐藏恋爱脑?南洋沈氏豪门家族的时代传奇崛起中东:从推叙利亚内战开始韩娱之我的老婆是Sunny创业失败,从钓鱼开始摆烂重生后不当舔狗白月光慌了1937烽火连天陵安镇风云变幻录梦中我就是皇帝