云端生活(科学):处理千兆字节数据的研究人员成为云专家

作者: 培训和认证博客编辑 |
Image of Chris Dagdigian squatting next to a rack of servers, with his hands outstretched in a questioning pose

克里斯·达格迪吉安

克里斯·达格迪吉安(Chris Dagdigian)于1995年获得生物技术学位时,该行业有望在创新和可能性方面蓬勃发展。只有一个问题,爆炸是用笔和纸记录的。他回忆说:“在那之前,科学家们一直在笔记本中记录所有内容。”“随着研究的蓬勃发展,数据量开始超过手写实验书中可以合理追踪的数量。”

作为一名入门级科学家和公司图腾柱上的低级人物,达格迪吉安有责任努力为同事找出数字数据收集方法。他说:“我有一位很棒的老板,他看到了通过将研究预算的很大一部分用于购买服务器和存储来改善公司基础架构的机会,他让我弄清楚所有问题。”“这就是我从职业生涯早期的科学家,到自学成才的软件开发人员,最终成为专门研究科学计算的IT人员的方式。”

接下来发生的事情几乎是可以预见的。数据再次超出了容器。他说:“数字化比纸笔好得多,但是在很短的时间内,我们没有到处都是鼓起的笔记本电脑,而是摆满了磁盘驱动器的巨大书架。”“科学产生的数据量与世界上其他任何事物都不一样。IT 变化很快,但科学变化要快得多。几年之内,我们意识到现场数字存储有其自身的问题,从长远来看,这不是一个好的解决方案。”

双重革命

2002 年,达格迪吉安和几位同事独自创立了 BioTeam ,这是一家专注于合理化科学数据处理和存储的科学 IT 咨询公司。偶然地,他们在另一场革命到来之前就这样做了:向云计算的迁移。在 BioTeam 成立后不久,亚马逊云科技 就起步了。达格迪吉安回忆说:“自从亚马逊EC2进入私人测试阶段以来,我就一直在使用它。”“亚马逊云科技 的价值从一开始就显而易见,它们非常可靠且具有最大的灵活性。即使在今天,他们拥有的积木原语也比其他任何人都多,这使你能够根据公司想要做什么,使之成为现成或根据公司的需求进行定制。”

亚马逊云科技带来的另一个改变游戏规则的因素是它专注于促进协作。达格迪吉安说:“过去,如果两个实验室合作,他们也会在全国范围内通宵使用硬盘。”“从长远来看,物理转移千兆字节的数据是站不住脚的。当数据量如此之高时,将数据放在一个地方后,将人们带到数据中要比反过来容易得多。”

但是,尽管建立正确的模型很重要,但达格迪吉安意识到,要真正为客户提供服务,他需要自己成为这个新兴领域的专家。他说:“刚开始的时候,我是自学成才的。”“我用我的个人信用卡开设了一个 亚马逊云科技 账户,然后四处闲逛我觉得有趣的每项服务。值得庆幸的是,如今,那些想要学习的人获得了更多的支持。”

向他人学习

为了更全面地发展自己的技能,达格迪吉安在2013年转向了新生的 亚马逊云科技 认证计划。 他说:“了解其他人正在使用这项服务做什么确实有价值。”“另外,你会学到一些你可能认为不有趣或不必要的东西。一开始,像大多数科学家一样,我完全专注于短期内重要的事情。对我来说,那是数据的存储和处理。在早期的解决方案架构师认证培训中,我必须学习安全性和合规性,我没有专注于这些知识,但对于此类工作来说却是完全必要的。”

早些时候,达格迪吉安发现认证对于其他方面也至关重要:信誉。他解释说:“当我们刚开始时,我们所有的客户都是通过口耳相传获得的,因此信任不是问题。”“但是随着时间的推移,越来越多的人找到了我们,他们能够立即了解我们所拥有的专业知识真是令人放心。考试非常困难。除非你亲身体验并真正了解自己的东西,否则你绝对无法通过它们。”

拓展未来

多亏了 亚马逊云科技 推动的创新,在接下来的几年中,BioTeam 的员工人数从四人增加到了 40 人。尽管保持最新技术始终具有挑战性,但云为Dagdigian的客户带来的改变是不可否认的。他说:“双向跳跃都是一个数量级。”“过去,针对复杂的数据集进行计算需要数周时间,成本超过30,000美元。如今,亚马逊云科技 中提供了先进 的高性能计算 环境,我看到人们在短短几天内就能以大约 5,000 美元的价格做同样的事情。太不可思议了。更好的是, 可以对像 亚马逊云科技 ParallelCluster 这样的产品进行培训,使其具备许可感知能力。这意味着在计算化学等数据密集型领域从事高级工作的客户在使用薛定哲等可能昂贵的第三方软件时,可以确保优化软件支出。”

Dagdigian曾一度通过了所有可用的亚马逊云科技认证,但那是在亚马逊云科技领域规模要小得多的时候。如今,有 12 种不同的 亚马逊云科技 认证可供选择,涵盖从高级网络到机器学习的各个专业,他的团队中有多人拥有各种 亚马逊云科技 服务的认证。他指出:“在过去的十年中,看到亚马逊云科技内部可能性的爆炸式增长真是太了不起了,这使我们能够以刚开始时无法梦想的水平为客户提供服务。”“但是,对于一个人来说,保持每个领域的认证变得越来越具有挑战性。”还有一个事实是,认证需要每三年续订一次,达格迪吉安也很欣赏这一功能。他指出:“在这个行业中,情况变化太快了,无法以任何其他方式发生。”“保持认证与从一开始就获得认证同样重要,因为亚马逊云科技的变化速度几乎和生命科学领域的变化速度一样疯狂。”

了解如何提高 亚马逊云科技 技能并为获得 A WS 认证 做好准备