当前位置:数据中心技术专区 → 正文

大数据如何帮助搜寻马航MH370航班?

责任编辑:黄心怡 作者:饭团子编译 |来源:企业网D1Net  2014-03-19 13:41:53 本文摘自:企业网D1Net

马来西亚航空公司的MH370航班突然神秘消失在东南亚某地之后,随着时间的流逝,有越来越多的个人和组织加入了搜寻队伍。他们利用了一切可得的工具努力定位这架搭载着239名乘客、让成千上万个家庭成员和朋友心碎的波音777,大数据分析在其中也发挥了作用。

位于美国犹他州普罗沃的Adaptive Computing公司的首席架构师Daniel Hardman是这次大数据搜救行动的主管。Adaptive公司以Moab数据中心平台而闻名,全球有许多不同类型的企业都在使用这一平台,包括橡树岭国家实验室、剑桥大学和The Weather Channel天气手机应用。

Adaptive Computing公司的Moab高性能计算解决方案和云方案是该公司Big Workflow数据中心软件包的组成部分,它声称能够统合所有数据中心资源、优化分析过程并且保证服务质量。Big Workflow的名字源于它通过简化工作流程解决大数据问题的能力,还可以将对大量数据的分析传递到多个平台、环境和位置中去。

利用大数据展开联合搜索

DigitalGlobe公司是Adaptive Computing公司的客户,也深入参与到此次搜索行动中。位于科罗拉多州朗蒙特的DigitalGlobe公司是一家提供宇宙图像接收和地理空间内容的供应商,也提供操作民用遥感卫星的服务。

它还有一个众包(Crowdsourcing)网站Tomnod,使得大众能够参与到飞机搜寻行动中去。

DigitalGlobe公司和Adaptive公司目前正在对370航班实行一次众包式搜索,这一航班自3月9日从世界雷达屏幕上消失后,到3月16日为止仍然下落不明。

“当DigitalGlobe公司接到需求时,常常承受着巨大的时间压力,”Hardman 表示,“命令通常是这样的‘我们亟需搜索一块区域,我们正在寻找X事物。’为此,他们必须先将自己的卫星瞄准在那一块区域,然后才能采集最新图像,之后通过一系列的计算步骤运行。这些步骤包括取出覆盖的组图,调和照片像素让他们不会重叠,然后创建一个由众多小图组成的巨幅马赛克。”

空中搜索海面

DigitalGlobe公司的搜索集中在马来西亚周边海域,并不是在陆地。卫星拍摄的大量照片都被传送到大数据存储库。根据需要会对照片做出修改,例如使颜色一致、对比度均匀,调整不同的拍摄角度(因为卫星一直在移动),以及监测会模糊视野的云朵。然后系统会删除不可用的照片。

DigitalGlobe公司将Adaptive搭载Moab平台的Big Workflow软件包作为核心,以实现动态分配资源、数据流量最大化、监控图像分析的系统效率。DigitalGlobe公司的档案已经覆盖了全球超过45亿平方公里的范围。拥有了如此大的全球覆盖面,使用Tomnod平台就变得易如反掌,好心人就使用卫星图像可以帮助寻找370航班了。

“他们将创建一个自定义算法称‘整架飞机看起来像这样;疑似碎片和组件看起来像这样,’”Adaptive公司的发言人Jill King表示,“他们训练电脑寻找那些形状。它还可以寻找特定颜色,甚至是特定的反射光线。”

“然后数据中心会使用Moab来分析每一个形状以确认它们是否匹配(370航班)。”

Big Workflow让DigitalGlobe公司可以处理地理空间的大数据,并且在90分钟内识别类似飞机的形状,从而在自然灾害以及像370航班这样的事件中帮助救援者。

Big Workflow实现大范围搜索

“Moab使我们在灾难来临时能够做出反应,”DigitalGlobe公司的首席架构师Jason Bucholtz说,“而Big Workflow使我们能够更快速地洞察不断变化的世界,且无需对现存基础设施增加新资源。”

在消失的370航班这一离奇事件中,DigitalGlobe公司通过众包模式尽可能多地收集人们创建的数据。

“在Tomnod.com上,任何人都可以查看网格中的照片,你还可以标记任何看起来有趣的东西。”Hardman说,“问题是,人们可以看到许多东西,但它们并不总是对的。例如,有人可能看见了他们认为不寻常的东西,但它实际上只是一些漂浮的垃圾或者一波看似可疑的白浪。”

“所以DigitalGlobe公司做的就是输入成千上万人的信息,通过后台的大数据过滤器运行,给出‘印度洋的这片区域是许多人标记感兴趣的地方吗?’这样的问题,然后会对其进行聚类分析。然后,搜救专家可能会说:‘那是一个热点,飞去那儿看看。’”

到太平洋时间3月15日下午2点为止,免费使用的Tomnod.com网站表示共有421,388张照片生成并进入分析引擎,每一张照片显示了大约1,000到2,000英尺宽的印度洋海面。

Hardman说:“我不知道最后生成的范围大小是多少,但它对于搜索的西部领域而言是一片非常、非常大的面积。”

到3月15日为止,搜索仍然在继续,成千上万的人以及一个非常强大的图片/数据分析引擎正在努力解开飞机消失的谜团。

编者注:3月20日最新消息,澳大利亚海事局在南印度样找到疑似马航MH370失联航班的碎片。根据DigitalGlobe公司发布的声明,澳大利亚总理阿博特在新闻发布会中提到的卫星影像正是来自于DigitalGlobe。

关键字:

本文摘自:企业网D1Net

x 大数据如何帮助搜寻马航MH370航班? 扫一扫
分享本文到朋友圈
当前位置:数据中心技术专区 → 正文

大数据如何帮助搜寻马航MH370航班?

责任编辑:黄心怡 作者:饭团子编译 |来源:企业网D1Net  2014-03-19 13:41:53 本文摘自:企业网D1Net

马来西亚航空公司的MH370航班突然神秘消失在东南亚某地之后,随着时间的流逝,有越来越多的个人和组织加入了搜寻队伍。他们利用了一切可得的工具努力定位这架搭载着239名乘客、让成千上万个家庭成员和朋友心碎的波音777,大数据分析在其中也发挥了作用。

位于美国犹他州普罗沃的Adaptive Computing公司的首席架构师Daniel Hardman是这次大数据搜救行动的主管。Adaptive公司以Moab数据中心平台而闻名,全球有许多不同类型的企业都在使用这一平台,包括橡树岭国家实验室、剑桥大学和The Weather Channel天气手机应用。

Adaptive Computing公司的Moab高性能计算解决方案和云方案是该公司Big Workflow数据中心软件包的组成部分,它声称能够统合所有数据中心资源、优化分析过程并且保证服务质量。Big Workflow的名字源于它通过简化工作流程解决大数据问题的能力,还可以将对大量数据的分析传递到多个平台、环境和位置中去。

利用大数据展开联合搜索

DigitalGlobe公司是Adaptive Computing公司的客户,也深入参与到此次搜索行动中。位于科罗拉多州朗蒙特的DigitalGlobe公司是一家提供宇宙图像接收和地理空间内容的供应商,也提供操作民用遥感卫星的服务。

它还有一个众包(Crowdsourcing)网站Tomnod,使得大众能够参与到飞机搜寻行动中去。

DigitalGlobe公司和Adaptive公司目前正在对370航班实行一次众包式搜索,这一航班自3月9日从世界雷达屏幕上消失后,到3月16日为止仍然下落不明。

“当DigitalGlobe公司接到需求时,常常承受着巨大的时间压力,”Hardman 表示,“命令通常是这样的‘我们亟需搜索一块区域,我们正在寻找X事物。’为此,他们必须先将自己的卫星瞄准在那一块区域,然后才能采集最新图像,之后通过一系列的计算步骤运行。这些步骤包括取出覆盖的组图,调和照片像素让他们不会重叠,然后创建一个由众多小图组成的巨幅马赛克。”

空中搜索海面

DigitalGlobe公司的搜索集中在马来西亚周边海域,并不是在陆地。卫星拍摄的大量照片都被传送到大数据存储库。根据需要会对照片做出修改,例如使颜色一致、对比度均匀,调整不同的拍摄角度(因为卫星一直在移动),以及监测会模糊视野的云朵。然后系统会删除不可用的照片。

DigitalGlobe公司将Adaptive搭载Moab平台的Big Workflow软件包作为核心,以实现动态分配资源、数据流量最大化、监控图像分析的系统效率。DigitalGlobe公司的档案已经覆盖了全球超过45亿平方公里的范围。拥有了如此大的全球覆盖面,使用Tomnod平台就变得易如反掌,好心人就使用卫星图像可以帮助寻找370航班了。

“他们将创建一个自定义算法称‘整架飞机看起来像这样;疑似碎片和组件看起来像这样,’”Adaptive公司的发言人Jill King表示,“他们训练电脑寻找那些形状。它还可以寻找特定颜色,甚至是特定的反射光线。”

“然后数据中心会使用Moab来分析每一个形状以确认它们是否匹配(370航班)。”

Big Workflow让DigitalGlobe公司可以处理地理空间的大数据,并且在90分钟内识别类似飞机的形状,从而在自然灾害以及像370航班这样的事件中帮助救援者。

Big Workflow实现大范围搜索

“Moab使我们在灾难来临时能够做出反应,”DigitalGlobe公司的首席架构师Jason Bucholtz说,“而Big Workflow使我们能够更快速地洞察不断变化的世界,且无需对现存基础设施增加新资源。”

在消失的370航班这一离奇事件中,DigitalGlobe公司通过众包模式尽可能多地收集人们创建的数据。

“在Tomnod.com上,任何人都可以查看网格中的照片,你还可以标记任何看起来有趣的东西。”Hardman说,“问题是,人们可以看到许多东西,但它们并不总是对的。例如,有人可能看见了他们认为不寻常的东西,但它实际上只是一些漂浮的垃圾或者一波看似可疑的白浪。”

“所以DigitalGlobe公司做的就是输入成千上万人的信息,通过后台的大数据过滤器运行,给出‘印度洋的这片区域是许多人标记感兴趣的地方吗?’这样的问题,然后会对其进行聚类分析。然后,搜救专家可能会说:‘那是一个热点,飞去那儿看看。’”

到太平洋时间3月15日下午2点为止,免费使用的Tomnod.com网站表示共有421,388张照片生成并进入分析引擎,每一张照片显示了大约1,000到2,000英尺宽的印度洋海面。

Hardman说:“我不知道最后生成的范围大小是多少,但它对于搜索的西部领域而言是一片非常、非常大的面积。”

到3月15日为止,搜索仍然在继续,成千上万的人以及一个非常强大的图片/数据分析引擎正在努力解开飞机消失的谜团。

编者注:3月20日最新消息,澳大利亚海事局在南印度样找到疑似马航MH370失联航班的碎片。根据DigitalGlobe公司发布的声明,澳大利亚总理阿博特在新闻发布会中提到的卫星影像正是来自于DigitalGlobe。

关键字:

本文摘自:企业网D1Net

电子周刊
回到顶部

关于我们联系我们版权声明隐私条款广告服务友情链接投稿中心招贤纳士

企业网版权所有 ©2010-2024 京ICP备09108050号-6 京公网安备 11010502049343号

^