数据工程或是物联网技术的瓶颈

物联网部署的关键并非设备的部署,而是对设备产生数据的分析和管理。其中的难题是:如何处理这些传感器收集到的数据。这个问题不仅仅是由于数据的数量,而是在于数据分析是一门多学科交叉的科学。物联网最终将需要一个建立在数据仓库基础上的数据供应链并允许更为动态和复杂的流程架构。本文将讲述数据工程的技术发展现状。

【安防在线 www.anfang.cn】
  Gartner等一些分析企业都认为,物联网可以对经济产生惊人的影响。2020年,物联网供应商预计将从中获取3090亿收入。同时,物联网还会对经济间接产生19万亿美元的积极影响。此外,物联网创造价值的方式或将颠覆人们的想象。

  物联网部署的关键并非设备的部署,而是对设备产生数据的分析和管理。如果你对物联网的应用感兴趣,那么,这就是你需要学的东西:数据工程。

  物联网部署:绝非问题

数据工程或是物联网技术的瓶颈

  这个礼拜,我发现如今的物联网应用已经变得很简单,甚至工业物联网也是。我和启雷,一个著名的IT顾问一起打算将Wifi升级为网状网络结构。仅仅10分钟后,我们就完成了这一部署,网速也提升到惊人的60MB/S。我确信,Nest恒温器以及烟雾探测器部署也一样简单。

  斑马技术打算推出一个新平台,让智能手机或其他设备更容易实现跟踪标签等一些物联网功能。无论是地区零售店还是沃尔玛这样的巨头都可简单方便的使用此系统享受物联网好处。ThingWorx,另一家刚被PTC收购的物联网厂商已经开发出一款针对车联网,工业物联网的连接,监控及控制数据操作系统。

  由于云和物联网技术,很多曾经的部署配置问题都不再是一个问题。

  数据工程:一大难题

  另外一个仍未消失的难题是:如何处理这些传感器收集到的数据。这个问题不仅仅是由于数据的数量,而是在于数据分析是一门多学科交叉的科学。

  这里,我们给出了一个数据流动的初始想法。大部分情况下,物联网数据是从传感器流向一个巨大的数据湖。接着,数据湖内会进行一些处理及蒸馏过程,高价值的数据会被移动到企业数据库内。

  下一个步骤则是数据分离及结合步骤,这样,可以实现自动化动作和分析模型。另外,每个不同物联网应用可能需要使用不同类型的数据分析引擎。

  和单向数据流的数据仓库不同的是,应用程序,尤其是分析引擎也有可能产生数据流动并流回到企业数据仓库或者数据湖中。

  另外,物联网的数据架构也有不同的新特性:

  1、物联网数据实时处理的需求

  2、数据湖存档或删改的需求

  3、跨公司分享数据的需求

  4、多数量、种类来源数据处理的需求

  5、遍布世界的数据处理需求

  6、大量移动数据的需求

  在我看来,物联网最终将需要一个建立在数据仓库基础上的数据供应链并允许更为动态和复杂的流程架构。建过大型数据仓库的人都知道,这是一个艰巨的任务。即使在云技术的帮助下,物联网数据供应链的建立依旧是件复杂的事情。成功做到这些的公司将在未来的物联网世界获益颇多。

  数据工程技术

  和大多数以前的科技浪潮一样,物联网技术也是一种添加剂。由于物联网,企业数据仓库也将变的更有价值。不仅如此,物联网技术还需要多种不同类型的数据推动。以下未来的三个至关重要的企业:

  Attunity可解决物联网内在复杂性的数据同步的完美技术。随着物联网数据供应链建成,Attunity可为其提供数据来回流动的功能,并无需创建大量用于维护特殊用途代码的库。

  Attunity的董事长兼首席执行官西蒙阿伦解释道:”过去几个月,我们看到了工业物联网市场持续高增长。原因很明显。工业物联网将工厂基础设施、机器、地板电网、交通、发动机、设备和其它元素连接到互联网上,并提供随地连接、管理、控制它们的功能。这可以使企业提高效益并使它们从故障预测,及时维修和更高的安全性中获益。通过使用Attunity的解决方案,企业可以克服数据传输瓶颈,实现全球数据中心及云端更快的传输。这样,企业就能实现更快,更好的实时数据传输。”

  本月初,Attunity宣布推出Maestro,作为数据供应链的中枢神经。Maestro提供了一个中央控制台用于监控复杂网络的数据流动,就像大型企业用于追踪世界各地的货物流动的供应链管理软件那样。这种数据流管理将推动物联网应用的发展。

  斑马技术从事形码标签项业务已经有40年时间历史了,同时,它还通过建立麻省理工学院媒体实验室而进入物联网领域。Zebra的Zatar平台是基于麻省理工学院媒体实验室的想法而开发完成:基于云的多传感器集成平台,可将传统系统和智能设备连至互联网。Zata平台可对传感器收集的数据进行分析和自动处理。在云计算普及之前,这个方案就已经成型了。如今,随着云计算的普及,Zatar平台将发挥更关键的作用。

  斑马技术公司首席执行官安德斯・古斯塔夫松说:”40年以来,斑马技术一直致力开发物联网的基石技术并建立了比较大的技术优势。我们发现,医疗保健,零售和制造业领域,物联网即将迎来重大机遇。我们也将为客户提供更多可扩展的解决方案,让每个物理实体都成为物联网节点。”

  物联网技术将为日益增长的移动工作团队提供实时信息并提高他们的工作效率。近期,斑马技术收购摩托罗拉企业业务(一个专注帮助客户追踪、捕获资产实时信息并提供端到端实时数据实时数据分析的公司)。

  斑马技术Zatar平台基于云的软件可以让企业更容易创建物联网应用及收集现场员工实时数据。最终的结果是,不仅仅沃尔玛和Target这种大企业可以创建使用物联网应用。所有的企业都有机会参与。

  ThingWorx则是为物联网家居应用提供了一个平台。作为这个项目的一部分,ThingWorx创建了一个基于图形数据库的建模环境,它可追踪成千上万个彼此交互的设备。此外,ThingWorx还拥有一个基于非SQL数据库的数据管理平台。

  ThingWorx首席执行官拉斯法德尔称:”没有什么新技术比物联网更适合用来收集、分析数据了。这就要求那些应用开发者重新考虑收集,分析,处理数据以及信息交互的办法。ThingWorx是市场上第一个完全集成和预先架构的解决方案。它涵盖连通性,事件处理,分析,存储和展示任何种类的M2M和物联网的数据。我们的目标是为客户提供数据及时分析并使它们更有效的方案。”

  有效利用刚刚提及的数据流动及数据分析技术是物联网成功的关键。换句话说,物联网的实体部署是件简单的事情。而数据工程则是真正的难点及提供差异化的价值的东西。

该文观点仅代表作者,本站仅提供信息存储空间服务,转载请注明出处。若需了解详细的安防行业方案,或有其它建议反馈,欢迎联系我们

(0)
小安小安

相关推荐

  • 宁波市发布《关于推进大数据发展的实施意见》

    为认真贯彻落实《国务院关于印发促进大数据发展行动纲要的通知》(国发〔2015〕50号)和《浙江省人民政府关于印发浙江省促进大数据发展实施计划的通知》(浙政发〔2016〕6号)精神,深入实施国家大数据战略,进一步加快推进我市大数据发展,现提出以下实施意见。

    2024年1月30日
  • 大唐电信推出一体化云大数据中心解决方案

    面对扑面而来的“新基建”浪潮所带来的大量数据上云、应用上云需求与机会,大唐电信提出了新一代云化大数据中心解决方案,已在产品、技术、标准、业务融合与实施能力等方面做好了充分的准备,我们将把“与‘新基建’同行,服务国家发展战略”作为自身的使命和发展战略,尽自己所能为“新基建”建设添砖加瓦。

    2024年1月12日
  • 2019大数据产业峰会即将拉开帷幕

    2019年6月4日至5日,由中国信息通信研究院、中国通信标准化协会主办,大数据技术标准推进委员会承办的2019大数据产业峰会将在北京国际会议中心隆重举办。

    2024年1月29日
  • 工信部:“2017大数据优秀产品和应用解决方案案例”入选名单公示

    4月24日获悉,工信部国家工业信息安全发展研究中心正式公示了“2017大数据优秀产品和应用解决方案案例”入选名单,名单共100个,大数据产品类30个、大数据应用解决方案类70个,具有一定的代表性和标志性,对贯彻国家大数据战略,全面掌握我国大数据产业发展和应用情况。

    2024年1月31日
  • 公共安全视频图像智能化应用建设解决方案

    熙菱公共安全视频图像智能化应用建设解决方案遵循《公安视频图像智能化建设应用指南》的指导精神,整个方案由视频图像综合应用平台、天启(多维感知大数据融合实战平台)、社会治安防控综合应用平台、智能数据治理平台等多个系统构成。通过优化资源化管理,满足了不同警种的差异化应用需求,提升了视频图像信息智能化应用水平。

    2024年1月14日
  • 安防管理软件分类

    安防软件按照功能可分为如下几种类型:基础管理类、数据存储类、互联互通类、细分行业应用类。

    2024年4月9日