datasheet

美国数据科学家:产业化的大数据分析如何实现?

2015-12-21来源: 互联网 关键字:汪晓宇  大数据
    尽管大数据已成为热门话题,但很多企业并不知道如何正确地步入大数据的怀抱,特别是对于很多中小企业,没有大笔资金以及人力的它们更是手足无措。与此同时,企业在谈到大数据和分析的时候,常常考虑的切实问题是如何从数据当中获得更多的价值,特别是对于拥有不同数据的行业客户而言,其最关心的是如何从数据中提取价值,并驱动其基于业务而非IT进行分析。

    近日,美国数据科学家、TasteAnalytics创始人及CEO汪晓宇博士表示,无论是大型企业还是中小企业,其面临的困境都大同小异:一是正确的认识大数据和分析,二是企业如何简便地参与进来。

Taste Analytics创始人及CEO汪晓宇博士

    原始数据需要架构

    在汪晓宇看来,很多企业特别是大型企业所蕴藏的数据量惊人,但数据分析的关注重点并不是对体量的研究,而是聚焦在数据所产生的价值。

    “有些原始数据实际上非常复杂,包括结构化数据、非结构化数据、半结构化数据,如果仅是原始数据,即一堆杂乱无章的信息,大数据带来的实际意义并不大。”汪晓宇表示,企业必须对数据进行架构,找出其中的价值。

    除此之外,对于数据本身而言,因为数据获取渠道很多,所以会遭遇很多问题,包括这些数据是否真实,是否完整,是否有冲突,是否存在不确定性等,这都需要一一确认。

    同时,企业还需要考虑数据的同理化和社会化,毕竟数据来源不同,但企业需要用一体化的建模方式对待数据、分析数据,这样才能使最终用户得到有价值的产品或信息。

    大数据分析不仅是科学而是艺术

    跨过原始数据的障碍后,在数据分析部分,仅在最开始数据清洗环节便面临不小的挑战。如果手动地进行信息处理,有报告指出,光是数据清洗就将耗费分析师超过80%的时间。

    汪晓宇表示,在这个过程中,业界有种声音是通过机器学习进行分析建模,这样尽管能解决部分问题,但因为机器学习算法可能非常僵硬、晦涩,分析容易受限并忽略整体情况,缺乏了人类的智能,而这样的结果并不能发挥出数据的真正意义。

    所以在汪晓宇看来,大数据分析与其说是科学(计算模型),还不如说是艺术(需要人类分析的智能)。

    一个著名的人机智能PK案例是,1997年国际象棋冠军GarryKasparov和深蓝(计算机)大战,最后败给深蓝。但在2005年的人工智能和“增强智能”(AugmentedIntelligence)的大战中,“增强智能”优势体现出来了,一位大师利用1套象棋程序打败了象棋计算机Hydra。

    “如果拥有人工智能,或得到计算机辅助,作为人的我们就可以进行更好的协作,并得出更好的决策。所以在大数据分析中,以人为中心的转变,应从数据操作转移到决策本身。”汪晓宇表示。

    B2B模式应由业务而非IT驱动

    在大数据及分析的过程中,人成为核心,并应将关注点转移到决策部分。那么对于企业,如何得到这样符合商业要求的分析结果,从而配合人的决策实现“增强智能”呢?

    汪晓宇表示,现在TasteAnalytics已经有简便的方式向企业提供所需的数据。他表示,可以在采用虚拟化技术的基础上,通过三方面助力企业进入大数据。

    一是分析工具的采用,使得企业不用亲自去完成所有的数据清洗等过程。同时考虑到B2B的商业模式应该由业务驱动而非IT,所以可以在业务环境中部署分析工具,从而实现企业运转的灵活及敏捷性。

    二是提供按需的数据,企业无需如过去一样耗费很大精力建立数据之间的相关性,而是由平台提供相关任务的数据。

    三是以用户为中心的分析,决策者通过正确的提问,并可以得到与其业务环境相关的回答。

    目前TasteAnalytics正在这么做,以使得分析结果符合客户的商业需求,同时“面向不同的客户提供不同的工具,只有这样才能帮助客户在各异的行业中发掘洞察。”

    汪晓宇强调,在未来企业的B2B商业模式中,业务增长是关键,而基于大数据的业务分析正符合了时代需求,同时通过人类和计算机的互动,使得围绕最终用户的商业分析成为可能。

关键字:汪晓宇  大数据

编辑:鲁迪 引用地址:http://www.eeworld.com.cn/afdz/article_9140.html
本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:郭华东院士:应加快国家大数据建设进程
下一篇:2020年安全领域的大数据分析市场达71亿美元

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

福特利用大数据 预测未来可能发生交通事故地点

通常只有在发生了交通事故之后,人们才发现特定交叉路口或是特定路段对于驾驶员、骑自行车者以及行人来说是问题道路。据外媒报道,福特提出了一种方法,可以利用大数据帮助城市确定哪些地方最有可能成为未来交通事故的发生地。为了找到答案,福特智能移动出行(Ford Smart Mobility)部门去年在伦敦及周边地区记录了100万公里车辆和驾驶员的行程。福特追踪了伦敦市的车辆行驶状况,并详细记录了刹车、刹车程度甚至是否使用了危险警告灯等驾驶数据,可帮助确定“差点发生交通事故”的情形。然后,福特交叉引用了此类信息与现有的事故报告,并构建了一种算法,以帮助确定未来交通事故可能发生的地点。福特智能移动出行部门城市数据解决方案(City Data
发表于 2018-12-03

安防AI大数据流程的三个环节浅析

对于安防AI,看上去是AI,实际上最后是大数据,大数据才是智能化的基础。人工智能、深度学习、机器学习、大数据应用在安防AI中, 说到底都是对大数据的采集、建模和应用。本文大致说一下安防AI中,对于大数据的运用过程与环节,让大家有个大致的印象。安防AI大数据流程三个环节数据采集数据采集,有说数据获取,这是数据的来源,安防AI中这个数据是来源于视频监控系统中的视频流,当然往大了说安防,还包括很多内容,但是基本都是以视频监控为核心,这里主要指视频监控系统。数据预处理对于采集到的实时或者历史视频,是只能看不能应用的,要调用就得结构化,先给视频流解码,把视频流还原成一张张图片,再对图片进行预处理。可能不同的公司对预处理包含的步骤内容说法不太
发表于 2018-11-23
安防AI大数据流程的三个环节浅析

Elastic做客选型宝,分享PB级大数据实时处理解决方案

近日,Elastic中国区总经理王刚Galen、首席架构师吴斌做客选型宝直播间,与CTO和CIO们分享企业如何实现PB级大数据实时处理。作为全球最流行的开源数据搜索与实时分析技术,Elastic数据平台以灵活部署、平滑扩展、安全性强、适用场景广的特点,在全文检索、地理位置、全栈监控、机器学习等各类数据应用场景中大显身手,受到互联网企业、金融电信乃至政府机构的青睐。 Elastic Stack数据平台由Logstash、Beats、ElasticSearch和Kibana四大核心产品组成,在数据摄取、存储计算分析及数据可视化方面有着无可比拟的优势。首先,Logstash和Beats作为底层核心引擎组成数据摄取
发表于 2018-11-23

寄云科技基于大数据的企业创新

近日,第二届ICIM中国城市基础设施建设与管理国际大会在钱塘江畔成功召开。在“创新发布-城市承载力与综合治理解决方案路演”环节,寄云科技CEO 孔宇华发表题为《基于大数据的企业创新》演讲。他指出,基于大数据的企业创新应当以思维先行、方法引领,并融合领域知识、数据科学、管理机制和软件技术等多方面要素,最终创造巨大商业价值。 灯泡发明小故事大启示双模式实战“一年半时间内测试了3000多个不同的设计和6000多种不同的材料……”,孔宇华借灯泡发明的小故事指出了“快速试错、优化迭代,加上完整的数据记录和分析,诞生最佳方案”方法论的重要性。该方法论同样可以运用到基于大数据的企业创新中。结合寄云科技的工业大数据、工业互联网实践经验
发表于 2018-11-20

Elastic秒杀数据搜索与实时分析,开源技术开启大数据新时代

示,Elastic靠的是数据搜索和实时分析技术,在搜索数据的同时实时分析数据,给用户更多更精准的结果。同时依靠开源技术和商业模式,开拓了出大数据应用新格局。 Elastic副总裁Joen Van Driel 1.数据搜索与实时分析,开拓大数据应用新场景搜索不仅仅是一个网站上的一个搜索框,搜索的结果也不仅仅是网页内容的简单呈现。企业用户需要数字搜索和实时分析。 细观搜索领域的竞争格局,包括Amazon 、Alphabet GOOGLE、Splunk 、百度等公司提供相关的企业服务,但Elastic着眼于赋能企业内部海量数据的实时搜索。 数字经济时代,企业拥有了更多的数据,并且每天都在新增数据,包括结构化
发表于 2018-11-20
Elastic秒杀数据搜索与实时分析,开源技术开启大数据新时代

数字化安防崛起 企业掀起布局热潮

2018年11月8日,阿里钉钉CEO陈航在世界互联网大会上表示,数字经济已成为经济增长的新引擎,其发展由数字化企业组织推动,而5年后数字化将在企业中全面普及。马云接班人张勇也曾表示,云计算将成为公司未来“主要业务”。在新一代信息技术迅速崛起的背景下,大力发展数字经济以推动实体经济转型升级正在成为主流。数字安防政策进入密集落地期在我国,数据已成为与资本和土地相并列的关键生产要素,被不断分析、挖掘和应用。为构建全国一体化的国家大数据中心体系,中央和地方密集出台各项大数据相关系列政策。以杭州为例,杭州数字安防产业集群被纳入国家重点产业布局,给予政策与资金支持,而杭州也重点推进七个项目建设,包括创新人才引进培养、公共平台提升以及开放合作
发表于 2018-11-09

小广播

About Us 关于我们 客户服务 联系方式 器件索引 网站地图 最新更新 手机版

站点相关: 视频监控 智能卡 防盗报警 智能管理 处理器 传感器 其他技术 综合资讯 安防论坛

北京市海淀区知春路23号集成电路设计园量子银座1305 电话:(010)82350740 邮编:100191

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2018 EEWORLD.com.cn, Inc. All rights reserved
pt type="text/javascript" src="//v3.jiathis.com/code/jia.js?uid=2113614" charset="utf-8">