在网络，移动设备，传感器，社交媒体，交易应用程序，日志文件，大数据等实时数据泛滥的情况下，发现了大量垂直市场应用程序，从诈骗检测到科学研究。无论涉及重大隐私问题或企业困难的挑战如何，仅在2017年，大数据投资就获得超过570亿美元的增长势头。预计未来三年的投资将以约10％的年增长率进行增长。

大数据分析所需的基本资源

大数据咨询已成为软件开发服务提供商的可行选择。无论是营销还是品牌实施的新产品，公司都不会轻易作出决定。当提到任何重大举措时，企业都会寻找他们客户提供的数据，以确保公司正朝着观众遵循的方向发展。

从点击流数据到购物车上的信息，都有大量的材料需要筛选，这就是为什么企业支付高价值的大数据咨询服务才能理解这一切。对于新职业市场的人来说，大数据分析是一个不错的选择。 当然，必须熟悉开始处理数字所需的技能和工具。

大数据分析所需的五个资源如下：

1.完成MATLAB Mastery Bundle

MATLAB或Matrix是一个多范型数字计算空间和编程语言。用外行人的话来说，它是一种工具，它使得编写代码，运行脚本以及执行数据分析和可视化等任务变得轻松易懂，从而解决复杂问题，而这些代码还不那么复杂。

2. Python Power Code BONUS Bundle

市场上有许多重要的编程语言可供选择，数据分析师使用其日常任务和职责中的很多。但是，如果有人要先学习，那就是Python。 Python语言被誉为用户友好型以及直观性。此外，它拥有众多的功能，这使它能够处理数据争夺。 70小时的培训通过展示如何下载，提取，清理，汇总，分析和可视化数据，开始了编程教育。

3.大数据和分析主工具包

数据分析师和高级分析咨询人员使用大量的语言和工具来获取角色，这并不足为奇。这四个模块集合为数据库添加了四个重要的分析工具，即Minitab，SPSS，SAS和R Studio。

4.使用Tableau Desktop 9 Bundle进行数据可视化

通过交互式仪表板分析和呈现数据以完全挖掘信息的主要工具之一是Tableau 9.这个收集将使您了解Tableau。因此，可以开始创建自己的可视化数据。

5.完整介绍R编程包

R的核心是一种统计编程语言，它非常适合挖掘和分析数据。但是，它也具有高级图形和机器学习功能，在数据可视化和集成复杂算法方面提供了一些独特的优势。在五门课程和三本电子书中，收集指导通过要点使用R来充分发挥潜力。

大数据优势

大数据应用程序可让数据科学家，统计人员和其他分析专业人员分析越来越多的结构化数据以及其他形式的数据，而这些数据往往不被传统的商业情报和分析程序所利用。这涵盖了非结构化和半结构化数据的组合，例如互联网点击流数据，网络服务器日志以及来自客户电子邮件的文本，机器数据，社交媒体内容和通过连接的传感器到事物互联网的呼叫细节记录。

在更大的范围内，数据分析技术迎合数据集分析的手段，并最终帮助企业做出充分知情的决策。商业智能查询回答关于业务绩效和操作的基本查询。大数据是一种高级分析，涉及复杂的应用程序元素，如预测模型，统计算法等。

用数据咨询创造新的增长机会

数据分析可以创造大量新的增长机会。此外，它甚至可能会产生一个新的业务类别，例如分析和汇总行业数据的类别。大多数企业将处于大量关于服务和产品，供应商和买家，消费者偏好和意图以及更多信息流的信息中。

各行各业的企业都应该开始大力创造数据功能。除了广泛的数据外，数据的高频率和实时性也是至关重要的。通过数据分析，实践被更广泛地使用。

今天的大数据和分析应用市场真是巨大。世界各地的软件开发服务提供商提供了大量的数据咨询工作。现在，大数据体验意味着更有可能从软件开发组织获得有利可图的工作。市场很大，有一系列的项目，交易，服务和合作关系。咨询服务可能会有所不同，具体取决于组织的特定要求，以及需要利用数据分析和解决方案的功能，这些功能可以简化业务流程。

日前，位于纽约的人工智能领域创业企业奇丽（cherre）公司宣布从天使投资组织那里获得了900万美元的种子资金，用于其拓展北美市场。

该公司是一家房地产行业数据智能分析平台公司，能够帮助客户提高其购买房地产的成功率，它能够即时采集来自公共部门、个人部门等的房地产信息数据，并对其进行分析，帮助保险公司、银行、投资人或其他潜在客户，决定是否对看中的房地产项目进行投资。

通过该平台，客户能够准确地了解某个房地产项目的历史背景、过往交易记录、周边人口资源、价格、未来影响因素等信息，以帮助客户优化自己的决策，提高投资成功率。

本轮投资由纳维塔斯投资公司（navitas capital）领投，另外四家创业投资公司跟投。位于加州纳维塔斯投资公司成立于2011年，专注于投资包括智能建筑设计在内房地产科技企业。在天使轮，沃顿天使投资组织、哈佛天使投资组织和纽约天使投资组织等六个区域性天使投资组织支持了奇丽公司的早期发展。

纳维塔斯投资公司管理合伙人吉姆·佩蒂特（Jim Pettit）高兴地说：“奇丽房地产人工智能平台推出刚刚一年，但它已经革命性地改变了这个行业大数据分析、处理的方式，为金融机构、保险公司、房地产经纪公司和其他需要跟房地产领域合作的大型企业提供了前所未有的解决方案。我们愿意跟所有的投资机构一起，支持这家创业企业进一步提高其服务效率，拓展市场空间，给所有与房地产相关的企业带来更多福音”。

这家新成立的公司于2017年12月才推出他们的服务平台，但是，他们迅速被业内大客户所接受，纽约房地产管理委员会、全球最大的房地产经销商凯勒·威廉斯（Keller Williams）公司、斯特莱特系统公司（Stratus Data Systems，为房地产行业提供信息服务的企业）、铂金不地产经纪公司（Platinum Properties）、奥格斯特公司（August Partners，为房地产企业提供战略咨询和策划的企业）等使用了该公司的平台。

奇丽公司联合创始人、首席执行官萨尔曼森（L.D. Salmanson）说，公司将利用这笔资金满足客户激增的需求，并拓展美国其他城市和加拿大市场。

奇丽公司联合创始人、首席执行官萨尔曼森（L.D. Salmanson）

“世界上许多大行业都开始重视即时大数据的力量，重新评估即时大数据对于提高行业核心竞争力的作用。”萨尔曼森说，“我们看到金融机构、保险公司、房地产投资公司等利用即时大数据后对他们的业绩的极大改善，以及我们核心服务在其它领域的应用潜力，这使我们倍受鼓舞。现在，新的投资人进来了，我们会快速提升我们的服务质量，把即时大数据应用，提高到新的水平”。

纽约房地产管理委员会（Real Estate Board of New York，REBNY）是纽约房地产行业的商会组织，成立于1896年，目前，该委员会的17000名成员单位管理的建筑物达到110万栋，其中有住宅350万套。2017年10月，在该委员会组织的一次技术竞赛中，奇丽公司脱颖而出；2018年4月，该委员会采用奇丽公司的即时数据分析系统服务自己的会员单位。

萨尔曼森2000年~2004在以色列国防军服兵役4年，2013年获得沃顿商学院MBA，此后在投资机构工作。沃顿校友天使投资组织（The Wharton Alumni Angel Network，WAAN）是支持宾夕法尼亚大学和沃顿商学院校友创业的天使投资组织。正是由于在投资行业从业的经历，他跟投资界保持密切的联系，2016年，他创立奇丽公司时，就获得了WAAN、纽约天使投资组织等六家天使投资组织的共同支持。

奇丽公司还获得过包括“2017亚裔金融行业年度金融技术奖”等荣誉称号。到2020年，房地产领域大数据应用的市场规模超过万亿美元。

图片来源：news

从2013年“大数据元年”到现在，几乎所有世界级的互联网企业，都将业务触角延伸到了大数据产业，无论社交平台逐鹿、电商价格大战还是门户网站竞争，大数据从不会缺席。如今，历经4年，大数据早已从一个简单的技术热词变成一股社会浪潮，影响着我们生活的方方面面。

在这个大数据时代，大数据到底意味着什么？大数据有什么用途，值得各国将其上升为国家战略，今天湛庐君列举了以下8点有关大数据的用途，让我们一起了解下大数据不可忽略的价值。

1帮助企业真正实时了解所有顾客

在亚马逊搜索《世界因何美妙而优雅地运行》，根据你的搜索，网站还会智能推荐相似图书，既方便了读者，节省了他们搜索的时间成本。对于企业来说，谁又会不喜欢这样站在用户角度思考问题的公司呢？

过去，我们使用焦点小组和问卷调查所得出的信息来发现顾客，但是，结果才出来，这些信息就已经过时了。有了大数据，事情就大不一样了。大数据能让企业完全获取顾客的所有特征。了解顾客，是向他们出售商品的关键，但是实施这些策略时一定要谨慎，以免出现隐私问题。塔吉特公司先于当事少女的父亲发现了少女怀孕的事情就是一个著名的例子。

如果企业确保顾客的隐私不受威胁，那么就能借助大数据为顾客提供个性化的见解。这种了解的好处就是，你能根据个人需要制定推荐或广告。亚马逊在这方面的技术已经十分纯熟了。它的算法能为每位顾客打造不同的网页。这一战略也换来了回报。

2帮助企业实时共创、改善和创新产品

以湛庐君自己的新媒体运营为例，大数据的分析能力能帮助企业完善产品，同时，我们还能够通过大数据的分析和反馈，进一步优化用户的阅读体验，做好内容的运营。

过去，都是消费者小组讨论他们购买的产品、所需的产品以及需要的原因。公司也采用座谈小组的形式向消费者展示新产品，了解他们的看法——如果消费者不喜欢某产品，企业就可能需要从头来过。而有了大数据，这样的小组将不复存在。

大数据分析能帮助企业更好地了解顾客对它们产品或服务的观点。相比传统问卷调查，人们在社交媒体和博客上对产品做出的评论所提供的信息更多。如果能够实时评估这些信息，企业就能立即做出反应。企业不仅可对消费者针对产品的反应进行评估，还可以根据不同人群、不同地理位置或发表评论的不同时间做出不同的反应。

3帮助企业确定所面临的风险

舆情监测、危机公关、趋势分析，通过大数据建立一整套预警系统，可以让危机在集中爆发前得到妥善的处理。

确定风险是当今企业管理的一个重要方面。界定顾客或供应商的潜在风险，需要创建详细的资料，并将资料具体分类。每个类别都拥有不同的风险水平。当前，这个过程通常过于宽泛和模糊，起到的作用不大。顾客或供应商往往被归入错误的分类，从而对应着不正确的风险状况。有了大数据，就有可能基于过去和现在的所有数据立即为每个顾客或供应商划定适当的风险区段。

尤其是在保险企业中，预测分析被用来预测公司未来将在顾客身上花费的成本。保险公司为了降低索赔成本和避免欺诈，就需要识别出以适当价位购买适当的、风险最低的产品的顾客。运用大数据技术，比如模式识别、回归分析、文本分析、社交数据聚合以及情感分析（通过自然语言处理或监视社交媒体），就能获得潜在顾客的全方位视图。

4提供精准的广告定位、个性定制化服务

旅程网发现，苹果用户的酒店费用平均比个人电脑用户的高20到30美元。所以它给苹果用户展示的酒店比给个人电脑用户展示的贵。通过大数据分析，找到最精准的用户并投放广告，这样可以节约可能将被浪费的广告费用。

大数据对广告定价的影响，对电子商务的收益管理来说，可能会获得全新的意义。除此之外，社交媒体广告的投放，在精准定位用户时，也会根据平台用户属性，进行数据分析。所以，对广告主来说，社交媒体广告的吸引力直接表现为可观测的数据效果，即：有没有效果，咱拿数据来说话！

另外，相比于过去，企业一直使用对比测试和A/B测试为顾客实时定义最佳布局，有了大数据，这个过程将被永远改变。许多网站的参数可以被不断分析和实时分析，也可以结合起来，获得新的结果。这样，企业就有了一个流体系统。在这个系统中，外观、感觉和布局的变化会反映多重影响因素。也有可能根据每位访客当时的意图和需要，为他们提供特别定制的网页。如果访客个人要求发生变化，一周或一个月之后，他再回过头来访问该网站，就会看到一个不同的网页。

5改善为用户提供的服务支持

特斯拉采用“远程诊断”技术，通过后台系统检测车辆状况。很多时候，车主不需要把车辆开到服务中心，只需致电服务中心，便可通过远程访问诊断问题。

有了大数据，就有可能远程监控机器，并检查它们的运行情况。运用远程信息处理技术，能实时监控机器的每一部分，再将数据发送给生产厂商，经存储后用于实时分析。一切振动、噪声和所出的错都会被自动探测到，如果算法发现不符合正常运行的情况，就会发出服务支持的警报。机器甚至会在闲置时，自动制订维修计划。当工程师前来修理机器时，他会非常清楚如何下手，因为他已拥有了所有信息。

俄亥俄州哥伦布地区的建筑开发公司Nick Savko&Sons 就已经在使用远程信息处理技术来改善运营效率了。它使用GPS装置来监控数据，比如空闲时间、周期时间、生产率，等等。在建设SX铁路价值1.75亿美元的转运终点站时，他们把这些GPS装置安装在施工设备上。所有信息都能通过远程监控获得，而这些信息帮助该公司提前一个月完成了这个项目。

6帮助企业发现新市场和新商机

2010 年 3 月，欧盟委员会公布了《2020 战略》，认为数据是最好的创新资源，开放数据将成为新的就业和经济增长的重要工具

全球各国政府都在开放它们的数据集，以此来刺激创新。2011 年，欧盟组织了“开放数据挑战”，这是欧洲最大的开放数据竞赛，旨在激励创业公司找出利用政府产生的海量开放数据的创新型解决方案。通过将各种数据集结在一起，企业能够赋予已有的数据新的含义，并发现新市场、新的目标群体或商机。

企业也能发现未被满足的顾客需求。通过对数据进行模式和回归分析，企业会发现以前没有意识到的顾客需求。大数据还指示企业，先到哪儿去做营销或将产品放在哪个位置。丹麦能源公司维斯塔斯风力系统公司就使用大数据和分析方法来选择风力涡轮机的最佳位置。有了那些信息，该公司就能够以最低的成本获得最多的能量。

7帮助企业更好地了解竞争对手，保持领先地位

你能为你的公司做什么，你的竞争对手或多或少也能做到。大数据将帮助企业更好地了解竞争对手以及它们之间的相互关系。它能提供抢先起步的优势。运用大数据分析，算法能够确定你的竞争对手是否调动了价格，然后，你也能自动调整你的价格。企业也可以监视竞争行动，比如追踪新产品或促销活动，以及针对它们的市场反应；同时，也可以随着时间的流逝追踪市场反应的变化。记住，你或你的竞争对手所做的，大多都能作为开放数据。

8帮助企业进行有效的组织规划，节省成本

大数据给人们的生活带来了便利，比如，餐饮的外卖服务，一方面可以针对用户喜好优化餐厅排序，另一方面对餐厅的物流配送、送餐员路线规划提供了技术支持，也为企业的管理带来方便。

通过分析公司的所有数据，你可能会发现一些方面可以得到改善和更好的规划，物流行业尤其如此。在供应链或运输过程中利用新的可用大数据源，该行业就能获得更高的效率。货车上的电子记录仪能记录行车速度、地理位置等；与拖车和配送过程相关的传感器和无线射频识别标签能提高装货和卸货的效率；另外，将道路、交通和天气方面的信息与客户的位置信息相结合，能节省大量时间和成本。

之前为大家介绍了相信大家对大数据的底层结构，以及应用层功能的覆盖已经有了一定的宏观了解，以下将带大家从微观视角分领域分析大数据行业。

　　【IT168 专稿】导语：IDC发布的预测报告显示，到2021年中国数字经济的比重将达55%。中国的人口和经济规模决定了中国的数据资产规模冠于全球。这不仅为大数据技术的发展提供了演练场，同时也提出了更多、更高的要求。

　　大数据领域每年都会涌现出大量新的技术，成为大数据获取、治理、存储、分析或可视化的有效手段。而创业公司正在成为大数据技术创新的中坚力量，他们正在不断开发更多更加先进的软件或系统来满足这些大数据需求。

　　2017年，国内大数据领域就有这样10家创业公司吸引了我们的注意。(排名不分先后)

　　星环

▲CEO：孙元浩

　　星环的研发团队是国内最早的大数据Apache Hadoop发行版团队，专注于大数据和人工智能基础平台研发，主打产品一站式大数据综合平台(TDH)和通用人工智能平台Sophon。产品虽然源于Hadoop，但超越了Hadoop，特别是在分析型数据库、流处理技术、大规模分析型搜索引擎以及图形化的大数据开发工具套件方面，已经完全重构。

　　通过自主研发，星环实现了多项技术的突破， 如基于Hadoop平台构建数据仓库，实现利用Hadoop技术替代传统数据仓库案例;实时计算引擎，融合了低延时的事件驱动机制和复杂批处理编程模型的流处理引擎，支持复杂SQL、CEP复杂时间规则和机器学习，和Spark Streaming相比，星环Slipstream延时低至10ms;大规模搜索引擎，实现PB数量级上秒级延迟，同时具备搜索和统计分析能力。

　　2017年发布的TDH5.0，让基于容器化进行部署大数据平台成为可能。Sophon支持图形化拖拽式的统计分布式机器学习和深度学习的模型开发以及自动建模。

　　TDH社区版目前向所有人免费开放，在星环官网或腾讯云上都可以下载使用。

　　星环成立于2013年，总部位于上海。在Gartner发布的2016版数据仓库及数据管理解决方案市场的魔力象限中，星环是唯一上榜的中国公司。今年10月，在IDC发布的《IDC MarketScape：中国大数据管理平台厂商评估，2017》报告中被评为领导者。

　　融资方面，2017年5月，星环完成了由腾讯领投的C轮2.55亿融资。 6月在全球著名的第三方评测组织TPC上发布的TPCx-HS10TB测试结果，位列全球第一。

　　百分点

▲CEO：苏萌　　

　　百分点成立于2009年，总部位于北京，是一家大数据与人工智能解决方案提供商。产品线全面涵盖大数据技术、管理、应用各个层面，其核心产品包括技术层的大数据操作系统(BD-OS)，管理层的用户画像标签管理系统，以及应用层的推荐引擎、分析引擎和营销引擎。

　　2017年12月百分点发布Deep Matrix AI决策系统，通过该系统，用户可以进行复杂业务问题的自动识别、判断并做出前瞻或实时决策。

　　从百分点公开案例数据显示， 国家质检总局凭借这套智能决策系统进行召回判断，由每季度组织十多名专家耗费数百小时的会商制度转变为“1人+机器协同”的实时决策。上线1年，百分点这款产品已经处理了1000多起汽车召回案例，也协助完成了5000多万辆汽车的召回。

　　在Gartner发布的“2016 China Cool Vendor”评选榜单中，百分点曾作为唯一一家大数据公司入选。2017年，又被APAC CIO Outlook杂志评选为2017年亚太区大数据企业25强。

　　在融资方面，百分点已完成D轮融资，累计融资额10亿元人民币，创企业级大数据领域融资最高记录。2017年12月29日，百分点还宣布，全资并购在线调研公司极速洞察。

　　与大部分大数据创业公司业务都在国内不同，百分点还在积极开拓海外市场，其产品在非洲、拉美以及更多国家和地区都有落地。

　　明略数据

▲CEO：吴明辉

　　明略数据成立于2014年，总部位于北京，是行业大数据和行业人工智能的解决方案提供商，技术能力较强，无论是大数据还是人工智能，都有自己的核心产品，并由这些产品构成自己的解决方案。

　　2017年上半年，明略数据发布了行业人工智能大脑“明智系统”，知识图谱数据库“蜂巢”和智能决策支持问答系统“小明”。通过以上产品，用户可以较为容易的构建特定行业领域的知识图谱，并实现人机交互，从而提高企业决策的精度、速度、敏捷度，降低知识劳动力成本。

　　明略数据核心业务有三个板块：公安、金融、工业。虽然不多，但每一个行业做得都很深， 2017年，明略数据获“德勤—华兴中国明日之星”，其公安情报大数据系统还入选数博会“十佳大数据案例”等。

　　在融资方面，据了解，明略数据2017年已经完成C轮融资，但并未对外发布，具体金额不详。

　　天眼查

▲CEO：柳超

　　天眼查成立于2014年，是一个以公开数据为切入点，以关系为核心的大数据产品平台。其使命是“通过技术让每个人公平地看清这个世界”。

　　目前，天眼查收录了全国超1.4亿家市场主体，80多种数据维度信息。不仅可以可视化呈现复杂的商业关系，还能深度挖掘和分析相关数据，预警风险等。其核心功能为“查公司”、“查老板”、“查关系”。

　　天眼查产品能广泛服务于政府机构、泛金融、泛法律、泛商务等领域，应用于金融信贷、风险控制、 项目尽调、商业合作、信用评级、精准决策、客户营销等各类场景。

　　融资方面，2017年3月，天眼查完成A轮1.3亿人民币融资，这超过了世界上95%的A轮融资额度，也是商业调查工具行业至今最高额度的投资。

　　神策数据

▲CEO：桑文锋

　　神策数据成立于2015年，总部位于北京，是一家大数据分析服务公司。主打产品神策分析(Sensors Analytics)，是一款用户行为分析产品，主要针对营销渠道效果评估、精细化运营改进、产品功能及用户体验优化、辅助管理层决策等典型业务场景。提供私有化部署和SaaS两种部署方式、实现基础数据采集与建模，并可作为 PaaS 平台支持二次开发。

　　该公司特色是技术团队对众多开源技术平台进行了重写，如对Impala查询引擎等技术的重构，通过数十万的代码的重写实现了真正海量数据秒级查询，这在国内的大数据领域独树一帜。

　　神策分析能有效帮助企业用户节省数据团队与业务团队之间的沟通成本与人力成本，同时使一些不具备设立数据团队的创业公司有了自己的数据资产累积平台，从而提升了企业决策效率。

　　融资方面，2017年，神策数据完成1100万美元B轮融资。

　　PingCAP

▲CEO：刘奇

　　PingCAP 是开源的分布式关系型数据库提供商，核心产品 TiDB 是一款定位于在线事务处理/在线分析处理的融合型数据库产品，该产品从根本上解决了传统单机关系型数据库的水平扩展问题。

　　TiDB 模型参考了 Google 最新的全球分布式数据库 Spanner/F1，具备一键水平伸缩，强一致性的多副本数据安全，分布式事务，实时 OLAP 等特性，同时兼容 MySQL 协议和生态，迁移便捷，运维成本低。

　　据了解，目前准生产测试用户约 500 余家，其中摩拜单车、同程旅游、360 金融、游族网络，去哪儿网等数十家不同行业的领先企业已经应用在实际生产环境，涉及互联网、游戏、金融、政府、电信、制造业等多个领域，帮助企业解决了海量数据存储、超大规模并发访问及交易问题。

　　PingCAP 总部位于北京，成立于 2015 年。融资方面，2017 年，PingCAP 完成了 1500 万美元的 B 轮融资;2017年，PingCAP还完成与腾讯云、UCloud 等大型公有云平台深度集成。

　　爱可生

▲CEO：李恒　　

　　爱可生成立于2003年，总部位于上海，定位于开源数据库整体解决方案和行业数据应用。相关数据技术已服务于中国银行、招商银行、中国人保、航天科技、金风科技、中国移动等众多金融、智能制造、电力、电信等行业大型企业。

　　爱可生的云树产品系列具备自主研发的分布式技术和私有云数据库(RDS)核心技术， 并入围了央采2017年度软件招标名录。 产品满足了金融行业对开源数据库高可用、扩展性、容灾的严苛需求以及金融体系运维体系规范要求。产品已在线上系统中支撑了众多金融等行业的核心交易系统，并支持了数千个开源数据库实例的大体量运维管理。

　　行业数据应用方面，爱可生基于对智能制造、电力行业等工业互联网场景需求理解，融合结构化和非结构化的数据处理技术，帮助用户建立统一数据管理和服务平台，在多场景下的基于数据的决策或预测模型已形成可落地的解决方案。

　　融资方面，爱可生是新三板创新层企业，2017年完成了B轮融资，融资金额5065万元，投资方为达晨创投、毅达资本以及创合汇。

　　2017年，爱可生在“融资中国资本年会”上荣获 “年度最具投资价值新三板公司”。

　　瀚思科技

▲CEO：高瀚昭

　　瀚思科技成立于2014年，总部位于北京，是一家大数据安全公司，拥有整套自主研发的基于大数据的信息安全产品，通过以HanSight Enterprise产品为核心的各个产品相互配合、补充，形成完整的信息分析的平台，来满足用户信息安全需要。

　　基于大数据的安全分析， 机器学习的用户行为分析，深度学习的未知病毒木马检测引擎DeepSense等技术，瀚思科技能大量缩减企业威胁的发现和处置时间，并通过自动化分析处置流程提高威胁分析处理效率，帮助企业降低安全风险。

　　融资方面，2017年 ，瀚思科技获得国科嘉和、IDG领投资的人民币1亿元B轮融资。

　　2017年，瀚思科技入围央采2017年度软件招标名单，并连续三季度入选Cybersecurity Ventures2017网络安全全球500强，在入围的中国安全企业中排名第三，同期入围《安全牛》发布的2017中国网络安全企业50强，位列第38位。

　　SequoiaDB巨杉数据库

▲CEO：王涛　　

　　巨杉数据库成立于2011年，总部在广州，是分布式数据库提供商。主要产品有两个：企业级分布式数据库SequoiaDB巨杉数据库，以及分布式企业内容管理软件SequoiaCM。

　　其核心数据库产品目前实现了分布式OLTP，分布式对象存储以及分布式NoSQL实现全类型数据的覆盖。技术上具备分布式架构、多模数据管理(Multimodel)、标准化数据访问、数据安全双活容灾、与混合负载HTAP等几个重要的技术特性。

　　巨杉一大特点是坚持自主研发， 其产品在稳定性和企业级支持服务、开发应用友好度、性价比和高可用安全等方面的口碑不错。目前其产品不仅在超过20家银行用户上运行。还拥有近百家的企业用户。

　　2017年，巨杉数据库入选Gartner数据库报告，这是中国数据库产品的首次入选，一同入选的还有南大通用和阿里云。

　　据了解，目前，巨杉数据库除了国内市场外还在积极布局海外市场。

　　热云数据

▲CEO：白冬立　　

　　热云数据成立于2013年11月，总部在北京，是一家定位移动互联网领域的第三方大数据服务商。通过精准的人群定位、全面的用户画像及实时的广告效果监测来帮助广告主优化广告投放策略、投放质量、从而节约广告投放成本，提高运营效率。

　　自主开发了游戏运营支撑平台、防作弊监测技术、移动广告效果监测平台、用户流失预测模型、移动DMP、移动大数据标签系统、渠道数据分析系统等技术产品。

　　热云数据在数据分析技术方面较为领先，独创的防作弊技术、防刷量和去重等机制，能帮助移动互联网企业在投放过程发现作弊和刷量等点击数据，真实反馈用户的真实行为，减少投放浪费，高效获取真实的用户。

　　在融资方面，2017年5月热云数据完成B轮1亿元人民币融资。2017年，热云数据还牵头成立了“中国诚信移动广告联盟”-CMAA。

  数据科学家

大数据和分析正在改变我们的工作方式。许多人力资源经理甚至减少了岗位职责和职位描述的任务清单的审查和修订过程，以反映数据分析扮演了积极的角色。

        在职人员应当采取措施，以提高自己的技能，分析，随着越来越多的员工将有望在这方面的工作。对于个人寻求一份更好的工作，一个分析工作经历可以添加到您的简历中。

大数据和分析的繁荣也导致了新的就业机会。

        数据科学家都很难找到 ; 此外，许多企业不能承担聘请之一。其结果是谁没有在数据科学或工程的正式学位，但谁需要在开发复杂的算法和数据，可以产生突破查询的衣钵了“公民”数据科学家，一个从组织解析才华横溢的诞生该公司的信息。

        在2015年4月，Gartner的研究分析师亚历山大·林登说明公民的数据科学家作为“人在业务方面可能有一些数据的技巧，可能来自数学，甚至社会科学学位，并把他们的工作探索和分析数据。” 肖恩·罗杰斯，首席研究官戴尔STATISTICA，补充说，“我认为2016年可能是公民的数据科学家的一年，因为用户在整个企业希望有一个更加民主的方式，以大数据和分析。不是每家公司都能买得起的数据科学家，这是一个很大的原因，公民科学家的数据将成为数据生态系统的一个重要组成部分，它的发展。“

物联网专家

         在那里机正在使用可能很快就这一涉及来自传感器在这些机器收获信息，然后移动所述基于传感器的输入到软件和系统的角色是跑步机企业的“边缘”的制造工程师等机器操作人员和技术，协调基于机器的操作和切换，以及机器运行状况检查。

        其他物联网的角色将包括参与和编程先进的机器人，甚至固定的基于现场的感应器，在远程位置上的环境样品报告。物联网将改变基于现场的技术人员和工程工作超出反馈到现场和远程，集中式系统的设备维护和运行到数据采集和基于软件的分析当前的边界。

数据卫生员

         想想为您的电子牙刷第二它做了不错的工作，但总有那些你必须照顾好自己去难以到达的地区。大数据是没有什么不同。有工具，用于大数据清洗，整理，擦洗，重复数据删除等，但要真正得到的数据业务精密组织希望的水平，随着业务的第一手知识型员工必须用手细化数据。

辅助专职人员分析

       分析机像IBM沃森已经与医疗诊断和法律研究协助。在法律，医学等领域，这些分析研究产生新的工作形式的辅助人员（例如，医师助理，律师助理等）的企业将最有可能执行。

教师机

        作为分析的机器像IBM沃森在组织中发挥更大的作用，他们将不得不继续“教”，使他们可以做他们的工作做得更好。在许多情况下，机器学习可以由机器来完成，但在某些情况下，这将学习已经被新一代的业务分析师和企业内部的主题专家队伍扑杀“老师”的指导。

　　据教育部数据显示，目前，全国已有35所高等院校开通了大数据专业。也就是说，高考报志愿可直接报大数据专业的学校了。

　　2017年大数据专业就业前景

　　据数联寻英发布《大数据人才报告》显示,目前全国的大数据人才仅46万,未来3-5年内大数据人才的缺口将高达150万。

　　据职业社交平台LinkedIn发布的《2016年中国互联网最热职位人才报告》显示，研发工程师、产品经理、人力资源、市场营销、运营和数据分析是当下中国互联网行业需求最旺盛的六类人才职位。其中研发工程师需求量最大，而数据分析人才最为稀缺。领英报告表明，数据分析人才的供给指数最低，仅为0.05，属于高度稀缺。数据分析人才跳槽速度也最快，平均跳槽速度为19.8个月。

　　根据中国商业联合会数据分析专业委员会统计，未来中国基础性数据分析人才缺口将达到1400万，而在BAT企业招聘的职位里，60%以上都在招大数据人才。

　　大数据主要的三大就业方向：大数据系统研发类人才、大数据应用开发类人才和大数据分析类人才。

　　在此三大方向中，各自的基础岗位一般为大数据系统研发工程师、大数据应用开发工程师和数据分析师。

　　北京数据分析平均工资：10630/月，取自15526份样本，较2016年，增长9.4%。

　　数据分析师岗位职责

　　工作职责:

　　1.根据公司产品和业务需求，利用数据挖掘等工具对多种数据源进行诊断分析，建设征信分析模型并优化，为公司征信运营决策、产品设计等方面提供数据支持；

　　2.负责项目的需求调研、数据分析、商业分析和数据挖掘模型等，通过对运行数据进行分析挖掘背后隐含的规律及对未来的预测；

　　3.参与数据挖掘模型的构建、维护、部署和评估；

　　4.整理编写商业数据分析报告，及时发现和分析其中变化和问题，为业务发展提供决策支持；

　　5.独立完成项目需求管理、方案设计、实施管理和项目成果质量的把控；

　　6.参与编写项目相关文档。

　　北京大数据开发平均工资：30230/月。

　　大数据开发工程师/专家岗位指责（引自滴滴出行）：

　　职位描述：

　　1、构建分布式大数据服务平台，参与和构建公司包括海量数据存储、离线/实时计算、实时查询，大数据系统运维等系统；

　　2、服务各种业务需求，服务日益增长的业务和数据量；

　　3、深入源码内核改进优化开源项目，解决各种hadoop、spark、hbase疑难问题，参与到开源社区建设和代码贡献；

　　北京hadoop平均工资：20130/月，取自 1734份样本。

　　Hadoop开发工程师岗位职责（引自新浪网）：

　　职位描述：

　　1.参与优化改进新浪集团数据平台基础服务，参与日传输量超过百TB的数据传输体系优化，日处理量超过PB级别的数据处理平台改进，多维实时查询分析系统的构建优化；

　　2.分布式机器学习算法在数据平台的构建与优化（包括常见的LR、GBDT、FM、LDA、Word2Vec及DNN等）；

　　3.深入源码改进各种开源大数据项目（包括Hadoop、Spark、Kafka、HBase等）。

　　北京数据挖掘平均工资：21740/月，取自 3449份样本，较2016年，增长 20.3%；

　　北京算法工程师平均工资：22640/月，取自 10176份样本。

　　算法工程师招聘要求（引自美团点评数据平台部）：

　　职位描述：

　　互联网公司背景优先

　　A、广告算法

　　岗位职责：

　　1.负责点击率预估等主要广告算法的技术选型；

　　2.负责核心算法的开发；

　　3.负责广告大数据处理流程的建设及相关工具的研发；

　　4.负责广告技术研究项目的推进与管理；

　　B、推荐算法

　　职位描述：

　　1.参与各个产品线的个性化推荐系统的研发；

　　2.分析用户行为数据，并设计合理的推荐算法模型及策略，并优化推荐排序；

　　3.通过对用户行为数据的挖掘，对用户进行建模，精准刻画用户各种属性；

　　C、算法工程师

　　岗位职责:

　　1、开发和优化用户行为数据挖掘，文本分类和语义理解，社交网络分析，网页搜索，推荐系统等领域的特定算法

　　2、能够很快学习和利用state-of-the-art的算法解决实际产品问题，提升产品用户体验

　　最后一个问题，哪些公司需求大数据人才？

　　答：所有的公司。大到世界500强，BAT这样的公司，小到创业公司，他们都需求数据人才。

　　马云爸爸说“我们已从IT时代进入了DT时代，未来我们的汽车、电灯泡、电视机、电冰箱等将全部装上操作系统，并进行数据集成，数据将会让机器更“聪明”。DT时代，数据将成为主要的能源，离开了数据，任何组织的创新都基本上是空壳。”

大数据时代的到来，越来越多的人选择学习大数据，那关于大数据分析的六大基本方面是哪些，一起来了解一下

可视化分析

不管是对数据分析专家还是普通用户

数据可视化是数据分析工具最基本的要求

可视化可以直观的展示数据

让数据自己说话，让观众听到结果

数据挖掘算法

可视化是给人看的，数据挖掘就是给机器看的

集群、分割、孤立点分析还有其他的算法

让我们深入数据内部，挖掘价值

这些算法不仅要处理大数据的量

也要处理大数据的速度

预测性分析能力

数据挖掘可以让分析员更好的理解数据

而预测性分析可以让分析员根据可视化分析和数据挖掘的结果

做出一些预测性的判断

语义引擎

我们知道由于非结构化数据的多样性带来了数据分析的新的挑战，我们需要一系列的工具去解析，提取，分析数据。语义引擎需要被设计成能够从"文档"中智能提取信息

数据质量和数据管理

数据质量和数据管理是一些管理方面的最佳实践

通过标准化的流程和工具对数据进行处理

可以保证一个预先定义好的高质量的分析结果

数据存储，数据仓库

数据仓库是为了便于多维分析和多角度展示数据按特定模式进行存储所建立起来的关系型数据库。在商业智能系统的设计中，数据仓库的构建是关键，是商业智能系统的基础，承担对业务系统数据整合的任务，为商业智能系统提供数据抽取、转换和加载(ETL)，并按主题对数据进行查询和访问，为联机数据分析和数据挖掘提供数据平台

成都加米谷大数据科技有限公司

个人培训 丨 企业内训

成都市高新区天府二街蜀都中心1栋705

　　随着互联网和IT技术的推进，大数据的应用逐渐渗透到各行各业。尤其是数据体量大的互联网、金融、银行、制造行业。大数据正逐渐改变企业的运营模式，市场导向，进而惠及人们的生活。

　　“大数据”这一概念最早在国外被提及。之后国内外兴起了一系列大数据技术，包括大数据硬件类、大数据分析类、大数据数据处理类等等，也因此诞生了一批大数据厂商。

　　其中最为热门的是大数据分析技术，可以直接应用到企业生产经营，来带直接有效的帮助。

　　本文将对国内大数据分析厂商做一盘点。（排名不分先后）

　　分析解决方案类

　　平台解决方案厂商除去IBM、SAP、Oracle、微软、惠普国外代表厂商，在国内有星环科技、帆软软件、用友、永洪等等。

　　星环科技

　　星环信息科技主要从事大数据时代核心平台数据库软件的研发与服务，被Gartner列为国际主流Hadoop发行版厂商。其产品Transwarp Data Hub提供高速SQL引擎Transwarp Inceptor, NoSQL搜索引擎Transwarp Hyperbase、流处理引擎Transwarp Stream和数据挖掘组件Transwarp Discover。

　　帆软软件

　　帆软软件由报表软件FineReport起家，目前已成为报表领域的权威者，拥有10年企业数据分析的行业经验。后发布的商业智能自助式BI工具FineBI，提供包括Hadoop、分布式数据库、多维数据库的大数据可视化分析；提供PC端、移动端、大屏的可视化方案，广泛应用于银行、电商、地产、医药、制造、电信、制造、化工等行业，拥有成熟的行业化解决方案。

　　数据可视化类

　　数字冰雹

　　数字冰雹主营大数据可视化业务，提供集设计、程序开发、硬件集成为一体的解决方案，广泛应用于航天战场、智慧城市、网络安全、企业管理、工业监控等领域。

　　海云数据

　　海云数据的产品——图易能够集成用户内部系统大量结构化、非结构化数据，在真实的数据源上，将行业大数据进行多维度的可视分析。目前主要应用于公安、航空、快消、制造、金融、医疗、信息安全等领域。

　　星图数据

　　星图数据是互联网大数据服务公司，涉及线上零售、线上娱乐、线上教育等领域。基于分布式大数据获取与存储系统进行大数据处理及分析，具有自有的大数据分析体系和云计算处理技术。

　　用户行为/精准营销分析类

　　大数据技术使得用户在互联网的行为，得到精准定位，从而细化营销方案、快速迭代产品。这方面的厂商有GrowingIO、神策数据等。

　　GrowingIO

　　GrowingIO是基于互联网的用户行为数据分析产品，具有无埋点的数据采集技术，可以通过网页或APP的浏览轨迹、点击记录和鼠标滑动轨迹等行为数据，进行实时的用户行为数据分析，用于优化产品体验，实现精益化运营。

　　神策数据

　　与GrowingIO类似，也是基于用户网络行为，采集数据进行分析。技术上提供开放的查询 API 和完整的 SQL 接口，同时与 MapReduce 和 Spark 等计算引擎无缝融合，随时以最高效的方式来访问干净、规范的数据。

　　分析服务类

　　提供舆情分析的有百度统计、品友互动、Talking data、友盟、中科数据等等。

　　百度统计

　　百度统计是专业的网站流量分析工具，和GA类似，提供免费的流量分析、来源分析、网站分析等多种统计分析服务，能够告诉用户访客是如何找到并浏览用户的网站，在网站上做了些什么，以此来改善访客在用户的网站上的使用体验。

　　TalkingData

　　TalkingData是独立的第三方移动数据服务品牌。其产品及服务涵盖移动应用数据统计、移动广告监测、移动游戏运营、公共数据查询、综合数据管理等多款极具针对性的产品及服务。在银行、互联网、电商行业有广泛的数据服务应用。

　　友盟+

　　第三方全域大数据服务提供商，通过全面覆盖PC、手机、传感器、无线路由器等多种设备数据，打造全域数据平台。提供全业务链数据应用解决方案，包括基础统计、运营分析、数据决策和数据业务等，帮助企业实现数据化运营和管理。

国内大数据服务企业主力阵营：

1、TakingData

TakingData以SmartDP为核心的数据智能应用生态为企业赋能，帮助企业逐步实现以数据为驱动力的数字化转型。

2、友盟+

友盟+基于全域数据、数据技术和商业场景，构建以7亿消费者为核心，覆盖数据化运营、数据营销、新零售数据服务、金融及手机解决方案的数据智能服务体系，驱动业务持续增长。

3、精准科技

精准科技是一家以用户画像为特色的大数据技术公司，致力于推动大数据在营销场景中的使用，业务主要涵盖汽车、金融、房产三大领域。

4、浪潮

浪潮互联网大数据采集中心已经采集超过2PB数据，并已建立5大类数据分类处理算法。近日成功发布海量存储系统的最新代表产品AS130000。

5、腾讯

腾讯拥有用户关系数据和基于此产生的社交数据，腾讯的思路主要是用数据改进产品，注重QZONE、微信、电商等产品的后端数据打通。

6、 探码科技

探码科技自主研发的DYSON只能分析系统，可以完整的实现大数据的采集、分析、处理。一直做的国外项目美国最大的律师平台、医生平台和酒店、机票预订平台的数据采集、分析、处理。将在国内推出一系列面向政务、企业的创新型大数据研究项目与合作，为各大企业提供高端信息技术咨询服务。

7、中兴通讯

中兴通讯推出的“聚焦ICT服务的高效数据中心整体服务解决方案”，可帮助运营商有效解决大数据时代建设IDC面临的大部分问题，提升运营商ICT融合服务能力。

8、神州融

神州融整合了国内权威的第三方征信机构和电商平台等信贷应用场景的征信大数据，通过覆盖信贷全生命周期管理的顶尖风控技术，为微金融机构提供大数据驱动的信贷风控决策服务。

9、中科曙光

中科曙光XData大数据一体机可实现任务自动分解，并在多数据模块上并行执行，全面提高了复杂查询条件下的效率。

10、华胜天成

华胜天成自主研发的大数据产品“i维数据”，颇具创新，近期又与IBM达成战略合作关系，涵盖Linux on Power市场、智慧城市、存储业务、管理服务、咨询与应用管理服务。

11、神州数码

“神州数码”启动了“智慧城市”战略布局，先后推出了市民融合服务平台、自助终端服务平台等产品，并在佛山、武汉等“智慧城市”建设中实践运用。

12、用友

用友在商业分析、大数据处理等领域进行研发，先后推出了用友BQ、用友AE等产品。

13、东软

东软大数据战略以医疗行业为突破口，凭借在社保、医疗行业积累的资源，搭建了东软熙康这一智慧医疗平台。

14、金蝶

金蝶KBI与金蝶ERP无缝集成，实现BI数据采集——集成——分析决策支持的一体化应用。

15、宝德

宝德大数据云备份，是一个专为大数据而设的云备份方案，支持实体机及虚拟机备份，而且具有无限扩充的可能，并且完全自动。

16、启明星辰

大数据时代的IP治理和审计，启明星辰提供了终端审计、终端数据防泄露、日志审计，通过综合审计平台来帮助用户解决IP治理需求等解决方案。

17、拓尔思

拓尔思通过收购天行网安，可以拓展在公安行业的应用，目前正着力开拓行业应用市场，挖掘各个产业链中的大数据价值。

18、荣之联

零售、证券、生物、政府等都是荣之联大数据业务的主要目标行业，已为零售业提供了大数据分析的解决方案，解决了库存问题。

19、中科金财

中科金财作为国内领先的高端IT综合服务商，主要服务于金融业的大数据。

20、美亚柏科

美亚柏科专注于公安市场，其业务包括电子数据取证、电子数据鉴定、网络舆情分析、数字维权、公证云、搜索云以及取证云服务。

21、赛思信安

国内存储技术与服务供应商赛思信安推出了自主研发的大数据管理系统，适用范围包括互联网、公众服务、商业智能、金融、医疗卫生、能源等多个行业。

22、华宇软件

华宇软件作为大数据、食品安全、法务软件等相关热门行业软件，同时也是公安领域大数据的上市公司。

23、天玑科技

天玑科技的数据中心运维管理服务，为大数据的分析能力提供了强大的后台支撑和保障。

24、东方国信

东方国信主营业务为企业商业智能软件及系统解决方案，收购北科亿力和科瑞明，有效拓展了工业和金融大数据领域。

25、华三

华三全融合虚拟化网络技术能够极大简化网络结构，减轻网络管理和维护量，为企业数据中心大规模建设提供最强有力的技术支持。

26、海康威视

海康威视基于英特尔Hadoop发行版，并融合可以灵活按需调配IT资源对应用和服务进行支持的开放架构云计算技术，打造出了视频智能云计算方案。

27、高德

高德与阿里将在地图搜索、产品商业化、数据共享、云计算等领域展开合作，特别是在数据共享方面，高德和阿里巴巴将共建一个大数据服务体系，

28、四维图新

作为提供导航地图、地理信息系统软件建设的内容提供商，现在已尝试使用大数据为政府部门提供决策。

29、海捷科技

专注于商业智能领域(BI)、数据仓库领域、数据库领域的专业咨询、项目实施、软件开发、系统集成等方面，为金融、电信、快速消费品等行业提供相应方案。

30、北京信合运通

信合运通专注于为运营商和行业客户提供基于大数据的深度分析和挖掘技术、渠道支撑服务及行业解决方案。

31、海云数据

海云数据专注于从事数据可视化，可为客户提供数据可视化的创意设计、制作和软硬件集成系统服务。

32、九次方金融数据

九次方金融数据在国内唯一以企业大数据分析的角度对有投资价值和并购价值的企业进行价值判断，持续跟踪企业动态变化的金融大数据公司。

33、永洪科技

永洪BI通过完全自主知识产权的数据集市产品(Z-Data Mart)支持大数据，Z-Data Mart汇聚了数十项自有专利，涵盖了分布式存储和计算、分布式传输和实时通信等关键领域。

34、集奥聚合

集奥聚合作为大数据服务提供商，其DataQuate解决方案主要用于解决运营商大数据的接入、挖掘及应用，为运营商大数据的价值转化提供端到端服务。

35、华院数云

华院数云以数据挖掘为核心、以商业智能和精准营销为主线、以SAAS云平台为主要服务模式，目前专注于电商领域，为客户提供行业领先的数据分析和精准营销平台服务。

36、杭州诚道科技

杭州诚道科技致力于为浙江、全国公安交通管理行业提供一流的信息化服务、产品和方案解决能力，其借助英特尔Hadoop分发版，已解决了大数据的采集和处理问题。

37、勒卡斯

勒卡斯是致力于为客户提供全方位直复营销解决方案和服务的大数据公司，主要有潜客沟通、会员管理、CRM软件定制及客户市场调研四大业务。

38、北京阿尔泰科技

北京阿尔泰科技专业数据采集系统的制造商。

39、智拓通达

智拓通达主要做中国主流社交平台的“大数据”分析，通过整合各大社交平台的用户数据、行为数据和 UGC 内容，为企业和个人用户提供定制化服务。

40、国双科技

国双科技数据中心拥有基于OLAP技术的强大交互式数据挖掘平台，可提供不同深度的分析报告，满足不同视角的数据挖掘和分析需求。

41、时云医疗科技

时云医疗科技今日发布了医疗领域的大数据“未病”预警云服务“康诺云”，有针对个人健康管理而设计的云律血压节律仪、云悦体质分析仪和云动智能健康监测腕表3款智能硬件。

42、百分点

百分点主要为电子商务企业提供站内流量转化和商业智能分析的整体优化解决方案，旗下有推荐引擎技术平台以及跨网站消费偏好平台。产品主要有BRE和BAE。

43、精硕科技

精硕科技是国内少有的第三方数字营销监测和调研机构，专注于为广告主提供全流程的网络广告效果监测、分析评估、媒介优化咨询和技术解决方案等服务。

44、神策数据

神策数据立足大数据及用户行为分析的技术与实践前沿，业务现已覆盖以互联网、金融、零售快消、高科技、制造等为代表的十多个主要行业、并可支持企业多个职能部门。

45、百度

百度的优势体现在海量的数据、沉淀十多年的用户行为数据、自然语言处理能力和深度学习领域的前沿研究。近来百度正式发布大数据引擎，将在政府、医疗、金融、零售、教育等传统领域率先开展对外合作。

46、阿里巴巴

阿里巴巴拥有交易数据和信用数据,更多是在搭建数据的流通、收集和分享的底层架构。

47、华为华为云服务

整合了高性能的计算和存储能力，为大数据的挖掘和分析提供专业稳定的IT基础设施平台，近来华为大数据存储实现了统一管理40PB文件系统。

48、同盾科技

同盾科技将人工智能与业务场景深度结合，为银行、保险、汽车金融、非银行信贷、基金理财、三方支付、航旅、电商、O2O、游戏、社交平台等十余个行业客户提供高效智能的风控、反欺诈及营销分析服务。

49、国双科技

国双科技是中国的企业级大数据和人工智能解决方案提供商。

50、智慧足迹

智慧足迹是由中国联通和西班牙电信合资成立的专业大数据公司，依托中国联通的数据能力，提供位置信息洞察及相关大数据业务。