数据剖析与挖掘VS数据整理

时间：2013-07-18
泉源：

　　尊龙凯时（泉源：支点网　作者：不详）

　　谈到数据剖析与挖掘，许多人都会提到啤酒与尿布的经典案例，只管这个案例可以说已经很是陈腐了，你怎么看待这一点？

    刘德寰：一个尿布与啤酒，尚有一个现代汽车，是数据剖析领域的两个很是经典案例。可是这两个案例都爆发在20年前，数据挖掘已经谈了五十年，但却再没有第三个、第四个经典案例泛起。这是由于现有的数据挖掘手艺不可给商业决议者带来真正的洞察。着实，这更应该叫做数据整理。数据整理是什么？就如瞎子摸象，数据整理并没有摸清晰事物背后真正的纪律，只是基于局部数据、某种行为监测整理出来的一个模子，这个模子甚至不可回覆这小我私家想干什么，喜欢什么，这小我私家是怎样的人这些问题。

    以是，要做数据剖析与挖掘，首先就要把纪律弄明确，把剖析要领弄明确。

    CIOI：大数据时代的数据挖掘应该怎么做，才华得出隐藏在无数假纪律后面的真实结论？

    刘德寰：上面已经提到，现在所说的大数据主要指的是互联网领域的大数据�；チ没У幕咎卣鳌⑾男形⑸贤形⑶榔谩⑿形不丁⑸墓旒Ｓ胛恢玫�，都反应用户的基本行为纪律。系统完整是所有剖析性事情的第一步，完整的框架甚至胜过高深的模子。

    历程——族群——纪律——验证，这是我以为较量好的数据剖析与挖掘的框架。先要走历程，看整个事态生长的历程，找寻这个历程当中各个族群的纪律，然后把这种纪律，用抽样的方法找完之后，安排到大数据当中去一直地重新弥合。亚马逊从最先到现在一直是这样的思绪，这也是亚马逊的广告推荐能够做到精准的缘故原由，缘故原由就在于其不是就大数据谈大数据，而是就人来谈大数据。

    这也是数据挖掘的基本逻辑。数据挖掘的商艺、结论，一定要极其简朴，可是挖掘的历程一定要重大重大再重大。若是反过来，数据挖掘历程很简朴，一抓取，一排列，得出的结论五花八门，这是大数据时代面临的重大危害。

    CIOI：要做好数据挖掘，还需要关注哪些呢？

    刘德寰：举个例子说明。有一个女性，突然一改以往的习惯，最先购置无香型乳液，同时购置某种维他命，微量元素中的锌和镁。这三种行为改变团结在一起说明，这个女性有身了。在这个历程中，我们有最基本的人的行为跟踪以及最基本的社会公共卫生知识的相识，这时间商家最先对其举行剖析和营销，盘算她的预产期，然后推荐种种婴儿产品广告。可是，商家一定要明确，若是这小我私家知道商家知道她有身了，她可能会很是的焦虑，由于她很可能不想被人发明她有身了。这时间，若是商家将婴儿床的广告放在稻草机的广告边上，然后一起给她，她的焦虑就会大幅降低。

    这样才华真正做好数据挖掘。首先，生涯变，行为才会变，要将关注点放在转变上。另外，很是主要的一点是，要关注人性，相识人性，要充分体现出对人的眷注。

    CIOI：这也就是你一直说纯IT职员无法做好数据挖掘的缘故原由吧？

    刘德寰：对，要做好数据挖掘，必需要有市场研究职员、IT职员以及营销职员通力合作。数据建模首先要明确消耗者，然后才华建设切合中国人的数据模子，要做到这些IT职员需要市场研究职员及营销职员的资助。

    CIOI：关于CIO们真正熟悉大数据，你有什么建议？

    刘德寰：现实互联网领域被几本关于大数据的书籍所累，看法十分杂乱，现实上，人类积累的数据履历是一切剖析的基础，包括所谓的海量数据，这几本书的要领论横空出生，同时又没有落地，没有现实操作履历积累，误导性太强。要在熟悉的历程中，多向自己和他人提出问题，在头脑碰撞与交流中增进思索，实现更深条理的认知。