大数据分析技术的广泛应用

CDA数据分析师原创作品

在这个信息数字化的时代，“大数据”几乎是每一个与数字打交道、与信息接轨的时代发展参与者都在谈论的一个词语，这不仅仅是时代发展的一个趋势，也是技术创新的一个热潮。可以说，大数据分析技术对公司的发展、行业的未来走向不单单发挥了智能化的决策指导和准确预测的作用，还可以让企业在全行业竞争激烈的境地中脱颖而出。因此对大数据分析的战略布局让越来越多的企业对数据分析有了全新的认识和前所未有的重视。

在当前各个领域的行业中，大数据分析技术的应用已十分广泛，俗话说“有数据的地方就有数据分析”。大数据真能改变并提升企业的运作方式吗？答案是肯定的。随着企业对大数据分析技术应用的利愈发密切和广泛，我们每天都会看到大数据反馈给我们新的客观科学的信息，协助人们从中真正的获得自己想要的东西。此外，大数据分析技术的应用早已广泛深入我们生活的方方面面，涵盖了医疗、交通、金融、教育、体育、零售等各行各业。

从阿尔法围棋（ALphaGo）第一次击败人类职业围棋选手，成为第一个战胜围棋世界冠军的人工智能机器人开始，AI人工智能就开始引起人们的深思和发问。人工智能是让机器能够像人类一样完成智能任务的技术。自然语言处理是建立能够理解语言的系统，人工智能的一个分支，除此之外还有机器学习、神经网络、深度学习。自然语言处理是应用比较广泛的一个分支，我们可以进一步了解。自然语言处理（NLP：Natural Language Processing）是指机器理解并解释人类写作、说话方式的能力。NLP的目标是让计算机/机器能够像人类一样智能的理解语言，最终目标是弥补人类交流（自然语言）和计算机理解（机器语言）之间的差异。

如今所有数据中的80%都可被用到，大数据来自于大公司、企业所存储的信息。例如，志愿信息、公司采购、销售记录、经济业务以及公司、社交媒体的历史纪录等。尽管人类使用的语言对计算机而言是模糊的、非结构化数据的模式，但有了NLP的帮助，我们可以解析这些大型的非结构化数据中的模式，从而更好地理解里面包含的信息。NLP可使用大数据解决商业中的难题，比如零售、医疗、进入领域中的业务。有一个已经被很多人接触过的人工智能应用——聊天机器人，就是通过聊天app、聊天窗口或语音唤醒app进行交流的计算机程序，例如，苹果手机的siri，也有被用来解决客户问题的智能数字化助手，成本低、高效且持续工作，此功能淘宝店铺有很多运用。

和很多行业不同，医生是一个需要经验的行业，需要掌握无数先辈积累下来的医学知识并且在临床工作中不断验证理论积累经验，而基于深度学习的AI从某些角度和医生一样，都需要不断的训练，在实践中不断完善算法模型。医疗领域的人工智能主要有两个方向，一个是基于自然语言处理，根据病历和症状诊断疾病；一个是基于计算机视觉，通过识别医学影像诊断疾病。

以肺癌识别为例，AI可以通过两种方式诊断肺癌，其中一种是基于自然语言处理，代表企业是IBM的Watson，在持续4年的时间内Warson学习了200本肿瘤领域的教科书，290种医学期刊和超过1500万份的文献后，Watson开始被临床应用，将病人的病历信息和症状输入系统，可以识别肺癌。如今Watson在肺癌、乳腺癌、胃癌等癌症领域已经可以为医生提供诊断建议。

身处于大数据时代，不论是哪个行业，都大大小小受到大数据的影响，并且这种影响还会在持续扩大加深，大数据分析技术的的应用会让人们更加得心应手地得到自己想要的信息。而且，我们可以肯定的一点就是，无论大数据分析技术如何发展，还是无法离开以人为中心所产生的各种用户行为数据，这些核心数据的相关性再加上可感知的设备的智能数据采集，它就构成了一个完整的大数据生态环境，我们即是大数据的创造者，同时也融为了大数据的一份子，共同生活在这个数字化越来越明晰的轨道里，创造着财富，也创造着更全新的自己！