-
数据清洗的经验与教训 Data Cleaning
所属栏目:[大数据] 日期:2018-04-04 热度:118
小学的时候我统计过同学里有多少要订课间牛奶:每人分别需要什么口味和什么大小,应收多少钱。最后这份按照座位排序的表格要和一张学号表格按照同学姓名对应起来,并计算每种口味订购数量和每人应收款。过程中我遇到了很多困难,例如有同学订了多种口味,[详细]
-
被大数据遗忘的基础奠基-Log
所属栏目:[大数据] 日期:2018-04-04 热度:114
在大数据时代,Log是关系数据库对计算机行业的伟大贡献,更是基础技术之一。然而在大家热烈讨论GFS, NoSQL,乃至Paxos, LSM tree等词语的时候,Log这个基础技术以及它对大数据行业的巨大贡献却一直以来都被业界所忽略。除了Kafka作者之一Jay Kreps2013年[详细]
-
如何在多系统和网络拓扑中构建高性能模型?
所属栏目:[大数据] 日期:2018-04-04 热度:153
这个文档和附带的脚本详细介绍了如何构建针对各种系统和网络拓扑的高性能可拓展模型。这个技术在本文档中用了一些低级的 Tensorflow Python 基元。在未来,这些技术将被并入高级 API。 输入管道 性能指南阐述了如何诊断输入管道可能存在的问题及其最佳解决[详细]
-
大数据“喂养”红利下,知识图谱如何走上新道路?
所属栏目:[大数据] 日期:2018-04-04 热度:110
大数据时代的到来,为人工智能的飞速发展带来前所未有的数据红利。在大数据的喂养下,人工智能技术获得了前所未有的长足进步。其进展突出体现在以知识图谱为代表的知识工程以及深度学习为代表的机器学习等相关领域。随着深度学习对于大数据的红利消耗殆尽[详细]
-
服务端开发指南与最佳实战:数据存储技术,MySQL 数据库安全性
所属栏目:[大数据] 日期:2018-04-04 热度:76
数据库的安全性,即保护数据库,防止未经授权或不合法的使用而造成的数据泄漏和更改破坏。因此,保护数据库的安全性的一般方法是设置用户标识和权限控制。 MySQL 权限控制,分为两个步骤。第一步骤,服务器会检查是否允许连接。因为创建用户的时候会加上主[详细]
-
TensorFlow的开源与Hadoop的开源有什么不同?
所属栏目:[大数据] 日期:2018-04-04 热度:158
最近看TensorFlow代码的时候,用Git pull下来最新的master一看,哇好多的更新,然后点击去之前看到一半的cc文件继续看,好多地方都改变了。但是一看Git log,有好多巨大的commit叫什么 Merge commit for internal changes, Merge for github,没有任何的其[详细]
-
最适合Java开发者的大数据工具和框架
所属栏目:[大数据] 日期:2018-04-04 热度:87
当今编程人员面对的最大挑战就是复杂性,硬件越来越复杂,OS越来越复杂,编程语言和API越来越复杂,我们构建的应用也越来越复杂。根据外媒的一项调查报告,以下列出了Java程序员在过去12个月内一直使用的一些工具或框架,或许会对你有意义。 先来看看大数[详细]
-
基于大数据的政府环境决策能力建设
所属栏目:[大数据] 日期:2018-04-03 热度:192
2015年国务院印发《促进大数据发展行动纲要》,首次从国家层面认定数据是国家的基础性战略资源,大数据成为提升政府治理能力的新途径。2016年环保部印发《生态环境大数据建设总体方案》,开启互联网+生态环境战略,推动政府环境治理创新。依托大数据为环境[详细]
-
解析:大数据时代的城市设计模式如何?
所属栏目:[大数据] 日期:2018-04-03 热度:164
智慧城市是城市发展的高级形态,需要经过持续的复合创新发展过程才得以实现。城市设计与科技的结合,不仅仅是解决城市问题,还将有利于城市发展,也将是未来发展趋势。 一般而言,城市的向上发展大致经历资源中心(资源输出)、生产中心(加工)、消费中心[详细]
-
加快大数据与实体经济深度融合
所属栏目:[大数据] 日期:2018-04-02 热度:111
开栏的话:习近平总书记作的题为《决胜全面建成小康社会 夺取新时代中国特色社会主义伟大胜利》的十九大报告,格局宏大,立意高远,内涵丰富,是面向新时代的政治宣言和行动纲领。报告多次提及信息通信行业相关内容,对行业的地位与作用给予了厚望,为行业[详细]
-
大数据产业:特色集聚化发展格局逐步形成
所属栏目:[大数据] 日期:2018-04-02 热度:128
2017年以来,大数据产业政策继续加速出台,政府数据开放共享取得突破,大数据学科建设以及国家工程实验室建设不断深入,创新体系不断完善。 随着大数据相关政策深入实施和不断出台以及大数据产业应用与布局的不断深化,大数据产业发展环境将继续优化,特色[详细]
-
大数据是如何存储和管理的?
所属栏目:[大数据] 日期:2018-04-02 热度:186
如今,人们有一个担忧,那就是只有大企业才能更好地应用大数据。此外,虽然大数据一词似乎也是空洞的营销辞令的有力例证,但它却是任何企业风险的重要组成部分。毕竟,它是业务文档、计划、用户数据和财务信息的积累,是任何业务基础设施的核心组件。 当然[详细]
-
如果有人问你什么是大数据?不妨说说这10个典型的大数据案例
所属栏目:[大数据] 日期:2018-04-02 热度:149
也许这些例子并非来自于你所处的行业,但是你需要考虑如何做到他山之石可以攻玉。 在听Gartner的分析师Doug Laney用55分钟讲述55个大数据应用案例之前,你可能对于大数据是否落地还心存疑虑。Laney的演讲如同莎士比亚的全集一样,不过可能缺乏娱乐性而更具[详细]
-
大数据隐私保护措施有哪些?
所属栏目:[大数据] 日期:2018-04-02 热度:152
每年频发的数据泄露事件总会带来一些教训,其中一条就是,无论何时开始采取数据保护措施永远不会太晚。幸运的是,企业表现出更加关注数据隐私方面的工作,而大数据是他们最关心的领域之一。 Mary Shacklett是Transworld Data公司的总裁,该公司是一家技术[详细]
-
大数据应用不断延伸大数据 完全共享状态仍未达到
所属栏目:[大数据] 日期:2018-04-02 热度:75
数据流通与交易有利于促进数据的融合挖掘,数据的使用必须面对保护的责任与义务,尤其是对个人隐私数据的保护。大数据已经对当下生产生活的各个方面都产生重大影响,但目前中国的数据还没有完全共享。 大数据应用不断延伸完全共享状态仍未达到 日前,2017[详细]
-
大数据、人工智能等技术提升社会治理水平
所属栏目:[大数据] 日期:2018-04-02 热度:68
党的十九大报告提出,提高社会治理社会化、法治化、智能化、专业化水平。借助大数据、互联网、人脸识别等技术,各地在社会治理智能化方面积极探索,从人民群众关心的事情做起,从让人民群众满意的事情做起,不断为人民创造更加美好的生活。 慧眼识低保,社[详细]
-
机器学习和大数据正帮助化学家搜寻药物
所属栏目:[大数据] 日期:2018-04-02 热度:138
2016年,制药公司Sunovion给一群经验丰富的员工布置了一项不同寻常的作业。在位于美国马萨诸塞州马尔伯勒的公司总部,这些药剂师被要求玩一个游戏,以便确定谁能发现针对新药的最好的先导化合物。他们的工作台上是一个由上百种化学结构组成的网格,其中仅[详细]
-
如何才能发挥大数据的价值?
所属栏目:[大数据] 日期:2018-04-02 热度:55
大数据,数据科学,以及分析的发展与演变在今年的Strata数据会议上得到全面展示,其中包含了一个重要的信息:人们需要获取大数据的价值。 正如在一个数字表演节目中,人们选定的数字是83,认为这会难倒魔术师,魔术师在一个44矩阵填写了16个数字,在组合之[详细]
-
大数据可以帮助企业获得资金吗?
所属栏目:[大数据] 日期:2018-04-02 热度:185
企业每天都会考虑其业务和客户之间流动的所有信息。这是大数据,是在正常业务过程中发生的每一次财务和社会互动的总体情况。这种数据还包括信用信息,当前和过去的借贷行为以及企业现金流量的起伏情况。 提供这样一个全面的信用评估,使得一些顶级的另类的[详细]
-
人工智能如何改变CIO的职责
所属栏目:[大数据] 日期:2018-04-01 热度:64
颠覆性技术正在使首席信息官们发挥比以往更为突出的作用。 首席信息官的角色多年来一直在发生变化。人工智能、物联网和快速发展的机器人技术所具有的颠覆性潜力意味着首席信息官应该变得更加高调和具有战略性。大型企业的首席信息官必须准备在组织中发挥更[详细]
-
微软称在人工智能方面取得突破,使其能够在新闻翻译方面做得和人类一样好
所属栏目:[大数据] 日期:2018-04-01 热度:90
美国当地时间3月14日,微软公司的研究人员透露,他们已经开发出了能够一种能够翻译文本的人工智能,它翻译的准确性可以与人类相媲美。 该系统由三个独立的团队构建,旨在将中文新闻文章的句子翻译成英文。它结合了几种新兴的神经网络方法以达到人类的准确[详细]
-
大数据垄断怎么破:打破数据壁垒,实现数据开放
所属栏目:[大数据] 日期:2018-04-01 热度:87
永恒的是变化本身。最新例子是,数据已类似石油和电力,成为世界上关键的战略性基础资源。 两会议程过半,大数据开放成了热门词。这一热点背后,是中国大数据发展处在起步阶段,不少基础性、关键性数据仍被众多部门和机构束之高阁,少数大型互联网垄断企业[详细]
-
腾讯Robotics X实验室筹划成立,AI Lab与自然集团达成战略合作
所属栏目:[大数据] 日期:2018-04-01 热度:157
腾讯副总裁姚星在开场致辞中阐述了腾讯 AI Lab 的发展战略,并宣布了与施普林格自然集团达成长期战略合作伙伴关系。双方将展开一系列合作,共同助力人工智能前沿研究。 姚星指出了目前人工智能发展的三大问题: 1.AI 的落地环境还过于单一,「行业+AI」而[详细]
-
大数据分析:正在进行云驱动的转变
所属栏目:[大数据] 日期:2018-04-01 热度:56
如今,大数据分析市场与几年前相比已经截然不同。而在未来十年,全球各行各业都将发生变革、创新和颠覆。 在日前发布的2017年度市场研究报告中,SiliconAngle Media公司的Wikibon分析团队发现,2017年的全球大数据分析市场规模比前一年增长了24.5%.这比前[详细]
-
大数据时代的三大趋势和三大困境
所属栏目:[大数据] 日期:2018-04-01 热度:191
一家公司的数字化改造应该从清晰的趋势和障碍出发,更好地规划出一条通往其所寻求业务成果的路线。考虑到这一点,以下是我们关注的三大数据趋势,以及在数字时代可能出现在企业和成功之间的三大困境。 三大趋势 1.真实的机器学习 我们坚信,机器学习、人工[详细]