-
大数据治理需要具备哪些能力和关键技术?
所属栏目:[大数据] 日期:2018-04-07 热度:79
在企业数据建设过程中,大数据治理受到越来越多的重视。从企业数据资产管理和提升数据质量,到自服务和智能化的数据应用,大数据治理的内容在不断发展和完善,其落地实施的过程中会遇到各种各样的难题和挑战。本篇文章通过分析大数据治理建设中的沟沟坎坎[详细]
-
人工智能和机器学习如何帮助IT团队解决数据管理问题
所属栏目:[大数据] 日期:2018-04-07 热度:161
掌握和处理大量数据对于IT部门来说是一个挑战。以下是人工智能(AI)和机器学习如何帮助人们分类、组织和汇总大量信息的方法。 根据三星公司的调查,2016年全球互联网流量超过了1ZB,即10亿兆字节。这个数字是巨大的,但这个数据量与全球各企业正在存储的全[详细]
-
你可能还不知道应用关联防护
所属栏目:[大数据] 日期:2018-04-07 热度:192
近年来,作为高效而直接的数据库防御工事,数据库防火墙已被越来越多的用户关注,应用在关键系统的数据库安全防护中,以保护核心数据资产安全。实现危险行为过滤,数据库防火墙必需串联部署,才能形成数据库的安全屏障。这要求其既要发挥抵御威胁行为的功[详细]
-
数据库防火墙风险大?那是你还不知道应用关联防护
所属栏目:[大数据] 日期:2018-04-07 热度:56
近年来,作为高效而直接的数据库防御工事,数据库防火墙已被越来越多的用户关注,应用在关键系统的数据库安全防护中,以保护核心数据资产安全。要实现危险行为的过滤,数据库防火墙必需串联部署,才能形成数据库的安全屏障。这要求其既要发挥抵御威胁行为[详细]
-
为什么说Python 是大数据全栈式开发语言?
所属栏目:[大数据] 日期:2018-04-07 热度:69
前段时间,ThoughtWorks在深圳举办一次社区活动上,有一个演讲主题叫做Fullstack JavaScript,是关于用JavaScript进行前端、服务器端,甚至数据库(MongoDB)开发,一个Web应用开发人员,只需要学会一门语言,就可以实现整个应用。 受此启发,我发现Python可[详细]
-
打破数据统一的七大原则
所属栏目:[大数据] 日期:2018-04-05 热度:62
数据统一在数据分析领域里是个长期的挑战,从事数据分析的从业者希望在数据分析之前,来自不同实体的数据能够在同一个地方呈现出来。数据统一由七部分组成:1、获取数据 2、清洗数据 3、转换数据、4、模式集成 5、重复数据删除、6、分类 7、导出 一般而言[详细]
-
物联网下:大数据属于谁?
所属栏目:[大数据] 日期:2018-04-05 热度:83
数据隐私与访问的讨论在物联网时代变得越来越复杂 在之前一些文章中,我已经警告过一些组织机构机构可能很快就会遭遇数据问题被锁定、赶出或以其他方式禁止访问,以有助于优化未来业务的关键新数据源的可能性。 虽然我相信每个数据驱动的组织机构现在就应[详细]
-
大数据趋势下如何实现NAS存储与容灾备份?
所属栏目:[大数据] 日期:2018-04-05 热度:153
1、数据量暴增,存储市场风云变幻 据IDC预测,全球的数据量正面临一个爆炸性增长,到2020年即将达到44ZB,那44ZB是个什么概念呢? 如果以1KB=1024MB计算,1ZB的数据量换成 128G iPad的高度,可达地球到月球距离的6.6倍。 这些数据中,90%的增量来自于非结构[详细]
-
数据清洗的经验与教训 Data Cleaning
所属栏目:[大数据] 日期:2018-04-05 热度:175
小学的时候我统计过同学里有多少要订课间牛奶:每人分别需要什么口味和什么大小,应收多少钱。最后这份按照座位排序的表格要和一张学号表格按照同学姓名对应起来,并计算每种口味订购数量和每人应收款。过程中我遇到了很多困难,例如有同学订了多种口味,[详细]
-
被大数据遗忘的基础奠基-Log
所属栏目:[大数据] 日期:2018-04-05 热度:149
在大数据时代,Log是关系数据库对计算机行业的伟大贡献,更是基础技术之一。然而在大家热烈讨论GFS, NoSQL,乃至Paxos, LSM tree等词语的时候,Log这个基础技术以及它对大数据行业的巨大贡献却一直以来都被业界所忽略。除了Kafka作者之一Jay Kreps2013年[详细]
-
如何在多系统和网络拓扑中构建高性能模型?
所属栏目:[大数据] 日期:2018-04-05 热度:52
这个文档和附带的脚本详细介绍了如何构建针对各种系统和网络拓扑的高性能可拓展模型。这个技术在本文档中用了一些低级的 Tensorflow Python 基元。在未来,这些技术将被并入高级 API。 输入管道 性能指南阐述了如何诊断输入管道可能存在的问题及其最佳解决[详细]
-
大数据“喂养”红利下,知识图谱如何走上新道路?
所属栏目:[大数据] 日期:2018-04-05 热度:148
大数据时代的到来,为人工智能的飞速发展带来前所未有的数据红利。在大数据的喂养下,人工智能技术获得了前所未有的长足进步。其进展突出体现在以知识图谱为代表的知识工程以及深度学习为代表的机器学习等相关领域。随着深度学习对于大数据的红利消耗殆尽[详细]
-
服务端开发指南与最佳实战:数据存储技术,MySQL 数据库安全性
所属栏目:[大数据] 日期:2018-04-05 热度:158
数据库的安全性,即保护数据库,防止未经授权或不合法的使用而造成的数据泄漏和更改破坏。因此,保护数据库的安全性的一般方法是设置用户标识和权限控制。 MySQL 权限控制,分为两个步骤。第一步骤,服务器会检查是否允许连接。因为创建用户的时候会加上主[详细]
-
TensorFlow的开源与Hadoop的开源有什么不同?
所属栏目:[大数据] 日期:2018-04-05 热度:170
最近看TensorFlow代码的时候,用Git pull下来最新的master一看,哇好多的更新,然后点击去之前看到一半的cc文件继续看,好多地方都改变了。但是一看Git log,有好多巨大的commit叫什么 Merge commit for internal changes, Merge for github,没有任何的其[详细]
-
最适合Java开发者的大数据工具和框架
所属栏目:[大数据] 日期:2018-04-05 热度:126
当今编程人员面对的最大挑战就是复杂性,硬件越来越复杂,OS越来越复杂,编程语言和API越来越复杂,我们构建的应用也越来越复杂。根据外媒的一项调查报告,以下列出了Java程序员在过去12个月内一直使用的一些工具或框架,或许会对你有意义。 先来看看大数[详细]
-
这些硬币大小的微型机器人,未来是医生手术台上的得力助手
所属栏目:[大数据] 日期:2018-04-02 热度:53
早前,就有科学家在打造一支由机器人组成的抗癌军队,做人类医生的手术助理。2017年2月,德国 Phillips Innovative Technologies 的研究人员取得突破:他们通过利用磁场操控特定的机器人去执行具体任务。 J. Rahmer and B. Gleich/Philips Research 近日,[详细]
-
「高度」《人工智能标准化白皮书(2018)》发布(完整版)
所属栏目:[大数据] 日期:2018-04-02 热度:133
人工智能标准化白皮书 (2018 版) 指导单位:国家标准化管理委员会工业二部 编写单位:中国电子技术标准化研究院 二零一八年一月 ▌编写单位(排名不分先后) 中国电子技术标准化研究院 中国科学院自动化研究所 北京理工大学 清华大学 北京大学 中国人民[详细]
-
从刷支付宝乘地铁谈起,浅议大数据时代的隐私安全
所属栏目:[大数据] 日期:2018-04-02 热度:54
近期支付宝、微信、银联等移动支付企业纷纷抢滩城市公共服务。针对地铁公交这一场景,目前已经有超过30个城市在支付宝内上线了电子公交卡功能,这意味着用户可以丢开匿名的交通卡,使用支付宝及相关应用进行刷码通行。 和此前共享单车市场相比,轨道交通等[详细]
-
企业如何实现对大数据的处理与分析?
所属栏目:[大数据] 日期:2018-04-02 热度:89
随着两化深度融合的持续推进,全面实现业务管理和生产过程的数字化、自动化和智能化是企业持续保持市场竞争力的关键。在这一过程中数据必将成为企业的核心资产,对数据的处理、分析和运用将极大的增强企业的核心竞争力。但长期以来,由于数据分析手段和工[详细]
-
互联网公司接连遭到隐私泄露质疑,但为什么说不必过于恐慌?
所属栏目:[大数据] 日期:2018-04-02 热度:158
2018年刚开始,互联网公司们就一个个掉进"客户隐私"这个坑里。 "轮动"的一周 最开始是腾讯被动挨枪。 1月1日,吉利集团董事长李书福在某论坛上发言称,现在的人几乎是全透明的,没有任何隐私和信息安全。"我心里就想,马化腾肯定天天在看我们的微信,因为[详细]
-
数据将主导一切?研究发现53%的公司正在使用大数据分析
所属栏目:[大数据] 日期:2018-04-02 热度:84
本文主要结论与资料来自于研究公司Dresner Advisory Services最新的大数据研究报告2017 Big Data Analytics Market Study,这是该公司Crowds?系列研究中的一部分。本系列报告连续第三年考察与分析了大数据分析最终用户的使用趋势与使用意图,并将大数据分[详细]
-
大数据在金融行业的五大应用与挑战
所属栏目:[大数据] 日期:2018-04-02 热度:68
A 具有四大基本特征 金融业基本是全世界各个行业中最依赖于数据的,而且最容易实现数据的变现。全球最大的金融数据公司Bloomberg在1981年成立时大数据概念还没有出现。Bloomberg的最初产品是投资市场系统(IMS),主要向各类投资者提供实时数据、财务分析[详细]
-
乐观悲观争论无意义,人工智能需要的是发展模式思考
所属栏目:[大数据] 日期:2018-04-02 热度:118
最近,在乌镇惹足眼球的互联网大会除了大佬聚餐吃什么的花边新闻,关于人工智能的一系列谈话又成了舆论关注重点。 库克、马云等大佬都直白地表达出对人工智能的乐观态度。库克表示,并不担心机器人会像人一样思考,却担心人像机器一样思考,马云则认为人类[详细]
-
工信部将推动政务领域应用人脸识别、语音搜索等新技术
所属栏目:[大数据] 日期:2018-04-02 热度:144
记者5日从工信部获悉,工信部将围绕加快推进互联网+政务服务,推动面向政务应用的信息技术研发、应用、标准等创新,面向不同应用场景制定智能化方案,提升电子政务应用产业支撑能力。 新华社5日消息,近年来,我国大力推行互联网+政务服务,人脸识别、[详细]
-
大数据有的这些哪些硬伤,伤到你了么?
所属栏目:[大数据] 日期:2018-04-02 热度:70
可能目前所有的技术都涉及到大数据,但这并不意味着大数据是绝对可靠的。在许多情况下,大数据曾造成过严重事故,但事故的确切原因并不总是很清楚。可能是检测到错误报告、技术故障、缺乏工具、数据不完整、数据不正确甚至是不必要的数据。 毫无疑问,如果[详细]
