以下是3841天前的记录
大数据技巧
1 2013年11月12日 星期二JMP11六大数据统计分析功能速览
比特网 (0)近日,SAS公司的可视化统计发现软件JMP正式发布了*新的JMP11版(JMP普通版)及JMP Pro11版(JMP专业版)。在大数据话题越来越热的今天,此次新品发布也受到了众多统计分析爱好者和JMPer(JMP粉丝)们的关注。从内容上看,JMP11的提升力度很大。在继承了JMP可视化交互式分析的产品特色之外,JMP11新增或改进了16个功能大类,共计约140项功能,技术难度不亚于重新设计开发出一个新的小型统计分析软件。本文将以统计应用为导向,从用户的视角出发,将内容及其丰富的JMP11新功能浓缩为探索性数据分析和数据可视化、质量管理、产品研发、分析自动化与扩展和专业统计分析六大统计应用领域,帮助广大统计分析爱好者快速地对JMP11有一个**而又准确的了解。1. 探索性数据分析和数据可视化探索性数据分析和数据可视化一直是JMP倡导的现代统计分析的重要发展方向和其与众不同的统计分析手段之一。在使用JMP11进行探索性数据分析和数据可视化的过程中,用户体验会更加愉快。这主要是因为相应的变化有:新添独有的列查看器Column Viewer、转换变量Transform Varaibles、交互
以下是3863天前的记录
大数据技巧
2 2013年10月21日 星期一大数据系列之大数据分析对IT资源的需求
论坛 (0)为了准确描述中国大数据市场和技术发展趋势,解析大数据发展的各阶段对IT技术的需求,2013年6月,中桥调研咨询(以下简称中桥)对中国480家*终用户的IT管理者和专业人员,就大数据市场和技术发展趋势展开了调查。中桥**分析师王丛结合其在欧美数据中心领域十几年的市场调研积累,对中国大数据市场趋势的调查数据进行解析,以诠释中国大数据市场和技术趋势。同时,会通过在线讲座(www.webinars-china.com )和中国读者解读中国大数据市场趋势,以及大数据对IT技术、IT架构、IT管理以及IT格局的影响。中桥结合对中国大数据市场的调研数据和分析,将分成四个系列对“中国大数据价值和趋势”进行解读。在系列1里,中桥就大数据分析对未来24个月以及企业的大数据分析投入重点进行分析。在系列2 里,中桥将就大数据分析对IT资源的需求,包括IT架构、计算节点以及存储技术等进行分析。大数据分析对IT架构的需求在大数据时代,随着数据存储量的爆炸性增长以及分层网络架构的出现,IT复杂性达到了****的高度,而大数据分析使得传统IT架构更是不堪重负。那么从企业角度来看,他们的大数据环境需要怎样的IT架构呢?
认知计算是未来系统构建生态系统驾驭大数据
论坛 (0)博科(Brocade)公司的“按需数据中心”战略,目标是通过自动化、高效灵活的矩阵网络连接数据中心内部或数据中心之间的所有资源,从而建立一个随需应变的数据中心。为实现上述目标,博科在原有的VCS虚拟化矩阵和VDX交换机的基础上不断推陈出新,同时探索网络虚拟化的新路。虚拟化矩阵推陈出新从2010年**季度推出VCS虚拟化矩阵和VDX交换机到2013年**季度,全球采用博科以太网矩阵解决方案的客户已经超过1400家,已售出的VDX交换机端口数量达到40万个。这为博科“按需数据中心”战略的提出和发展奠定了架构基础。2013年9月底,博科再次更新了VCS虚拟化矩阵和VDX交换机,为其增加了许多**的功能,形成了端到端多租户解决方案。在这次大规模的产品更新中,*引人关注的有以下几方面内容。**,VCS Virtual Fabric可以为共享物理矩阵内的每个租户分配逻辑矩阵,为Overlay VLAN、VLAN规模和透明VLAN服务提供支持,适用任何虚拟管理程序,并可通过开放式API支持云编排框架。**,通过VCS AutoQoS可以更好地支持NAS,从而将VCS Fabric的智能扩展到存储领域
大数据威胁多**防护需求谁来满足
比特论坛 (0)今天的一分钟里全球发送了3600个图片、278000条博文、2.04亿封电子邮件。2013年互联网用户达24亿,Web站点6亿6千5百万个,Google的URL超过1万亿,Facebook用户10亿,微信用户3亿,去年售出4亿2千7百万部智能手机。IT消费化让我们感受到诸多乐趣,但也让恶意入侵者拥有了更多入侵方式。当今网络攻击更具社会性、复杂性和隐蔽性。据统计,2012年中国有超过16388个Web站点遭篡改;91%的针对性攻击都开始于鱼叉式网络钓鱼;截止2013年底恶意Android应用程序数量将达100万;而有1/5的客户在工作中使用Dropbox;工业控制系统(ICS)攻击2013年上半年超过200起!数据**防护还需再“聪明”些聪明的数据**防护向来都是以简单管理、灵活部署和集中控制为精髓的。分层式的**防护,从用户终端开始就对外界的黑客攻击进行防御。网络、服务器甚至服务器里保存的数据,同时分级别拉起防线。发挥单个部分力量,组合为集体力量去挖掘潜在的恶意威胁。新一代的数据**防护技术要求具备智能的特点,往日**无法看到的威胁,只有像山丽多级审批流这种新技术,才能够提前抵御未知的
大数据技巧
3 2013年10月21日 星期一解读大数据和CDO:概念大过实际意义?
比特网 (0)ChinaByte比特网 8月14日(文/黄亮)就在去年刮过云计算之风,其中部分“泡沫”已经破裂,人们的关注度有些下降之后。大数据这个概念又被一些厂商“利用”为宣传利器,EMC作为其中的代表从去年EMC World 2011大会就开始发动了攻势。可能是由于工作经历的缘故,笔者对云计算、大数据,包括由后者而提出的CDO(**数据官)这些新的热点话题,其中偏概念而非具体技术的部分,在一段时间内持谨慎旁观的态度。从用户的需求来看,真的是“老同志遇到新问题”了吗?当然IT技术、应用模式的发展,对业务不断提出了新的要求。海量增长的非结构化、半结构化数据中确实有值得挖掘的价值,但这并不等于人们就要一下子更换全新的方法、工具来处理它们。就像需**渐进式的增长一样,业务的变革也是渐进式的。在《纪录中国——企业存储的自主之路》一文中,笔者曾经谈到了一些国内存储品牌自主的研发理想和OEM转销的现实。而本文我想以部分厂商为代表,“批判”或者说“揭露”对大数据宣传背后的实质内容。其中可能不完全是肯定的,总之希望读者能够更**、客观的看待大数据这个概念。当然,我的评论中也可能会有不当之处,欢迎大家提出不同意见,
大数据:大价值还是大忽悠
比特网 (0)近一两年来,尤其进入2012年后,“大数据”这个词儿就塞满了耳朵,无论是IT厂商,还是经济学家,还是媒体,似乎如果不讨论“大数据”,那就已经out了。笔者分别在百度和Google搜索了一下“大数据”,百度说“找到相关结果约13,100,000个”,Google说“找到约 623,000,000 条结果”,这里我们不讨论为何百度和Google为何出现了较大的搜索差异,从搜索结果能够看出,“大数据”这个东西,现在有多么火。这不免让笔者想起 “云计算”被热炒的时候,大概从08年开始吧,网络上所看到的,从各个IT厂商口中所听到的,几乎一切都开始被“云”笼罩,云计算迅速席卷了几乎IT的每个角落,而各类人对于云的不同看法,也迅速让云计算变成“晕计算”。至今,云计算的成功案例虽然有,但相比起初业内对这种新事物的憧憬,却显得少得可怜。客观的说,云是一种的很好的IT使用模式,但未必适合所有应用和企业,热捧让云的作用夸大,带来了不少泡沫和误区。云计算方兴未艾,如今,大数据又开始兴起,这一波又一波的新浪潮,对于大多数企业来说,是否已经让您感到了“不是我不明白,是这世界变化快”?大数据到底是个什么玩意儿,跟我
大数据技巧
4 2013年10月21日 星期一DataElite——为大数据打造**创业实验室
ZDnet (0)*近一段时间以来,大数据已经成为硅谷的惟一关注重点——更确切地说,是赚取大利润的关注重点。继企业与IT技术趋势伴随“云计算”这**行语成为业界焦点之后,不少全球**风险投资商开始将注意力转移到新的基金组织身上,旨在从大数据领域再捞上一笔。作为硅谷建立的**大数据风投实验室,这个名为Data Elite的项目将为大数据领域的各新兴企业提升帮助。本项目由Tasso Argyros一手建立,他曾于2011年以3亿美元价码将另一个数据企业出售给Teradata公司。Data Elite背后的支持者名单令人印象深刻,其中包括Andreessen Horowitz以及The Social+ Capital Partnership等等。根据该项目的代表所说,Data Elite的主要目的在于帮助大数据科学家与其同行精英一道解决众多技术问题,而非作为培训或者周期仅为数周的短期计划。因此,Data Elite的设立目的在于帮助企业家拓展思路、汇总为思想——此外,其注资金额*低为15万美元,并提供位于旧金山的工作环境及技术支持团队。该计划还得到部分技术业界知名企业的联名支持,他们将提供自身利用市场优势地位
后来居上大数据让CDO**CIO半个身位
比特网 (0)CDO,**数据官,并不是大数据应用的产物。早在2003 年,美国Capital One 公司就任命了业内**个CDO。但在大数据应用的背景下,CDO开始盛行,尤以美国政府部门*为积极,美国科罗拉多州,旧金山、费城、芝加哥、巴尔的摩、纽约市都聘用了自己的CDO;美国陆军、美国联邦通信委员也设立了 CDO;联邦储备委员会、美国国立卫生研究院都计划今年任命 CDO。在政府部门的感召下,企业也迅速跟上了发展的步伐,据DAMA (国际数据管理协会) 总裁兼Data Blueprint 联合创办人 Peter Aiken 预计,财富 500 强企业中,将有半数以上的在2年内会聘用 CDO。针对CDO,对其决策定位业内尚存争议:在一些组织中,CDO 向 CIO 或 CTO汇报,被视为 IT 部门一份子。而在一些其他机构中,CDO 担任业务职责的角色,直接向 CEO汇报,或者像旧金山市那样,直接向市长汇报。在我看来,CDO的角色是后者,应该直接向CEO汇报,而不是向CIO负责。以目前云计算、大数据两大热门技术为例,云计算不过是对IT系统自身的一种修复,核心还是提高效率、降低成本,提高可靠性。因此,云
大数据一体机不是谁都能玩要用对地方
比特网 (0)如果你在百度搜索一体机这个关键词的话,出现的一定是那个没有主机,只有一个显示器的电脑,显然这个消费市场的产品更多地代表着一体机这个词的含义。但在企业级市场一体机也有着不小的影响力。大数据的价值对于现在的我们来说,已经无需赘言。而挖掘大数据所使用的工具,就是现在很多厂商推出的一体机,对于一体机来说,相当于一个浓缩的数据中心,软硬件的高度集成,对于用户来说带来了极大的便利。根据IDC的报告显示,到2015年,企业私有云环境中,将有65%的服务器是一体机。市场需求还是商家的幌子随着近几年的市场走向来看,不论是融合的基础架构,还是软件定义数据中心都是一个目的就是精简,对于企业业务的针对性更加明显。这与一体机的初衷不谋而合,不难看出,企业对软硬集成一体化的产品的青睐度很高。一体机简化了IT基础架构,在性能提升方面又有着独特的优势。对于大数据来说,软硬件一体化设备在大数据解决方案中,也占有着重要的地位。IBM、甲骨文、戴尔、微软、惠普、曙光、浪潮、华为等IT巨头也纷纷推出面向大数据一体化的产品及解决方案,包括,IBM推出的PureSystems专家集成系统和各细分的系统,微软与惠普等合作的并行数据
大数据技巧
5 2013年10月21日 星期一企业云计算相关IT角色转变六问六答
天极网 (0)在*近参加的一个会谈中,谈论了话题“云计算和IT角色的转化”。在谈话过程中,我得到一些重大的意外收获。 以下是我整理的几个中心问题,参与讨论者也就相关问题给出了答案。问题1:云计算如何转变IT角色?围绕着这个问题的诸多答案,我获得了一个总结性的观点,那就是企业IT不再只是一个技术供应商,相反,他们更应该是一个IT服务的提供商。IT要与业务相关。通过开发有价值的服务产品可以做到这一点。IT要具有积极性。 没有人会以守候者的心态对待即将发生的变故,IT部门要主动了解企业的各种问题,积极主动的评估新技术,用走在企业前面的心态来做好服务,这可能是*实际有效的策略。问题2:除了云计算之外,在改变IT角色中,还有哪些其他的有影响力的趋势?对于这个问题,参与回答者给出的*普遍的答案是:大数据、分析、虚拟化、移动性、BYOD以及DevOps,众多答案中,似乎每一个回答都涉及到了这几个词。还有一些其他的答案,例如,分布式劳动力、远程办公、社交媒体以及依赖IT增长的一切事物。问题3:IT部门应该采取什么措施才能变成一个值得信赖的业务顾问?这里的关键问题是,IT不要试图规范出一个统一的业务需求,而应该与企业
智慧城市需非IT化回归生活
Zdnet至顶网 (0)大概是在今年中秋的时候,记者去上海开会时约见了一位在沪的好友。她不是IT圈里的人,当我和她提到智慧城市时,她先是一脸茫然,后说:“我觉得城市是否智慧,只是取决于市民过得是否安稳。”其实对于非IT的人来说,他确实不会将智慧城市与大数据、云计算、物联网相关联,他只会从衣食住行出发。而事实,智慧城市本来就不应该是一个IT话题。关于智慧城市的话题,早两年前就已经火热,不论是政府还是各种相关的企业。今年年初住建部公布了首批智慧城市试点名单,包含了37个地市、区(县)50个、镇3个,总投资规模会达到5000亿人民币。这在范围内拉开了智慧城市建设的大潮,各个地方政府从民生的各个维度开始思索如何让自己的城市变得更加智慧。“衣食住行”里的企业也更加加快了在城市建设项目上的研发力度。那么这些投资会用在哪儿?智慧城市建设的根本是什么?投资从感知开始5000亿人民币的投资,到现在已经快一年了,这些钱到底花在了哪些地方,又花了多少?记者从相关人士处了解到的信息是,目前只用了两亿,集中的城市是成都和武汉。其实智慧城市本就是很大甚至很空的概念,政府的推动是一方面,其实目前更多的智慧城市项目还是由企业来发起推动的。先
CIO投资企业大数据项目要有全局视角
比特网 (0)近几年,“大数据”席卷而来,笔者总觉得大数据将数据这个词的意义变窄了。“数据”是一个非常宽泛的意义,“大”字将它的含义给定死了。大数据不是一大堆数据的意思,它讲的是数据分析——数据内在的含义以及你使用它们的频率。你需要用一个简单明了的方式将大数据的含义展示给你的老板/经理/高管们。然后在竞争中你会发现很多优势,你能了解到客户的需求以及产品销售的趋势。大数据也不是那么模糊的概念了吧?旅游业、航空业、酒店业和租车业都在使用大数据分析结果进行定价、配置库存和分析消费者习惯。在汽车业,大数据和云计算可以根据gps信息进行道路规划,还可以提醒车主进行修理等。更神奇的是,大数据还可以告诉妇女自己什么时候受孕几率*大。由于大数据的优势,很多公司都在进行商业用途的大数据分析。在信息周刊发起的2013大数据调查中,在收到的257份调查问卷里,仅有9%表示自己的公司正在高效的使用数据分析并做出决策。信息周刊给出的另一份大数据研究报告中指出,在417位it专家中,只有16%表示他们的公司正在或准备配置大数据分析软件。人们对于大数据三点*大的顾虑是:--大数据的专业性比较高,费用比较大(38%)--数据仓库构
大数据技巧
6 2013年10月21日 星期一7个大数据流言—避免错误的Hadoop和云分析决策
VMware博客 (0)摘要:要说Google的3大论文打开了大数据处理之门,那么Hadoop无疑是创造了大数据处理的开源传奇!然而传奇的周围从不缺乏流言,这不,为了“辟谣”,Adam Bloom在VMware博客上发表了入门Hadoop需要避免的7个流言。Hadoop是由英雄们创造的开源传奇,然而传奇经常还伴随着一些流言——这些流言可能会导致IT高管们带着乐观的心态去制定策略。数据体积和数据使用在以惊人的速度增长着,这一点从分析师的分析中不难获得——IDC今年在数据存储上的 增长速度将达到53.4%,AT&T声称 无线数据的流量在过去的5年内增长200倍,如果你着眼自己通信渠道的话,将毫无疑问的发现互联网内容、电子邮件、应用通知、社交消息以及每天自动接收的消息都在显著的增长。这也是为什么 从McKinsey到Facebook再到Walmart都重点聚焦于大数据。就像我们看到的90年代与2000年代的互联网泡沫,大数据同样会导致一些公司做出糟糕的设想和决策。Hadoop毫无疑问是公司为了解决大数据需求的主要投资领域之一,而类似Facebook这些在大体积数据处理上有所建树的公司都公开的吹捧过在Hadoo
CIO:大数据将**智慧科技时代
比特网 (0)大数据将发挥什么样的作用?越来越多的传感设备、移动终端接入到网络,由此产生的数据及增长速度将比历史上的任何时期都要多,都要快。未来的十年将是一个“大数据”**的智慧科技的时代。举例来讲,一家制药公司可能要确定世界排名前100位的舆论制造者。他们要使用大数据抓取的网页数以百万计,页面也涉及相关的多行业。但其中抓取的准确率不是很高,也都不是客观的数据。非结构化的数据、音频、视频、图像、非结构化的文本,是数据提取的重要关键之一。作为一个语义数据模型和数据存储,它可以从不同的数据来源一起汇聚。关于大数据的**,坦率地讲,任何一种**,关键因素还是管理手段,特别是对密钥的管理,这将影响整个加密过程。大数据的应用诉求将促使商业模式变革,并对技术架构形成冲击,营运模式也将产生变化。如果用户有大量的参考信息需要处理,但参考信息来自于不同的来源,用户可以从语义的不同层面来处理。例如,有人可能会调用IBM的“IBM”或“国际商用机器公司”或“IBM公司”或其他。他们实际是同样的语义词汇。语义层内上处理的大数据可就是海量的了。如何分辨用户需求,也是CIO需要考虑的。有了大数据,所有数据的收集,或许将变得更容
复杂多变的环境中挖掘大数据中的商业价值
比特网 (0)“我要怒放的生命!”凡客诚品新一季的户外广告再次袭来。好声音人气学员助阵,加上标配的“凡客体”广告语,凡客诚品新一季的广告几乎一夜之间占据了北京的核心商业地段。人们感叹善于市场营销的凡客诚品,再一次将传播诉求直击目标受众心理。对目标受众的精准传播诉求,得益于凡客诚品对目标受众心理的准确分析,而这一切还得归功于凡客诚品在IT架构上的持续投资,搭建灵活、智能的数据平台解决方案。得益于中国互联网的迅猛发展和凡客诚品成功的营销,互联网用户和中国年轻一代职场人士开始接受网络服装、家居订购这样一种全新的快时尚消费模式,凡客诚品的销售量在短时间内实现了大规模的增长。作为核心业务支撑的 IT系统面临着订单量激增带来的数据分析及存储问题,以及仓储的效率与差错率等问题。采用微软Microsoft SQL Server搭建数据平台,让凡客诚品在对用户海量数据分析管理的同时,可以灵活处理业务订单,解决仓储效率与差错率等问题。选择用微软数据平台架构,是凡客诚品业务发展中IT投资的必然选择。“对于凡客诚品这个以 IT 作为主要生产力的企业来说,IT 的稳定性、可用性、**性、可扩展性��成本都至关重要,微软灵活的数
基于云计算的大数据应用策略
互联网 (0)云服务正在大数据应用中发挥重要作用,尤其是对于那些短期任务,或是已将大量数据存储在云上的应用而言。云服务对于每个人都具有吸引力。当有人对你说,他们的大数据策略是“把所有的数据都存储在云端” 时,你根本无法判断这些人是有远见的人,还是在简单地重复着专家在行业会议上对他们的建议。毫无疑问,目前大数据和云范例之间存在着巨大的重合之处。这些交集是如此的广泛,以致于你能够名正言顺地宣称自己正在利用现有的本地Hadoop、NoSQL或企业数据仓库环境,处理基于云的大数据。请记住,云服务被普遍解读为除了公有云、SaaS(软件即服务)和多租户托管环境外,还包括“私有化的”部署。如果你将“云”的定义局限为公有定购服务,那么你将会触及问题的核心:这就是要识别出哪些大数据应用比本地部署(例如涉及到预优化硬件工具,或是虚拟化服务器集群的本地部署)更适合公有云或SaaS部署模式。从另一个角度来说,在外部服务商为你提供管理服务的情况下,你何时能够提升大数据的扩展性、灵活性、性能、费效比、可靠性和可管理性?以下是几个大数据存储在公有云服务上的典型应用案例。已经被托管在云上的企业应用:如果你像许多机构一样,尤其是像中
服务虚拟化帮助企业加速应用交付
中国软件网 (0)随着全球化竞争的加剧,企业面临着不断增长的业务压力,IT也从技术支持转化为业务驱动。在IT管理领域,企业不断追求着应用、服务更快的市场投放,以提升企业市场竞争力,目前,一项新技术——服务虚拟化将可以帮助企业快速实现应用交付的期望。应用开发环境复杂随着云计算、移动、大数据等趋势的到来,大部分企业的新应用建立在复合、分布式环境之下,并支持多个服务团队和交付合作伙伴,这使得应用开发和测试复杂,并面临着多重挑战。如项目在使用时间和**性方面的限制、团队之间的协调竞争、系统尚处开发阶段使得测试环境不可用;下游系统和实体模型不能提供功能行为或响应,使终端用户性能受影响;基于硬件的虚拟化不能支援测试;在基于云或其他共享服务的环境中执行或测试将带来较高的使用费用等。“据调查显示,企业在应用开发过程中,软件开发时间约占整体项目30%,而70%时间用在了软件测试上。”某**人士表示。虚拟化服务通过多种方式对系统行为、数据交互和性能特性进行捕捉和模仿,并通过提供本地可用的完整端到端应用开发和测试功能,来加速软件开发生命周期,包括从设计和开发、集成、性能测试、交付直到生产的整个过程。据王志明表示,采用虚拟化服