大数据是什么?市场有多大?_一般用哪些工具做大数据分析?


- #问答
  • 1、 大数据是什么?市场有多大?

    谢谢邀请!

    简单的说,大数据就是围绕数据进行一系列价值化操作的过程。

    经过多年的发展,当前的大数据已经由早期的几个基本特征(数据量大、结构多样性、速度快、价值密度低、真假难辨等),发展到今天的一个产业链,这个产业链包括了数据的采集、管理和应用,众多的企业也都陆续参与到了大数据产业链当中。

    数据的采集包括传统信息系统的采集(ERP系统、办公系统等),Web信息的采集以及物联网系统的信息采集,信息采集是大数据的重要环节,没有信息采集也就不会有大数据。随着移动互联网的快速发展,信息采集的范围在不断扩大,数据自身的维度也在不断提升,数据所蕴藏的价值也在不断提升。

    数据分析是数据管理的重要内容,也是目前数据价值化的重要手段,当前大数据落地应用多以场景大数据分析为主。数据应用目前主要是两个渠道,一个是人工智能系统,另一个是决策系统,典型的应用案例分别是自动驾驶和智能诊疗。

    说到大数据的市场空间,就一定要谈一下产业互联网,因为未来大数据将主要通过产业互联网的方式落地到广大的传统行业。产业互联网作为当前传统行业结构性升级的重要内容之一,未来的发展空间还是非常大的,一方面传统行业需要产业互联网的技术来辅助企业进行产品创新,另一方面科技企业也需要产业互联网的发展来把大数据、人工智能等一众技术实现落地应用,从而为互联网的持续高速发展寻找新的发展领域。而大数据作为产业互联网的核心技术之一,未来自然有巨大的市场空间。

    我从事互联网行业多年,目前也在带计算机专业的研究生,主要的研究方向集中在大数据和人工智能领域,我会陆续写一些关于互联网技术方面的文章,感兴趣的朋友可以关注我,相信一定会有所收获。

    如果有互联网方面的问题,或者考研方面的问题,都可以咨询我,谢谢!

  • 2、 一般用哪些工具做大数据分析?

    感谢邀请,大数据分析是指对规模巨大的数据进行分析。大数据可以概括为5个V,数据量大(Volume)、速度快(Velocity)、类型多(Variety)、价值(Value)、真实性(Veracity)。

    随着大数据时代的来临,大数据分析也应运而生,下面几款工具还是比较值得推荐的。

    一、HadoopHadoop

    是一个能够对大量数据进行分布式处理的软件框架。但是Hadoop是以一种可靠、高效、可伸缩的方式进行处理的。Hadoop是可靠的,因为它假设计算元素和存储会失败,因此它维护多个工作数据副本,确保能够针对失败的节点重新分布处理。Hadoop是高效的,因为它以并行的方式工作,通过并行处理加快处理速度。Hadoop还是可伸缩的,能够处理PB级数据。此外,Hadoop依赖于社区服务器,因此它的成本比较低,任何人都可以使用。

    二、HPCC

    HPCC,HighPerformanceComputingandCommunications(高性能计算与通信)的缩写。1993年,由美国科学、工程、技术联邦协调理事会向国会提交了“重大挑战项目:高性能计算与通信”的报告,也就是被称为HPCC计划的报告,即美国总统科学战略项目,其目的是通过加强研究与开发解决一批重要的科学与技术挑战问题。HPCC是美国实施信息高速公路而上实施的计划,该计划的实施将耗资百亿美元,其主要目标要达到:开发可扩展的计算系统及相关软件,以支持太位级网络传输性能,开发千兆比特网络技术,扩展研究和教育机构及网络连接能力。

    三、Storm

    Storm是自由的开源软件,一个分布式的、容错的实时计算系统。Storm可以非常可靠的处理庞大的数据流,用于处理Hadoop的批量数据。Storm很简单,支持许多种编程语言,使用起来非常有趣。Storm由Twitter开源而来,其它知名的应用企业包括Groupon、淘宝、支付宝、阿里巴巴、乐元素、Admaster等等。Storm有许多应用领域:实时分析、在线机器学习、不停顿的计算、分布式RPC(远过程调用协议,一种通过网络从远程计算机程序上请求服务)、ETL(Extraction-Transformation-Loading的缩写,即数据抽取、转换和加载)等等。Storm的处理速度惊人:经测试,每个节点每秒钟可以处理100万个数据元组。Storm是可扩展、容错,很容易设置和操作。


    希望对您有用,谢谢!

  • 3、 你电脑上“最引以为豪”的软件是什么?

    取舍太难了!献上个人最满意的10款PC软件?

    经过一番思想斗争,我终于从自己常用的20多款PC效率软件中,筛选出这10款!

    软件大都免费可用,覆盖文件管理、图形管理、文件转换、综合绘图、密码管理等10+领域,全面解放你的生产力。

    1、Quicker:能减少80%软件安装的超级工具箱

    传送门:Quicker软件您的指尖工具箱-Quicker

    如果要在这10款软件中排个序,那么Quicker应该是当之无愧的第一。一款软件,抵得上100软软件。

    • Quicker之文字OCR

    无需下载任何OCR工具,因为Quicker自带。OCR几乎秒开,识别准确率高,还带排版、翻译功能。

    • Quicker之截图

    同样自带截图功能,点击即可开启,截图完成后支持自定义储存路径。美中不足的就是不支持截图时编辑。

    • Quicker之文件搜索

    说到文件搜索,很多人都会安利everthing,但Quicker直接结合了everything,点击即可调出everthing。更牛的是,还可以直接选中文字调出everything(需提前设置快捷键)。

    不仅如此,Quicker还可以组合其他软件,实现文件分类、文件批量重命名、表情包搜索、快速搜索等功能。

    以下就是它的动作库,非常之丰富~

    2、Eagle:图片素材收藏及管理神器

    传送门:Eagle-图片收集及管理必备工具

    我们平常看到的图片来源可能非常广泛,比如设计网站、微信文章、或者某个图片网站等等。Eagle内置了多种便捷的收藏工具,能够迅速收藏眼前的图片、灵感。

    • 浏览器收藏

    在浏览器中直接拖拽图片、或者右键添加,就可以快速收藏网页上的图片。可单张收藏,也可批量收藏~

    还有

    • 屏幕截图
    • 从其他应用拖放图片迅速添加
    • 剪贴板粘贴

    素材来自这么多渠道,日积月累下来可能会很凌乱,分类的效率也会越来越低。

    不慌!Eagle提供多种分类方法

    • 添加标签
    • 文件夹整理
    • 智能文件夹:之所以说“智能”,是因为它可以按照名称、标签、颜色等条件自动分类你保存的图片

    • 想法:可以把你的想法直接写在图片上,同样可以实现分类的目的

    还提供了多种快速搜索方法,比如颜色搜索、关键词搜索,还可以根据形状、尺寸、类型、网址等条件查找。

    一言以蔽之,它从收集、整理到查找都给你拿捏得“死死的”,niubi(破音)!

    3、Convertio:万能的文件转换器

    传送门:Convertio—文件转换器

    Convertio—文件转换器

    「链接」

    严格来说,这是一款网页软件。但又如何?!这么强大的软件决不能私藏!

    Convertio支持超过300种不同的文件格式(不止图像、文档,还有音频、视频、电子书、向量等)间超过25600种不同的转换方式。数量全面超越其他任何转换器。

    操作起来也非常简单,只需将文件拖放至官网的转换页面,选择输出格式并点击“转换”按钮就可以了。

    转换速度很快,基本1-2分钟内就能完成全部转换过程。

    最方便的是,使用Convertio转换文件格式,不需要登录账号,而且下载转换后的文件没有水印。虽然对于免费用户,Convertio最大支持上传100M的文件,但也基本够用了。

    4、iSlide:PPT制作“最强辅助”

    传送门:iSlide-让PPT设计简单起来~|中文官网

    这是一款基于PPT的插件工具,拥有38个设计辅助功能,8大在线资源库超30万专业PPT模板/素材。

    毫不夸张的说,它就是PPT制作“最强辅助”,对非设计出身的“打工人”非常友好!

    • 38个设计辅助功能

    给大家举几个实例:

    统一字体:可以将PPT文档中使用的各种字体一键全部替换为指定字体矩形布局:通过参数化设置,可以将一个图形快速复制或多个图形重新整齐排列为矩阵裁剪图片:可以将多张图片统一裁剪成一致大小,并且保持图片比例一致,不变形

    PPT瘦身:可以一键优化清理PPT中的冗余内容,并对包含的图片进行智能压缩

    还有更多实用辅助功能,这里就不一一列举了......

    • 8大在线资源库

    30万模板/素材支持快速检索并一键插入PPT文档,告别到处找素材的烦恼~

    附上它们家的PPT模板社区▼

    PPT模板_PPT模板背景图片_PPT模板免费下载_iSlide365www.islide.cc

    5、亿图图示:轻松搞定260+图形图表的Visio替代

    传送门:亿图图示设计软件-亿图图示

    这是一款江湖人称“国产Visio”的综合绘图软件。

    区别于PS、AI这类设计软件,亿图图示聚焦的是综合办公绘图,比如流程图、组织结构图、架构图、网络图、甘特图、思维导图、工程图、平面布置图、电路图、商业画布等等,种类达260多种。

    尽管用PS、AI也能绘制上述图形,但用亿图图示会更快。因为后者内置了一个庞大的符号库+模板库,其符号库还支持从外部导入其他图形进行保存。

    亿图图示模板社区

    通过拖拽符号或套用模板,就能快速完成绘图。

    绘制完成后还可以一键美化,绘图效率简直杠杠的。

    6、金山文档:支持随时随地、多人实时协作的在线Office

    传送门:金山文档-多人实时协作的在线Office

    如果你经常需要和Office文件打交道,那么金山文档绝对比微软Office好用。

    比如你在微信上给对方发了个文件(1.0),对方下载文件后提出修改意见及建议,你修改后又得重新把文件(2.0、3.0甚至更多版本)发给对方,对方又得重新下载,整个过程非常繁琐。

    但用金山文档就不会遇到这种问题,因为你只需要将文件链接发送给对方,链接权限设为“可编辑”。当对方编辑修改后,你不仅可以从“协作记录”中查看修改过的地方,还可以从“历史版本”中给予恢复。

    另外,金山文档还可以实现多平台实时协作,简单来说,就是A可以用网页版金山文档、B可以用PC版金山文档,C可以用金山文档APP同时打开并编辑同一份文件。非常适合远程协作办公。

    类似的在线Office工具还有腾讯文档和石墨文档,也都挺好用的。

    7、墨刀:产设研都在用的原型工具

    传送门:墨刀-是一款在线原型设计与远程协作平台

    简单来说,借助墨刀可以完成原型、交互、文档一站式工作。而且相较sketch和Axure,墨刀的学习成本更低,易于上手。

    类似金山文档,墨刀同样可以解决文件(只不过这里是PRD)重复传输的问题,毕竟被研发打回来重新修改文案或逻辑描述的次数肯定不会少。

    同样支持多人实时协作,分享二维码到微信也很方便。

    8、1Password:用户评价最高的跨平台密码管理工具

    传送门:PasswordManagerforFamilies,Businesses,Teams|1Password

    1Password是一款跨平台密码管理应用,目前支持Windows,Mac,Android,iPhone,iPad,浏览器扩展支持:Chrome,FireFox,Opera,Safari。Mac/iOS/Android版本已经支持中文,但是Window目前只有英文版(小脑袋表示不太理解)。

    新用户有30天免费试用。不过30天过就得付费了,一个月7.99刀,还是有点小贵的。

    9、ScreenToGif:吊打其它gif录屏软件

    传送门:「链接」

    如果同事问我哪款录屏软件好用,那么我一定会安利ScreenToGif,这是用过很多款录屏软件后留下来的“真爱”。

    这篇回答的所有gif动图(除下面这张,因为它没法自己录制自己,这似乎也不能怪它),就是用ScreenToGif录制而成的。

    最爱它的吸附功能。当进入录像模式,大家可以看到一个里面有两条垂直线的圆圈,这个功能就是吸附窗口,它可以根据录屏对象的范围,进行智能地识别录屏框的大小。

    ScreenToGif有编辑器功能,所以当录屏结束后,大家可以往其中添加文件、针对特定帧添加自由文本,或者删除无用的帧。

    此外,ScreenToGif还有摄像头、白板等功能,都还不错,自己就不一一列举了~

    10、创客贴:让设计触手可及,小白秒变高手

    传送门:创客贴-做图做视频必备_会打字就能做设计,商用有版权

    这种让设计小白秒变高手的工具还挺多的,类似的还有图怪兽、canva、稿定设计等。

    之所以选择创客贴,不仅因为它样式丰富(有手机海报、公众号封面、长图海报、展架、邀请函等),还因为它有不少免费素材,对于设计要求不高的小伙伴来说,免费的素材基本够用了。

    最让人惊喜的是它的“一键抠图”,真就一键的事。

    第一次发现,原来抠图可以这么简单。

    以上提到的10款良心软件,你都用过几款呢?

    也欢迎你们分享各自的私藏软件,期待~

  • 4、 有哪些可视化数据分析工具推荐?

    个人比较倾向壹看板,我是做运营的,经常要分析新媒体各个渠道的数据,比如微信公众号、一点资讯、等等,需要分析每个渠道的内容数据,还要进行横向对比,分析渠道的优劣势,因为数据比较分散,分析起来很麻烦,每天都要花费很多时间,用了壹看板就可以解决这个问题,有一个“行业智库”的板块,提供好多新媒体渠道的分析模板,可以直接套用,上图:

    内容分析模板:

    微信公众号内容分析模板:

  • 5、 有哪些逆天又高效良心的办公应用软件推荐?

    【真香警告】

    20款高效办公软件,告别低效办公,减少熬夜加班!

    1、Listary

    ★电脑文件搜索+程序启动器(everything+cmd)

    很多答主都推荐everthing,我之前也用过这款软件,不过后面发现了Listary后,就牢牢锁死这款软件了。大爱。

    快捷键调出Listary搜索框,搜索关键字,只要你记得文件中任何的几个字(不连续的汉字都行),它都能找得到。这个小功能一旦习惯了,真的很难放下。

    Ctrl+Ctrl快捷键调出

    Listary不仅支持这种文件的检索,还能支持自定义的网站搜寻,比如Google、百度、淘宝等。可见这个启动器的功能和响应速度还是蛮不错的。

    附上传送门▼▼▼

    Listary—FileSearch&AppLauncherwww.listary.com

    同时推荐另外一款有相同能力的——Quicker

    它可以说是一个实用工具集合软件,其中就包括everything(类似listary),截图OCR(天若OCR现在不能用了,不然我会选图天若),还有截图、快搜、百度翻译等功能。

    2、MindMaster

    思维外脑+灵感捕手

    大家在工作中可能都用过思维导图,比如写文案大纲、做产品需求分析等等。不过,这些操作还都停留在入门级。

    MindMaster思维导图提供了很多特色功能,包括头脑风暴、甘特图、导图社区等,进一步拓展了思维导图的应用场景。

    比如策划一场活动,借助MindMaster,我们可以实现在一款软件上完成从头脑风暴、流程梳理、项目管理到活动复盘的全流程。

    附上软件传送门▼▼▼

    MindMaster多平台思维导图软件,让您的创意破茧而出edrawsoft.cn

    3、亿图图示

    欲与Visio试比高的综合类办公绘图软件

    谈到办公绘图软件,大家第一反应可能是微软的Visio。不过这两年国产软件很争气,跑出了不少优秀的产品,例如亿图图示,就在Visio所在的综合类办公绘图领域撕开了一道不小的口子。

    亿图图示拥有强大的基础绘图能力,自由拖放、连接吸附、元素插入等功能一应俱全。

    更令人称道的是,它同时兼容Windows、Mac、Linux三大系统,而且额外支持Web网页版。无论你是什么电脑,都能实现适配。

    自由拖放、自动连接

    附上传送门▼▼▼

    亿图图示免费下载|多平台运行|支持Visio导入导出edrawsoft.cn

    4、墨刀

    高保真移动端原型制作神器

    墨刀和axure一样都可以制作产品原型,但是墨刀的操作要简单的多,且拥有手机版本,可以随时随地进行演示。

    墨刀界面

    墨刀支持线协作编辑、审阅。不管是产品想法展示,还是向客户收集产品反馈,向投资人进行Demo展示,或是在团队内部协作沟通、项目管理,都可以通过墨刀实现。

    附上传送门▼▼▼

    墨刀—远程办公好帮手在线产品原型设计与协作平台modao.cc

    5、万兴PDF专家

    PDF编辑像Word一样简单

    当我们需要进行PDF文档的编辑操作时,就可以用万兴PDF专家。不管我们是想要添加文本,或者是想要添加图片,甚至是进行剪裁都可以轻松地实现。

    格式转化是我们在办公中经常会遇到的问题,万兴PDF专家也支持多种格式进行转换,包括Word、Excel、TXT等,能够满足我们大部分的办公应用场景。

    附上传送门▼▼▼

    万兴PDF专家(PDFelement)下载pdf.wondershare.cn

    6、奶牛快传

    ★无需注册登录即可完成文件上传下载,而且不限速!!!

    有了奶牛快传,你不用再通过拉一次性的QQ群下发文件,也不用忍受那些恶心云盘的限速。

    当然,奶牛快传是一个文件传递工具,而不是一个文件管理工具,我更多是将它用于一对一或是一对多的大文件传递(不限速+5G免费空间就足够我使用了)。

    附上传送门▼▼▼

    奶牛快传|传文件文件下载不限速cowtransfer.com

    7、创客贴

    平面设计作图神器

    不需PS功底,模板多,出图快,三分钟就能做出一张精美海报。

    不止于海报,创客贴还可以轻松设计更多应用场景的图片,包括公众号封面图片、营销长图、PPT16:9、名片、电子邀请函等。是每一个人运营人的必备设计工具。

    附上传送门▼▼▼

    创客贴_在线图片编辑器_版权设计模板_在线稿定设计印刷chuangkit.com

    8、WPS图片

    ★目前在Windows用过的最好的看图工具

    别的看图工具能做到的事,例如裁剪抠图、尺寸修改、水印添加等,WPS图片都能做到;它们做不到的事,比如文字识别、图片转PDF、图片压缩等,WPS图片依然能做到。

    比如,当你点击【图片提取文字】功能时,WPS图片就能快速帮你提取文字信息,并支持直接转换为文档和表格文件,方便你快速将资料用于工作之中。

    附上传送门▼▼▼

    WPS图片-极致查看体验.百变图片应用photoplus.wps.cn

    9、Snipaste

    ★Windows上还有比它强的截图贴图工具吗?有的话也给我推荐下

    很多朋友都喜欢QQ截图自动选取窗口截图的功能,但Snipaste更进一步,它不仅能够选取窗口,而且还能自动选取窗口当中的各种元素,例如文件管理器的地址栏、按钮、图标等等。使用Snipaste截图,你会发现框选的操作会少很多。

    还有贴图这一“杀手锏”。当我们使用Snipaste截过图后,开启贴图功能,一下子就能把截过的图片全部罗列在屏幕上。这个功能在我们需要同时观看多张截图的时候,非常实用。

    这样的神器居然还是免费的!太香了!

    附上传送门▼▼▼

    listary.com/www.listary.com

    10、ScreenToGIF

    ★在GIF截图上简直无所不能

    如果是录制窗口的话,可能不太好对齐,因此ScreenToGif带有对齐窗口的功能。点击界面下方的“⊕”按钮不放,拖动到某个窗口,ScreenToGif即可自行将录制区域调整至窗口大小,非常方便。

    在ScreenToGif中,还可以调整GIF录制的帧数、时长、大小,还可以在任意帧中插入内容(例如涂鸦、字幕、模糊处理等),甚至是插入其他GIF。

    我的文章动图都是用ScreenToGIF录制的(o゚▽゚)o

    附上传送门▼▼▼

    screentogif.com/www.screentogif.com

    11、OneTab

    ★浏览器标签管理工具

    浏览器标签页是一样令人头疼的东西,每当打开一些网页之后会发现标签页密密麻麻,非常混乱。关闭后又担心会用到,不关闭实在影响浏览器的使用,而且过多的打开网页会带来很多内存占用。

    OneTab这款插件的存在,可以完美解决以上的窘境。只需单击一下,就可以把所有标签页转化成一个列表,如果再次需要某个网页的时候,可以单个或者全部恢复标签页。

    OneTab官网截图

    附上传送门▼▼▼

    one-tab.com/www.one-tab.com

    12、金山文档

    ★WPS推出的多人实时协作的在线Office

    当你的WPS和金山文档使用同一个账号登录时,WPS会将本地创建的文件自动传输到云端的金山文档。目前金山文档已经打通了微信小程序、App、以及网页。可以说PC和移动无缝切换,效率极高。

    附上传送门▼▼▼

    金山文档-多人实时协作的在线Officekdocs.cn

    13、PPT超级市场

    ★完全免费的PPT模板下载网站

    界面简洁,只有一个搜索框和部分推荐模板,支持关键词搜索自己需要的PPT模板,搜索完毕后即可免费下载。亲测,模板样式都不差,比起某些收费的PPT模板平台要好很多。

    附上传送门▼▼▼

    ρρt超级市场ppt.sotary.com

    14、iSlide

    ★超牛的PPT插件,让PPT设计简单起来

    iSlide包含38个设计辅助功能,8大在线资源库,超20万专业PPT模板/素材。

    对于普通职场的人来说,我们并非做PPT的高手,但有了iSlide,我们每个人都可以在短时间做出专业级PPT。我们只需负责内容,iSlide来负责“美”。

    附上传送门▼▼▼

    iSlide-让PPT设计简单起来~|中文官网islide.cc

    15、方方格子Excel工具箱

    ★Excel实用功能收纳箱,大型Excel插件

    “方方格子Excel工具箱”收纳了包括批量录入、汇总拆分、财务工具等上百个实用功能,其中“宏收纳箱”提供了大量常用宏及函数。一些重复性高的操作,在插件中就能一键解决。

    唯一的不足,就是这个工具箱仅支持Excel2007~2016版本。

    附上传送门▼▼▼

    Excel工具箱插件-方方格子工作室-做最专业的Excel工具箱ffcell.com

    16、EasyCharts

    ★一款简单易用的Excel插件

    EasyCharts功能众多,不但能实现图表风格、颜色主题的自动转换,还能绘制一些Excel未提供的图表,比如:平滑面积图、南丁格尔玫瑰图(见链接)、马赛克图、子弹图等图表。

    附上传送门▼▼▼

    onlinedown.net/soft/987735.htmwww.onlinedown.net

    17、Flourish

    ★在线的数据可视化平台

    无需编程基础,直接导入excel或复制数据,简单配置即可生成高大上的可视化图表,支持手机、平板、PC平台。值得一提的是,Flourish对个人用户免费。

    附上传送门▼▼▼

    DataVisualization&Storytellingflourish.studio

    18、iconfont

    ★阿里巴巴矢量图标库

    通过这个免费的工具,用户不仅可以浏览下载大量优秀设计师的图标作品,还可以管理和展示自己设计的图标。

    附上传送门▼▼▼

    Iconfont-阿里巴巴矢量图标库iconfont.cn

    19、冰点文库下载器

    ★强大的网络文档下载工具

    无需积分即可下载百度文库、豆丁、丁香、MBALib、道客巴巴等文库文档,无需注册和登录。

    附上传送门▼▼▼

    冰点文库下载器v3.2.12crsky.com

    20、remove.bg

    ★在线抠图神器

    想抠图,奈何不会PS?即使会,着急用时也不能一下子就能弄好。这个网站就能解决你的燃眉烦恼,真的是一键抠图,点击上传图片即可自动解锁你的图片。

    我第一次用的时候也被这效果震惊到了

    附上传送门▼▼▼

    remove.bg/zhwww.remove.bg

    今天的软件分享就到这里啦~

    希望以上软件对大家提升办公效率有帮助[]~( ̄▽ ̄)~*

Related Content: