-
用 Spark SQL 实行结构化数据处理
所属栏目:[大数据] 日期:2022-06-25 热度:161
Spark SQL 是 Spark 生态系统中处理结构化格式数据的模块。它在内部使用 Spark Core API 进行处理,但对用户的使用进行了抽象。这篇文章深入浅出地告诉你 Spark SQL 3.x 的新内容。 有了 Spark SQL,用户可以编写 SQL 风格的查询。这对于精通结构化查询语言[详细]
-
数据驱动业务的18个有效战略
所属栏目:[大数据] 日期:2022-06-25 热度:181
你老想着数据驱动业务,但发现有力无处使,或者没人鸟你,我也有同样的经历,下面有18条策略锦囊,望你笑纳。 第一条 数据驱动业务中的数据广义来讲不仅仅是指存储在大数据平台的那堆数据(反映客观事实),也包括战略、组织、机制、流程、人性、认知、客户的[详细]
-
实施合理的数据收集策略的关键性
所属栏目:[大数据] 日期:2022-06-25 热度:67
数据已经成为企业最宝贵的资产之一,而一些企业仍然否认它的重要性,但他们对接受它的犹豫正在消退。一项民意调查发现,36%的企业认为大数据对他们的成功至关重要。 然而,许多企业仍在努力制定持久的数据战略。最主要的一个问题是他们没有可靠的数据收集方[详细]
-
大数据能为建筑能源管理做些啥
所属栏目:[大数据] 日期:2022-06-25 热度:91
近年来,对降低碳排放水平和提高能源效率的兴趣导致智能建筑技术呈指数级增长。 最重要的是,物联网扩大了互连设备和建筑管理系统的可能性,以实现更好的能源管理。然而,真正实现其潜力需要组织和分析楼宇自动化系统生成的大型数据集。 实时管理和维护大数[详细]
-
为啥不能忽视建筑物中的数据解析
所属栏目:[大数据] 日期:2022-06-25 热度:154
想象一栋建筑,其中创新的管理系统不断提供有关内部情况的简单而有意义的信息。 这些数据可用于提高效率、开发更智能的设备维护协议、创建更健康的建筑环境,并最终让使用者更快乐。 现在,考虑一个没有用于监控其系统的分析的建筑物。设备出现故障,存在空[详细]
-
数据迁移 在平台之间移动数据的优秀践行
所属栏目:[大数据] 日期:2022-06-25 热度:193
随着越来越多的数据从内部系统转移到访问外部 API 的应用程序,迁移数据的需求变得越来越重要。 数据迁移在不同的上下文中可能意味着不同的东西,但在实践中,当我们谈论数据迁移时,我们通常是在谈论将数据从一个平台或系统移动到另一个平台或系统。 人们普[详细]
-
使用 FlatBuffers 提高反序列化功能
所属栏目:[大数据] 日期:2022-06-25 热度:104
最近一直在寻找一个性能和资源占用兼具的序列化和反序列化工具,大多组织都是采用的 JSON, JSON 可以做到数据的前后兼容,并且更容易让人理解和可视化,但 JSON 的性能相对更差,自身的元数据也会占用更多的存储空间。 根据官网介绍FlatBuffers是一个高效的[详细]
-
当大数据平台遇到K8s 智领云助力企业向数据驱动变型
所属栏目:[大数据] 日期:2022-06-25 热度:92
数据驱动是企业数字化转型的一个重要特点。随着企业对数据分析和使用的不断增长,数据来源多,数据工具复杂,参与数据工作的人多,数据开发的工作量越来越大,同时还要求周期短、质量高。对此,数据团队持续优化数据开发流程、应用,借鉴了DevOps、精益管理[详细]
-
区块链影响数据分析行业的五种方法
所属栏目:[大数据] 日期:2022-06-25 热度:142
新技术的出现比人们想象的还要快。像大数据和区块链这样的新兴技术正在成为传统。此类技术正在改变企业开展业务的方式。例如这两种技术是独立的,并且是独立使用的。然而,虽然数据科学处理的是从原始和非结构化数据中寻找见解,但区块链技术是一个共享的账[详细]
-
开发大数据应用程序企业的四个成功要点
所属栏目:[大数据] 日期:2022-06-25 热度:200
大数据技术正在以无数种方式改变我们的生活。由于数据提供的许多好处,越来越多的公司正在对其进行投资。到2026年,全球公司预计将花费超过2340亿美元。这对于为客户和企业等开发大数据应用程序的公司来说是一个绝佳的机会。 如果您有兴趣创建一个成功的大数[详细]
-
中美欧人工智能发展应用、现状及趋势分析
所属栏目:[大数据] 日期:2022-06-20 热度:164
一、背景及比较方法 人工智能是促进经济、安全和社会发展的基础性技术。在人工智能研发与应用领域处于领先地位的国家,将掌握该技术的未来,并获得竞争力的大幅提升,而落后的国家则可能在关键行业失去竞争优势。因此,世界主要国家当前都争相推进人工智能发[详细]
-
五个机器学习中的常见难题及解决方法
所属栏目:[大数据] 日期:2022-06-20 热度:194
人们可能听说过很多机器学习的用例。例如参加会议、分享人工智能技术的LinkedIn帖子、以及博客文章都有所提及。虽然人们都知道机器学习这个术语,但在多大程度上理解了机器学习的含义? 对于IT或数据科学领域的行业专家来说,他们非常精通这些技术。然而对于[详细]
-
百度南渡 人工智能护航泉州水务的产业智能化征程
所属栏目:[大数据] 日期:2022-06-20 热度:188
云山苍苍,江水泱泱。作为曾经的东方第一大港,也是海上丝绸之路的千年古港,福建泉州的故事,与水有着不解之缘。 耕海牧洋的历史,成就了泉州拓荒万里的卓越胆识。在千行百业智能化浪潮的进程中,泉州也当仁不让,成为了率先践行的弄潮儿。 2020年,泉州水[详细]
-
六个构建机器学习模型需避免的错误
所属栏目:[大数据] 日期:2022-06-20 热度:95
近年来,机器学习在学术研究领域和实际应用领域得到越来越多的关注。但构建机器学习模型不是一件简单的事情,它需要大量的知识和技能以及丰富的经验,才能使模型在多种场景下发挥功效。正确的机器学习模型要以数据为中心,基于对业务问题的理解,并且数据和[详细]
-
新能源汽车动力电池自动化拆解设备供应商
所属栏目:[大数据] 日期:2022-06-20 热度:152
一种汽车磷酸铁锂电池正极材料的回收工艺,新能源汽车动力电池自动化拆解设备供应商: 从电芯中取出磷酸铁锂电池正极片,通过机械力与热场共同作用的物理方法,将磷酸铁锂电池正极片的磷酸铁锂材料从铝箔上分离下来,分别得到磷酸铁锂回收料和完整的铝箔;是[详细]
-
人工智能和机器学习面临数据中毒的解决措施
所属栏目:[大数据] 日期:2022-06-20 热度:83
阻止勒索软件已成为许多组织的优先事项。因此,他们正在转向人工智能(AI)和机器学习(ML)作为他们的防御选择。然而,威胁者也正在转向人工智能和ML来发动他们的攻击。一种特定类型的攻击,即数据中毒,就利用了这一点。 为什么AI和ML有风险 像任何其他技[详细]
-
数字化改革浪潮 生态十年,禾之三变
所属栏目:[大数据] 日期:2022-06-20 热度:169
无论你是ICT行业人士,还是实体经济、互联网领域从业者,抑或公务员、医生、教师、学生,应该都能清晰感觉到中国正在发生的,扑面而来的数字之变。 近处看,今年政府工作报告中强调,将数字经济与实体经济融合是2021年主要任务之一;远处看,《十四五规划和2[详细]
-
AI:机械手石头剪刀布
所属栏目:[大数据] 日期:2022-06-20 热度:148
人工智能(AI)正在占据越来越多的应用和生活场景,例如图像检测和分类,翻译和推荐系统等等。基于机器学习技术的应用数量庞大且还在不断增长。采用Enclustra(瑞苏盈科)结合FPGA和ARM处理器的核心板模块,在离线和边缘使用AI前所未有的容易。 为了展示基于[详细]
-
应用案例:UP系列推动智能零售业发展
所属栏目:[大数据] 日期:2022-06-20 热度:76
一家智能零售显示应用的开发商需要为其最新项目提供紧凑、灵活的解决方案时,他们求助于研扬科技及采用AI Core X的UP Squared主板为其最新智能显示提供动力。 智能零售业涵盖了广泛的应用,但是,每种零售场所都有其特色,客户的需求也不尽相同。在不同的零[详细]
-
自适应计算如何化解 AI 产品化难题
所属栏目:[大数据] 日期:2022-06-20 热度:197
人工智能发展迅速,创新步伐不断加快。然而,虽然软件行业已经成功在生产中部署了 AI,但包括汽车、工业和智能零售等在内的硬件行业,在 AI 产品化方面仍处于初级阶段。阻碍 AI 算法概念验证 (PoC) 成为真正硬件部署的主要差距仍然存在。这些不足之处在很[详细]
-
大数据如何改变制造业
所属栏目:[大数据] 日期:2022-06-13 热度:188
区块链如何改变制造业 由于该领域的独家技术突破,制造业正处于一场革命之中。 制造业的大数据正在实现明智的战略,并制定未来的路线图。 制造业是在过去几十年里经历了巨大变化的行业之一。除了简单地自动化相关流程之外,制造业还利用技术实现各种其他目的[详细]
-
一文读懂元数据管理!
所属栏目:[大数据] 日期:2022-06-13 热度:131
一文读懂元数据管理! 一、什么是元数据? 元数据(metadata)是关于数据的组织、数据域及其关系的信息,简言之,元数据就是描述数据的数据。概念总是生涩,对于没有IT背景的人来说比较抽象,不容易理解,下面举几个例子。 示例1:歌词中的元数据 有一首很多[详细]
-
为何大厂选择减人而不是降薪?
所属栏目:[大数据] 日期:2022-06-13 热度:193
为何大厂选择减人而不是降薪? 01 前2天写了大厂裁人和招人为何同时进行的原理,后台也收到了很多有趣的私信,其中有一个问题让我觉得特别有意思。 问的是大厂为控制成本他能理解,但同样是控制成本,裁掉30%的人,以及不裁人集体降薪30%,区别是啥? 为什么[详细]
-
终于有人把数据的属性讲明白了
所属栏目:[大数据] 日期:2022-06-13 热度:172
终于有人把数据的属性讲明白了 1.结构化与非结构化数据 某些数据集具有很好的结构性,就像数据库中的数据表或电子表程序中一样。而其他的数据以更多样的形式记录着有关世界状况的信息。它们可能是像维基百科这样包含图像和超级链接的文本语料库,也可能是个[详细]
-
价值变现的关键是组织优化和数据治理
所属栏目:[大数据] 日期:2022-06-13 热度:172
大数据、数据治理、数据湖以及目前被热议的数据中台概念,无不让企业信息化部门疲于跟进,而不是根据企业的实际情况决定建设节奏。企业A的IT部门,就曾受到业务部门要求建设数据中台的压力,但迟迟难以下决心启动数据中台项目。 从A企业的视角来看,目前,行[详细]
