资料整理——大资料治理的关键技术

资料整理——大资料治理的关键技术杜小勇1,2, 陈跃国1,2, 范举1,2, 卢卫1,21. 中国人民大学资讯学院，北京 100872；2. 资料工程与知识工程教育部重点实验室（中国人民大学），北京 100872摘要：资料是-、企业和机构的重要资源。资料治理…

2020-01-27 科技 我要分享

北京建筑大学：资料治理是智慧校园的淘金石

北京建筑大学网络资讯管理服务中心主任 魏楚元现在的“智慧校园”概念非常火爆，那么智慧到底是什么？目前还没有一个明确的定义。今天我们所说的智慧都是被“智慧”，而智慧校园的建设只是被打上智慧的标签，距离真正的智慧存在一定的差距。那么如何建设真正的智慧校园，是值得我…

2020-01-29 科技 我要分享

【从K匿名法、GAN和统计整合练兵，再攻联合学习】工研院揭3种去识别化方法

联合学习Non-IID也有解　下一步要推广到各产业

2021-05-21 综合 我要分享

一文告诉你：什么是大资料？大资料学习路线和就业方向

私信我或关注微讯号：猿来如此呀，回复：学习，获取免费学习资源包。大资料又称巨量资料，就是资料量大、来源广、种类繁多(日志、视讯、音讯)，大到PB级别，现阶段的框架就是为了解决PB级别的资料。专业的来讲：大资料(big data,mega data)，或称巨量资…

2019-12-22 科技 我要分享

干货：玩转大资料必须掌握7大核心技术概念 文末有福利

大资料概念：大资料究竟是什么？很多人可能仍然有些混淆，本文让我们来看看大资料的一些主要的定义。首先要注意的是…大资料概念大资料究竟是什么？很多人可能仍然有些混淆，本文让我们来看看大资料的一些主要的定义。首先要注意的是，行业内的所有人都普遍认同，大资料不只是更多…

2019-08-26 科技 我要分享

如何成为一名优秀的资料分析师？揭秘职业大资料分析师的世界

与传统资料分析师相比，互联网时代的资料分析师面临的不是资料稀缺，而是资料过剩。因此，互联网时代的资料分析师必须学会使用技术手段来高效地处理资料。更重要的是，互联网时代的资料分析师应该不断创新和突破资料研究的方法论。大资料分析有哪些基础发展方向？1、视觉化…

2019-01-18 科技 我要分享

剖析：物联网资料分析该怎么做？_装置

互联网资料分析大家都讨论的太多了，但是对物联网资料分析而言，却讲的太少。本文笔者将从对物联网资料进行分类出发，讲述：如何进行物联网资料分析？ 在网上查了查，关于互联网资料、业务资料分析的文章比较多，但是关于物联网资料分析的文章几乎找不到，于是萌发了写一…

2019-10-13 科技 我要分享

广发证券：智慧金融资料质量监控系统建设之路_业务

作者介绍 覃剑钊，香港大学博士，现任广发证券资讯科技部资深工程师。 刘佳茜，广发证券实习生，中山大学在读硕士。 张汉林，广发证券资讯科技部副总经理。 蒋荣，哥伦比亚大学博士、特许金融分析师（CFA），现任广发证券资讯科技部总经理。曾任威灵顿管理公司（波士顿总…

2019-09-19 科技 我要分享

大资料时代的金融行业：如何辨别资料金矿与垃圾？

当大资料应用在金融行业中越来越普及，我们注意到，资料的准确性和有效性也越来越重要，直接关系到金融机构的商业决策，以及其在市场竞争中的成败。为了充分发挥大资料应用的潜能，实现最大效益，金融机构需要掌握两门必修课：对资料质量进行辨别和不断强化资料处理能力。大资料时…

2020-01-02 科技 我要分享

【强化资料治理，今年聚焦MLOps人机协作】不惜发动29年最大组织改造，玉山要打造一条鞭资料治理流程

玉山展开29年来最大组织改造，不只是为了三大策略和永续发展，还有一个关键理由

2021-08-19 综合 我要分享

做机器学习专案 资料却不够？这里有5个不错的解决办法

【IT168 技术】许多开展人工智能专案的公司都具有出色的业务理念，但是当企业AI团队发现自己没有足够多的资料时，就会慢慢变得十分沮丧......不过，这个问题的解决方案还是有的。 本文将简要介绍其中一些经笔者实践证明确实有效的办法。资料稀缺的问题非常重要，因…

2019-09-06 科技 我要分享

深入挖掘大资料：资讯金矿

每天产生的资料量是一个谜，因为它正在以快速的速度不断增加。虽然资料无处不在，但我们可以从中收集的情报更为重要。这些大量资料就是我们所说的“大资料”。组织生成并收集大量资料，相信这些资料可能有助于他们推进产品和改进服务。例如，商店可能有其客户资讯，库存详细资讯，…

2019-12-24 科技 我要分享

资料赋能工业互联网 智慧化变革时代到来_数量

文 | 工业和资讯化部资讯化和软件服务业司巡视员 李颖 随着第四次工业革命的探索逐渐走向深入，资料作为数字经济时代新驱动要素的作用日益凸显，与传统要素相比，资料具有更强的可复制性、更易共享、且可无限增长和供给，使突破有限自然资源供给对经济增长制约成为可能，对…

2019-10-13 科技 我要分享

尖端知识 | 大资料视觉化与CIO有什么关系？

私信我或关注微讯号：猿来如此呀，回复：学习，获取免费学习资源包。“有人的地方，就有江湖。有大资料的地方，就有视觉化的需求。”步入大资料时代，各行各业对资料的重视程度与日俱增。随之而来的是对资料整合、挖掘、分析、视觉化需求的日益迫切，资料视觉化呈现出越来越旺盛的…

2019-12-14 科技 我要分享

拥抱资料孤岛：穿越碎片化资料世界

我们认为正确的方法是接受它们，而不是试图消除资料孤岛。多年来在大资料和机器学习领域的工作，我们经常听到资料工程师从资料中提取价值的最大障碍是能够有效地访问资料。资料孤岛，孤立的资料孤岛，经常被资料工程师视为关键的罪魁祸首或公敌。已经有许多尝试消除资料孤岛，但这…

2019-09-04 科技 我要分享

在ML中缺乏资料可是个大问题 亲测有效的5种方法帮您解决

点选上方关注，All in AI中国在我做过的很多专案中，公司虽然有非常棒的AI商业创意，但当他们意识到自己没有足够的资料时，却会慢慢的变得沮丧起来。然而，确实有解决的方案。本文的目的是简要地向你介绍其中的一些在我的实践中已经证明有效的方法，而不是列出所有现有…

2020-01-05 科技 我要分享

机器学习 | 特征工程_资料

特征工程指的是把原始资料转变为模型的训练资料的过程，它的目的就是获取更好的训练资料特征，使得机器学习模型逼近这个上限。 简单来说就是演算法的前期处理阶段，经过特征工程处理后的资料是无法直接通过肉眼辨别处理的好换，只有通过演算法的结果反推特征工程处理的好…

2019-12-27 科技 我要分享

从产品经理向人工智能产品经理进阶｜机器学习必备知识

以技术为主要驱动力的人工智能时代，人工智能产品经理一定需要学习人工智能相关技术。本文笔者将与大家讲述机器学习的相关知识。作为人工智能产品经理，你不一定需要拥有研究生和博士学历，但是你需要了解一定的技术基本概念，了解各种技术的优点缺点及其技术边界。就像你会骑自行…

2020-01-19 科技 我要分享

浏览资料集市、湖泊、仓库和金库

在过去几年中，每个人都在谈论大资料。希望更加资料驱动的企业必须整合各种不同的基础架构。但是，您可能很难理解资料湖泊和仓库的相遇位置，以及您甚至可能需要数据库的原因。很简单，这些概念中的每一个都归结为寻找以有效方式摄取和管理资料的方法，以便当今的资料分析驱动决策…

2019-08-21 科技 我要分享

使用Azure 资料工厂和资料服务打造现代资料平台

在云端计算、大资料和人工智能蓬勃发展的今天，现代资料资产管理和资料价值的挖掘、再造，已成为企业高层决策者，尤其是CIO、CTO、CDO们，重点关注和实施的战略问题。最近，中国版Azure即将释出两款资料服务利器：Azure 资料工厂（Azure Data Fa…

2019-12-08 科技 我要分享