-
【机器学习】数据处理中白化Whitening的作用图解分析
所属栏目：[大数据] 日期：2021-05-28 热度：177
之前在看斯坦福教程中whiteining这一章时，由于原始图像相邻像素值具有高度相关性，所以图像数据信息冗余，对于白化的作用的描述主要有两个方面：1，减少特征之间的相关性；2，特征具有相同的方差（协方差阵为1）；但是为什么这么做，以及这样做对于算法或者[详细]
-
数据集成--Informatica PowerCenter
所属栏目：[大数据] 日期：2021-05-28 热度：155
概要 随着数据呈现单位级别的递增，从海量的数据中分析出有价值的数据，对未来的事情进行一些预测，显得更能体现出BI的优越性了，但这也同时考验着数据处理ETL的性能和安全。这几天大体调查了一下informatica公司的PowerCenter，在国内市场上使用的挺早的，[详细]
-
美团机器学习中的数据清洗与特征挖掘实践
所属栏目：[大数据] 日期：2021-05-28 热度：106
综述 如上图所示是一个经典的机器学习问题框架图。数据清洗和特征挖掘的工作是在灰色框中框出的部分，即“数据清洗=特征，标注数据生成=模型学习=模型应用”中的前两个步骤 灰色框中蓝色箭头对应的是离线处理部分。主要工作是： 从原始数据，如文本、图像或[详细]
-
据挖掘中所需的概率论与数理统计知识
所属栏目：[大数据] 日期：2021-05-28 热度：115
据挖掘中所需的概率论与数理统计知识 ??（ 关键词：微积分、概率分布、期望、方差、协方差、数理统计简史、大数定律、中心极限定理、正态分布 ） 导言 ：本文从微积分相关概念，梳理到概率论与数理统计中的相关知识，但本文之压轴戏在本文 第4节 （ 彻底 颠[详细]
-
【轰炸】大数据分析2015年中国留学生回国就业蓝皮书
所属栏目：[大数据] 日期：2021-05-28 热度：57
本文摘自数据观 前几日，教育部公布了《中国留学回国就业蓝皮书2015》。蓝皮书中介绍，1978年至2015年底，我国累计出国留学人数404.21万，年均增长率19.06%，累计回国人数221.86万。留学回国就业人员的基本特征有哪些?就业情况怎么样?一起跟天道丝丝小编看看[详细]
-
找出一个整数数组中的第二大数
所属栏目：[大数据] 日期：2021-05-28 热度：162
可能以故事形式：如从第一层到第十层电梯每层停一次，如何找到第二个大的钻石 ?1?#includestdio.h??2?#includeassert.h??3?#define?MINNUMBER?-32768??4?int?find_sec_max(int?arr[],int?size)??5?{??6?????assert(arr);??7?????int?maxnumber=arr[0];??8???[详细]
-
hdoj 1002 A + B Problem II 大数
所属栏目：[大数据] 日期：2021-05-27 热度：56
A + B Problem II Time Limit: 2000/1000 MS (Java/Others)????Memory Limit: 65536/32768 K (Java/Others) Total Submission(s): 302658????Accepted Submission(s): 58410 Problem Description I have a very simple problem for you. Given two integers[详细]
-
数据量太大？用Python处理数据密度过大障碍
所属栏目：[大数据] 日期：2021-05-27 热度：127
当我们需要观察比较2个变量间的关系时，散点图是我们首选图表。 可当数据量非常大，数据点又比较集中在某个区间中，图表没法看，密密麻麻的怎么看? 怎么办?这时[详细]
-
让你在10分钟内掌握如何用Python将数据批量的插入到数据库
所属栏目：[大数据] 日期：2021-05-27 热度：121
本文基于python, 使用pandas, pymysql等三方库实现了向数据库中高效批量插入数据，一方面提供被网上很多瞎转载的答案给坑蒙了的人(因为我也是)，一方面自己也做[详细]
-
Spark日臻完善之小文件是否需要合并?
所属栏目：[大数据] 日期：2021-05-27 热度：129
我们知道，大部分Spark计算都是在内存中完成的，所以Spark的瓶颈一般来自于集群(standalone, yarn, mesos, k8s)的资源紧张，CPU，网络带宽，内存。Spark的性能，[详细]
-
5个可以帮助Pandas进行数据预解决的可视化图表
所属栏目：[大数据] 日期：2021-05-27 热度：121
数据科学行业中一个最常见的陷阱是花费数小时为他们的项目寻找最佳算法，而没有花足够的时间首先理解数据。 数据科学和机器学习项目的结构化方法从项目目标开始[详细]
-
大数据在疫情期间对货运运营商的安全不可估量
所属栏目：[大数据] 日期：2021-05-27 热度：112
大数据对于避免许多危机非常重要。采用大数据应对冠状病毒疫情危机是一个很好的例子。越来越多的国家和组织正在使用大数据来促进社交距离，加强联系追踪并找到新[详细]
-
数据科学家vs数据分析师，到底有啥差异？
所属栏目：[大数据] 日期：2021-05-27 热度：115
数据科学和机器学习两个领域很容易混淆，从职责描述上还是大家的普遍印象里，这两个职位都差不多。相较之下，数据科学和数据分析这两个职位更容易区分。它们虽有[详细]
-
大数据和物联网是如何相辅相成的？
所属栏目：[大数据] 日期：2021-05-27 热度：162
分析大数据 物联网传感器持续接收来自大量连接的异构设备的数据。随着联网设备数量的增加，物联网系统需要具有可伸缩性，以适应数据的流入。分析系统处理这些数[详细]
-
粉碎二八法则！每个数据科学家都得会一点SparkMagic
所属栏目：[大数据] 日期：2021-05-27 热度：67
著名的帕累托法则，即80/20定律，告诉我们：原因和结果、投入和产出、努力和报酬之间存在着无法解释的不平衡。即使是21世纪最具吸引力的工作，数据科学依然逃不[详细]
-
社交大数据如何助力社会风险问题？
所属栏目：[大数据] 日期：2021-05-27 热度：158
在网络空间治理中运用社交大数据 当今社会，社交媒体已经成为用户内容获取与危机风险传播的主要渠道。根据艾瑞咨询发布的《2019年中国移动社交行业研究报告》，[详细]
-
SGU 299 Triangle（大数）
所属栏目：[大数据] 日期：2021-05-27 热度：151
Triangle Description It is well known that three segments can make a triangle if and only if the sum of lengths of any two of them is strictly greater than the length of the third one. Professor Vasechkin has? N ?segments. He asked you,if[详细]
-
实用小技巧还能提升PyTorch技能
所属栏目：[大数据] 日期：2021-05-26 热度：114
PyTorch 是一种非常灵活的深度学习框架，它允许通过动态神经网络（例如利用动态控流如 if 语句或 while 循环的网络）进行自动微分。它还支持 GPU 加速、分布式训[详细]
-
人工智能将给世界带来哪些影响？
所属栏目：[大数据] 日期：2021-05-26 热度：141
GPU和海量的数据增强了计算和处理能力，为现代算法和深度学习带来了显著的变化。在未来几年，我们可以期待看到人工智能技术的重大变化。以下是人工智能正在塑造[详细]
-
人工智能的新风口，究竟应该怎么抓？
所属栏目：[大数据] 日期：2021-05-26 热度：98
国家十四五规划，将人工智能置于需要重点突破的科技前沿领域之首，提出培育壮大人工智能产业。 随后，各省纷纷提出自身的人工智能发展战略。如浙江提出，加快国[详细]
-
边缘人工智能物联网解决计划如何提高业务绩效？
所属栏目：[大数据] 日期：2021-05-26 热度：67
实现商业价值 人工智能支持的物联网解决方案的出现有助于提高运营效率。它们还可以通过处理恒定的数据流来预测操作条件和识别参数以保持相关结果。物联网解决方[详细]
-
7种不同的使用AI聊天机器人的办法
所属栏目：[大数据] 日期：2021-05-26 热度：62
1.客户服务： 大多数业务因糟糕的客户服务而失败。因此，寻找一些可靠的解决方案来处理您与用户的互动很重要。AI聊天机器人更适合希望企业迅速做出反应的年轻一[详细]
-
人工智能如何缔造自动驾驶数据中心
所属栏目：[大数据] 日期：2021-05-26 热度：199
人工智能在提升数据中心效率以及扩展业务方面的潜力可分为以下四个主要类别： 电源管理 ：基于人工智能的电源管理有助于优化加热和冷却系统，从而降低电力成本，[详细]
-
5G网络技术将改造企业和未来城市
所属栏目：[大数据] 日期：2021-05-26 热度：87
在许多国家和地区，Covid-19大流行加速了广泛的5G服务。例如，中国正在依靠新的技术基础设施来增强其经济抵御能力，并减轻大流行对其供应链和物流的影响。 根据[详细]
-
为什么医疗保健提供商要埋头于智能自动化？
所属栏目：[大数据] 日期：2021-05-26 热度：142
智能自动化（IA）是人工智能和自动化的组合体。通过利用这一点，组织可以达到无与伦比的效率、卓越水平，并支持快速的端到端自动化流程。普华永道（PWC）声称，[详细]
