大数据 避免7个常见的数据管理陷阱 在当今的大数据世界中,云技术是必不可少的,因此大数据投资显然是有优势的,但是管理不善可能意味着未来的工作量更多。大多数企业都知道为什么将应用程序和工作负载迁移到云中是有益的。在当今的大数据世界中,云技术是必不 03-03 查看评论 阅读全文
大数据 聊聊Hive中的集合数据类型 本文转载自微信公众号「Java大数据与数据仓库」,作者柯同学。转载本文请联系Java大数据与数据仓库公众号。除了使用础的数据类型string等,Hive中的列支持使用struct, map, array集合数据类型。 03-03 查看评论 阅读全文
大数据 4种数据分析基础方法,终于有人讲明白了 01 全链路分析全链路分析是指对全链路的每个节点进行分析和研究,它是一种非常重要的分析思路,也是对产品经理而言最重要的思路。大家所熟知的漏斗分析、AARRR模型都是典型的全链路分析(见图2-1)。▲图 2-1 常用全链路分 03-03 查看评论 阅读全文
大数据 Excel快捷方式独门秘术 是不是还在膜拜抖音大神熟练的EXCEL万能一秒钟?是不是还在死记硬背各种EXCEL快捷方式?是不是还在加班加点整理数据?学会这三板斧,瞬秒摸鱼学徒,吊打摸鲸校尉,咱直接摸鲲。先打一套军体拳:下图是按照右边的顺序正常速度录 02-24 查看评论 阅读全文
大数据 你会Hive表的基本操作吗? 本文转载自微信公众号「Java大数据与数据仓库」,作者柯同学。转载本文请联系Java大数据与数据仓库公众号。 1. 创建表create table语句遵从sql语法习惯,只不过Hive的语法更灵活。例如,可以定义表的数据文件存储位置,使用 02-21 查看评论 阅读全文
大数据 帮助你在2021年成为数据科学家的21个有用的小贴士 在这篇文章中,我将与你分享我从其他数据科学家以及我自己过去几年的经验中学到的21条建议。这取决于你的职业生涯已经走了多远,其中一些建议肯定比其他的更适合你。例如,花点时间来发现和探索新的库和包可能对刚开始工作 02-21 查看评论 阅读全文
大数据 “大数据杀熟”行为有了细化认定标准 对于社会关切的二选一大数据杀熟等平台经济领域垄断行为,如何细化认定?国务院反垄断委员会2月7日发布关于平台经济领域的反垄断指南,国务院反垄断委员会办公室负责同志对指南进行了解读。对二选一大数据杀熟等如何认定? 02-21 查看评论 阅读全文
Ai 技术 人工智能技术在电力监控系统方面的应用 在网络技术和通信技术快速发展的今天,先进技术逐渐在电网调度数据电力监控之中得到使用, 并且也推动电网调度逐渐朝着自动化的方向发展。 1 人工智能技术 人工智能主要是集合了自然学科与社会学科等相关科学,还包含了计 02-20 查看评论 阅读全文
Ai 技术 最值得期待的十大人工智能公司 人工智能作为近年来的一门新兴技术,已经悄然地遍布到人们生活的方方面面,人工智能已经发展成为最为火热的行业。人工智能正在引领着一场新的技术革命,人类在不久的将来将全面进入人工智能时代。在这样的时代背景下, 02-19 查看评论 阅读全文
Ai 技术 新一代人工智能新课题:神经网络的深度解析 本来想把题目取为「从炼丹到化学」,但是这样的题目太言过其实,远不是近期可以做到的,学术研究需要严谨。但是,寻找适当的数学工具去建模深度神经网络表达能力和训练能力,将基于经验主义的调参式深度学习,逐渐过渡为基于一 02-19 查看评论 阅读全文
Ai 技术 什么是“可解释的”? 可解释性AI不能解释什么 准确性与可解释性是不能同时达到的吗?来自IEEE研究员Cuntai Guan这样认为:“许多机器决策仍然没有得到很好的理解”。大多数论文甚至提出在准确性和可解释性之间进行严格区分。 神经网络是准确的,但无法解释;在计算机 02-19 查看评论 阅读全文
Ai 技术 人工智能技术怎么应用于钣金弯曲? 使用传统的折弯机来实现金属板的高精度弯曲,具有一定的挑战性。这主要是由于材料的特性决定的,其弹性根据其成分和晶粒方向而变化。因此,该过程通常需要更长的时间,因为它需要更多的知识和技能才能获得更高的准确性 02-19 查看评论 阅读全文
Ai 技术 边缘计算应用分析 5G新基建如火如荼 边缘计算将无处不在 ( 本文作者 @pony 首发于人人都是产品经理,在此特别鸣谢!) 2020年启动5G商用服务,5G时代近在眼前。本文从边缘云计算“市场潜力、应用场景、未来展望”三个方面,阐述了5G时代背景下关于边缘计算的认识与思考。 02-19 查看评论 阅读全文
Ai 技术 机器学习中常用的决策树算法技术解析 本文为大家介绍了机器学习中常用的决策树算法以及相关术语,并基于天气数据集进行决策树算法(ID3、CART算法)实现过程的手动推导。决策树是最重要的机器学习算法之一,其可被用于分类和回归问题。本文中,我们将介绍分类部分 02-19 查看评论 阅读全文
Ai 技术 人工智能领域的热门技术介绍 在刚刚过去的2019年,人工智能领域发生了颠覆性的突破,不断有热门技术迭代和实施落地。当然在AI技术的发展变化中,有技术的的爆发也有技术的消亡。盘点一下2019年人工智能三大热门技术,即强化学习、自然语言处理和计算机视 02-19 查看评论 阅读全文
Ai 技术 一文详谈机器学习的强化学习 强化学习属于机器学习中的一个子集,它使代理能够理解在特定环境中执行特定操作的相应结果。目前,相当一部分机器人就在使用强化学习掌握种种新能力。强化学习是一种行为学习模型,由算法提供数据分析反馈,引导用户逐步获取 02-19 查看评论 阅读全文
Ai 技术 机器学习过程中的通用步骤 我们在进行机器学习过程中一个通用步骤主要有以下几个方面:1)明确问题实现什么目标需要什么数据这个问题:如果公司有大量的数据,可以确定最终的目标是什么;如果没有则需要通过目标来确定数据集2)获取数据自己公司内部的数据 02-19 查看评论 阅读全文
Ai 技术 交通出行应用到了哪些AI技术 在城市交通领域,有AI红绿灯控制,街道交通智能监测、智能公交车站,以及智能高速,这些领域都已经渗透了人工智能。围绕自动驾驶和车路协同也已经在全国多个地区进入商用测试阶段。那么日常还有哪些出行场景是应用到了AI技术 02-18 查看评论 阅读全文
Ai 技术 机器学习算法的技巧分享 1.支持向量机(SVM)的C参数SVM的C参数为每个错误分类的数据点增加了代价。如果c小,则对错误分类的点的惩罚较低,因此以较大数量的错误分类为代价选择了具有较大余量的决策边界。如果c大,由于高罚分,SVM会尝试最大程度地减少 02-18 查看评论 阅读全文
Ai 技术 机器学习线性模型训练:线性回归和逻辑回归 由于高等数学底子太差的原因,机器学习无法深入学习下去,只能做一个简单的尝试者,甚至连调优也未必能算的上,不过这样也好,可以把重心放到对业务的理解上,以及业务和模型的选择上。 线性模型包括了传统的线性回归、岭回归、 02-18 查看评论 阅读全文