阿里巴巴大数据实践—数据开发平台
本文节选自《大数据之路：阿里巴巴大数据实践》已受版权保护，未经授权不得转载阿里离线数据仓库的存储和计算都是在阿里云大数据计算服务MaxCompute上完成的。数据研发人员完成需求了解和模型设计之后，进入开发环节，开发工作流如图所示：...
什么是大数据，大数据简介
1、是指无法在可承受的时间范围内用常规软件进行捕捉、管理和处理的数据集合。3、大数据加云计算被认为是继信息化和互联网后整个信息产业的第三次革命。大数据，按照我的理解比较通俗易懂的是在数据量很多很大的情况下数据处理速度需要足够快，用我们以前传统意义上的的技术比如关系型数据库mysql没办法处理或者处理起来非常复杂，必须有一些新的处理技术也就是大数据处理技术来帮助我们实现数据处理的需求。...
复旦大学大数据学院青年研究员张力：计算机视觉感知是自动驾驶系统里最关键的突破性
近日，在2022复旦大学管理学院科创周上，复旦大学大数据学院青年研究员张力，2022上海科技青年35人引领计划(35U35)获奖者张力围绕计算机视觉与自动驾驶领域进行了分享。【如果您有新闻线索，欢迎向我们报料，一经采纳有费用酬谢。报料微信关注：ihxdsb，报料QQ：3386405712】...
能源数据共享 技术安全可靠 井陉县能源大数据中心成立
9月14日，全市首个县级能源大数据中心——井陉县能源大数据中心在井陉县供电公司揭牌。这也标志着国网石家庄供电公司在区县级能源数据推广工作中迈出了重要一步。本文来自【石家庄新闻网】，仅代表作者观点。全国党媒信息公共平台提供信息发布传播服务。...
高德大数据揭秘城市“夜经济”
越夜越堵 西安钟楼成全国最热“夜间CBD”周末“狂欢夜” 西部地区成假日夜经济主力军夜色考验城市公共交通 北京成绿色出行最活跃北方城市夜间公共交通出行热度，不仅取决于人们的绿色出行意愿，更考验着城市规划与公交系统的管理水平。...
高德地图发布「明镜」系统，用 AI 和大数据为城市交通「做体检」
在 8 月 13 日的 2019 互联网+城市交通管理创新论坛上，高德地图发布了「明镜」系统，它能够基于 AI 和大数据对城市交通进行智能分析和评价诊断，而「对症下药」是其核心优势所在。最新更新的高德地图 v10.0 新版可根据用户当前场景推荐出行服务 | 官方供图...
如何从0到1搭建大数据平台
通常大数据平台的架构如上，从外部采集数据到数据处理，数据显现，应用等模块。对于大规模的非实时数据计算来讲，目前一样采用Hive和spark引擎。Hive是基于MapReduce的架构，稳定可靠，但是计算速度较慢；Spark则是基于内存型的计算，一般认为比MapReduce的速度快很多，但是其对内存性能的要求较高，且存在内存溢出的风险。Spark同时兼容hive数据源。从稳定的角度考虑，一般建议以Hive作为日常ETL的主要计算引擎，特别是对于一些实时要求不高的数据。Spark等其他引擎根据场景搭配使用。...
2022年中国大数据分析平台行业数据量、融资金额及细分市场分析
2019-2022上半年中国大数据分析行业融资金额情况2016-2021年中国金融大数据分析行业市场规模2012-2022年全球生产、获取、复制的数据量情况本文节选自华经产业研究院发布的《2022年中国大数据分析平台行业发展现状及趋势分析，技术不断迭代，市场规模逐渐攀升「图」》，如需获取全文内容，可进入华经情报网搜索查看。...
什么是BI大数据
BI全称商业智能（Business Intelligence），在传统企业中，它是一套完整的解决方案。将企业的数据有效整合，快速制作出报表以作出决策。商业智能BI在数据架构中处于前端分析的位置，其核心作用是对获取数据的多维度分析、数据的切片、数据的上钻和下钻、cube等。通过ETL数据抽取、转化形成一个完整的数据仓库、然后对数据仓库的数据进行抽取，而后是商业智能的前端分析和展示。...
精准敲诈！盗取手机大数据分析受害人身份，再确定敲诈金额，细思极恐
犯罪分子如同吸血鬼般缠住受害人不断敲诈，甚至还逼迫其向网贷平台贷款支付金钱，导致有些受害人不堪重负、精神抑郁，有些受害人妻离子散。警方回溯、剖析本案犯罪过程后，在此真诚地提醒广大网友：陌生网友要警惕，不明软件慎安装，遇到敲诈即报警，勒索钱财不转账。...
分享一些大数据分析的经典案例
乔布斯是世界上第一个对自身所有DNA和肿瘤DNA进行排序的人。时代杂志更是断言，依靠直觉与经验进行决策的优势急剧下降，在政治领域，大数据的时代已经到来；塔吉特百货就是靠着分析用户所有的购物数据，然后通过相关关系分析得出事情的真实状况。...
力争2025年产业测算规模突破3万亿元，“风口”上的大数据产业将迎哪些变革？
新华社北京11月30日电 题：力争2025年产业测算规模突破3万亿元，“风口”上的大数据产业将迎哪些变革？工信部30日对外发布《“十四五”大数据产业发展规划》。根据这个规划，预计到2025年，大数据产业测算规模突破3万亿元，年均复合增长率保持在25%左右。随着数字经济快速发展，大数据产业也迎来“风口”。发展大数据产业，将有哪些着力点？...
大数据与云计算学哪个前景更好？发展空间如何？
大数据与云计算是什么关系？二者市场发展怎么样？从应用角度来看，大数据是云计算的应用案例之一，云计算是大数据的实现工具之一。大数据分析常和云计算联系到一起，大数据和云计算是未来发展趋势所需，功能足够强大，前景很好，抓紧时间学习吧！加米谷大数据培训。...
知乎资深工程师口述：大数据平台初学者如何入门？
人们不禁发问：大数据时代，人都是在“裸奔”吗？王雨舟认为，数据的价值并不与数据规模直接相关，一家企业是否可以从数据中获取有效洞察取决于这家企业对数据的重视程度。知乎过去几年使用谷歌的GA，一个以页面和会话为核心的分析引擎，由于其无法支撑公司的数据体系，知乎在2016年1月份决定开始自研大数据平台。起初，知乎对该平台的定义就不是传统的BI系统或数据分析系统，而着重于整个数据体系的搭建，将数据贯穿知乎整个生产环境。...
甘肃庆阳打造“东数西算”大数据产业集群 数字经济聚能成势
图为庆阳市“东数西算”产业园内的秦淮数据零碳数据中心产业基地项目正在加紧建设。(资料图)安志鹏 摄2023年前三季度，庆阳地区生产总值完成823.76亿元，同比增长9.6%，连续2个季度获甘肃经济增长“贡献奖”。...