
分布式文件系统HDFS及其简单引用
在现代的企业环境中,单机容量往往无法存储大量数据,需要跨机器存储。统一管理分布在集群上的文件系统称为分布式文件系统。HDFSHDFS(Hadoop Distributed File System)是 Apache Hadoop 项目的一个子项目. Hadoop 非常适于存储大型数据 (比如 TB 和 PB), 其

Hive 与 Spark的爱恨情仇恩怨交织
最近在面试一些应聘大数据岗位的技术小伙伴时,发现不少朋友对业界 所谓的hive on spark和spark on hive分不太清楚;同时在日常工作中,也因为对这两个技术术语的理解不太一致,影响了进一步的技术交流。所以在这里,明哥想跟大家聊聊 hive 和 spark的爱恨情

大数据开发:Java线程与进程差异是这样?
在JAVA中几乎任何的操作系统都支持运行多个任务,通常一个任务就是一个程序,而一个程序就是一个进程。当一个进程运行时,内部可能包括多个顺序执行流,每个顺序执行流就是一个线程。一、什么是进程进程是资源(CPU、内存等)分配的基本单位,它是程序执行时

火山引擎正式公布大数据研发治理套件
在数字化程度日益加深的今天,数据对企业增长的作用越来越重要。随着十九届四中全会正式把数据列为国家新兴基础性战略资源和生产要素,如何使用并发挥数据的价值,是当下企业所面临的主要问题。然而企业的数字化转型并非一蹴而就,需要在组织、业务流程和技

大数据安全分析之大数据技术有何优势
在数字化程度日益加深的今天,数据对企业增长的作用越来越重要。随着十九届四中全会正式把数据列为国家新兴基础性战略资源和生产要素,如何使用并发挥数据的价值,是当下企业所面临的主要问题。然而企业的数字化转型并非一蹴而就,需要在组织、业务流程和技

学大数据确定要会Java开发吗?
Java是目前使用广泛的编程语言之一,具有的众多特性,特别适合作为大数据应用的开发语言。Java语言功能强大和简单易用,不仅吸收了C++语言的各种优点还摒弃了C++里难以理解的多继承、指针等概念。Java跨平台应用能力,比C、C++更易用更容易上手。同时还具有

企业数据应用的数据还在驱动阶段
而随着企业业务数据的不断丰富,加上大数据和人工智能技术的成熟和应用,企业管理者们在迈进DT时代后又开始了新一轮的探索:在应对海量原始业务数据无法直接被业务使用的问题时,业务部门根据需求自建大数据团队以及相应的数据处理能力,通过汇聚、清洗、建

数据技术将在智慧城市中释放新的价值
显然,数据现在是我们所有生活的核心,在过去十年中,智能手机的蓬勃发展推动了数据的发展。未来几年,数百万种不同类型的传感器将产生大规模的数据。这些数据可能非常丰富且功能强大,是迄今为止无法预料的用例,但是为了起作用,需要对其进行有效的处理。

加快数智化转型 中国移动云游戏引领5G时代新玩法
11月1日,2021中国移动全球合作伙伴大会在广州召开。中国移动打造了5G+大型数智化展馆,全方位构建了网络无所不达、算力无处不在、智能无所不及的数智化全场景沉浸式体验生态。中国移动云游戏作为数智领域创新产品,在展会上呈现了优质经典的游戏内容,生动

大咖共探万物智联时代风云!Techo TVP 物联网开发者峰会圆满落幕
2020年,物联网连接数首次超过了非物联网连接数,我们已经从万物互联时代迈向万物智联时代。那么,下一个物联网产业的增长点会在哪里?5G、边缘计算、AI 等新兴技术的发展,将为物联网的发展带来哪些机遇?2021年10月17日,由 腾讯云TVP 主办的第三届 Techo T