大数据共61篇
排序
PHP的PDO大对象(LOBs)
PHP PDO 大对象 (LOBs) 应用程序在某一时刻，可能需要在数据库中存储'大'数据。 '大'通常意味着'大约 4kb 或以上'，尽管某些数据库在数据达到'大'之前可以轻松地处理多达 32kb 的数据。大对象本...
2个月前NoSQL非关系型数据库简介及与关系数据库的区别
虽然关系型数据库系统很优秀，但是在大数据时代，面对快速增长的数据规模和日渐复杂的数据模型，关系型数据库系统已无法应对很多数据库处理任务。 NoSQL 凭借易扩展、大数据量和高性能及灵活的...
1年前使用Redis和Lua的原子性实现抢红包功能
数据库最终会将数据保存到磁盘中，而 Redis 使用的是内存，内存的速度比磁盘速度快得多，所以这里将讨论使用 Redis 实现抢红包。 对于使用 Redis 实现抢红包，首先需要知道的是 Redis 的功能不...
2个月前Spark Streaming的系统架构
本节首先分析传统流处理系统架构存在的问题，然后介绍 Spark Streaming 的系统架构及其工作原理和优势。 传统流处理系统架构 流处理架构的分布式流处理管道执行方式是，首先用数据采集系统接收...
2个月前Redis数据库的应用场景介绍
一、MySql Memcached架构的问题 实际MySQL是适合进行海量数据存储的，通过Memcached将热点数据加载到cache，加速访问，很多公司都曾经使用过这样的架构，但随着业务数据量的不断增加，和访问量...
41天前DEDECMS批量导入excel数据到后台文章系统的开发教程
本教程就是以把excel数据导入到织梦系统（dedecms)为例子进行批量数据导入的开发，假设把excel数据导入到织梦主表dede_archives（还有微表和附加表，这里就用主表代表这三个表）里面。 批量导入...
2个月前数据挖掘是什么？
什么是数据挖掘 数据挖掘是从大量的、不完全的、有噪声的、模糊的、随机的实际数据中，提取出蕴涵在其中的，人们事先不知道的，但是具有潜在有用性的信息和知识的过程。 用来进行数据挖掘的数据...
39天前Spark是什么？Spark和Hadoop的区别
Spark 是加州大学伯克利分校 AMP（Algorithms，Machines，People）实验室开发的通用内存并行计算框架。 Spark 在 2013 年 6 月进入 Apache 成为孵化项目，8 个月后成为 Apache 顶级项目。 Spark...
2个月前分割超大Redis数据库的方法详解
Redis数据库过大会导致内存消耗过高和性能下降。这时需要对数据库进行切分或裁剪。主要有以下两种方法: 1. 切分数据库Redis支持切分数据库为多个子数据库,每个数据库有自己的键空间。可以将大数...
1年前Spark RDD是什么？
Spark 的核心是建立在统一的抽象弹性分布式数据集（Resiliennt Distributed Datasets，RDD）之上的，这使得 Spark 的各个组件可以无缝地进行集成，能够在同一个应用程序中完成大数据处理。本节...
2个月前
