-
Apache Hive VS Spark:不同目的,同样成功
所属栏目:[MySql教程] 日期:2019-10-17 热度:153
Hive和Spark凭借其在处理大规模数据方面的优势大获成功,换句话说,它们是做大数据分析的。本文重点阐述这两种产品的发展史和各种特性,通过对其能力的比较,来说明这两个产品能够解决的各类复杂数据处理问题。 什么是Hive? Hive是在Hadoop分布式文件系统[详细]
-
「内存数据库」调整插入和数据负载的HANA性能
所属栏目:[MySql教程] 日期:2019-10-17 热度:154
插入和数据加载将写入新数据,而SELECT、UPDATE或DELETE等其他操作必须对现有数据进行操作。 因此,典型的性能因素是部分不同的。如果你想提高插入和数据加载的性能,你可以考虑以下方面: Area Details Lock waits 参见1999998,如果需要,优化锁等待情况[详细]
-
MongoDB与MySQL:如何选择
所属栏目:[MySql教程] 日期:2019-10-17 热度:160
MongoDB和MySQL分别是领先的开源NoSQL和关系数据库。哪个最适合您的应用程序? 在1990年代的互联网泡沫时期,用于Web应用程序的一种通用软件堆栈是LAMP,它最初代表Linux(OS),Apache(Web服务器),MySQL(关系数据库)和PHP(服务器编程语言)。MySQL是首选的数[详细]
-
Redis 多方式实现计数器功能
所属栏目:[MySql教程] 日期:2019-10-17 热度:197
计数器在很多网站中都进行了广泛的应用,比如文章的点赞数、页面的浏览数、网站的访客数、视频的播放数等等。在这篇文章里,我会使用 Redis 的三种数据类型,来分别实现计数器的功能。 请跟随我一起来看看吧。 使用字符串键 下面代码演示了如何利用 Redis[详细]
-
亚马逊彻底去掉 Oracle 数据库:迁移完成
所属栏目:[MySql教程] 日期:2019-10-17 热度:182
2019 年 10 月 15 日,AWS 的首席布道者 Jeff Barr 在官方博客发布标题为《迁移完成亚马逊的消费者业务部关闭最后的 Oracle 数据库》的文章,以下内容由云头条编译发布。 在亚马逊工作的 17 年间,我发现工程团队的同事们永远不满足于良好的现状。他们会定[详细]
-
干货!MySQL DAL中间件总结
所属栏目:[MySql教程] 日期:2019-10-11 热度:89
1.前言 mysql作为互联网公司都会用到的数据库,如果在使用过程中出现性能问题,会采用mysql的横向扩展,使用主从复制来提高读性能,要是解决写入问题,需要进行分库分表。本文不会去介绍mysql的高可用,需要了解Mysql高可用架构相关的请戳浅谈MySQL集群高[详细]
-
代码详解:使用Python从不同表格中提取数据
所属栏目:[MySql教程] 日期:2019-10-10 热度:180
常用的表格数据存储文件格式CSV,Microsoft Excel,Google Excel 。 Python通常称为粘合语言。这个名称归因于人们逐渐开发出的大量接口库和特征,也得益于广泛的使用和良好的开源社区。这些接口库和特征能直接访问不同的文件格式,还可以访问数据源如数据[详细]
-
5分钟使用存储过程,构建百万测试数据
所属栏目:[MySql教程] 日期:2019-10-10 热度:116
一、怎么创建测试数据 如果你会编程语言,那么你可以使用java、python、php等等语言通过对应的工具包操作数据库来完成测试数据的构建。 如果你不会这些语言,恰好你又会一些sql语句,使用存储过程完成测试数据构造是再好不过了。 并且存储过程就是sql脚本[详细]
-
关于MySQL数据库监控指标总结:缓冲池使用情况
所属栏目:[MySql教程] 日期:2019-10-10 热度:94
如果你的数据库运行缓慢,或者出于某种原因无法响应查询,技术栈中每个依赖数据库的组件都会遭受性能问题。为了保证数据库的平稳运行,你可以主动监控以下这个与性能及资源利用率相关的指标:缓冲池使用情况。 缓冲池使用情况 MySQL 默认的存储引擎 InnoDB[详细]
-
关于数据库备份恢复方面的15个建议,值得重视
所属栏目:[MySql教程] 日期:2019-10-10 热度:53
概述 数据是一个互联网公司的命脉,数据库的安全以及备案的完整性是至关重要的,所以我们需要在工作中要很熟练的掌握数据的备份与恢复,这也是一个合格的运维DBA必须具有的职业技能. 下面针对数据库备份这块提几个建议。 Mysql 备份过程 1、在二级复制服务[详细]
-
关于MySQL数据库配置优化的15条建议
所属栏目:[MySql教程] 日期:2019-10-10 热度:90
概述 今天主要分享一下关于mysql数据库在配置上的15条建议,仅供参考。 Mysql 配置优化建议 1、使用 innodb_flush_method=O_DIRECT 来避免写的时候出现双缓冲区。 2、避免使用 O_DIRECT 和 EXT3 文件系统 这会把所有写入的东西序列化。 3、分配足够 innodb[详细]
-
小白学MySQL要多久?我整理了10多个问题的答案
所属栏目:[MySql教程] 日期:2019-10-10 热度:62
这是一个偶然碰到的问题,想想蛮有意思,就准备写一篇文章做下分析。 首先啰嗦下学习MySQL的一些背景:MySQL作为目前最为活跃热门的开源数据库之一,以低成本和简易操作的组合方案在互联网企业中被广泛采用而大放异彩。在炙手可热的BAT中,MySQL正被大量使[详细]
-
中国自研数据库打破西方垄断
所属栏目:[MySql教程] 日期:2019-10-09 热度:134
中国基础技术,再破外国垄断。 而且新近提交成绩,大幅刷新之前纪录,斩获全球第一。 荣誉属于阿里巴巴,属于蚂蚁金服。 十一期间,权威机构国际事务处理性能委员会(TPC)官网披露,阿里巴巴自主研发的金融级分布式关系数据库OceanBase,在TPC-C基准测试[详细]
-
公司有一台很重要SQL数据库,如何实现数据库实时同步?
所属栏目:[MySql教程] 日期:2019-10-09 热度:117
一、客户需求 客户现在有一个需求,公司有一台很重要SQL数据库,怕有一天服务器或者系统崩溃,导致所有SQL数据库数据丢失,客户想把数据库数据,通过某种方式将数库进行实时同步到另外一台服务器上,这样可以做个backup。 那客户这个需求如何实现呢? 二、[详细]
-
OceanBase如何获得TPC-C测试第1名?
所属栏目:[MySql教程] 日期:2019-10-09 热度:82
TPC-C是TPC组织(国际事务性能委员会)制定的关于商品销售的订单创建和订单支付等的基准测试标准,是数据库联机交易处理系统的权威基准测试标准。 蚂蚁金服自研的分布式关系数据库OceanBase获得TPC-C测试第一名后,引起了大量关注,今天,我们邀请了OceanBas[详细]
-
MySQL中的主键和rowid,看似简单,其实有一些使用陷阱需要注意
所属栏目:[MySql教程] 日期:2019-10-09 热度:173
大家在MySQL中我们可能听到过rowid的概念,但是却很难去测试实践,不可避免会有一些疑惑,比如: 1)如何感受到rowid的存在 2)rowid和主键有什么关联关系 3)在主键的使用中存在哪些隐患 4)如何来理解rowid的潜在瓶颈并调试验证 今天要和大家一起讨论这[详细]
-
深入剖析 MySQL 索引和 SQL 调优实战
所属栏目:[MySql教程] 日期:2019-09-29 热度:198
MySQL索引 MySQL支持诸多存储引擎,而各种存储引擎对索引的支持也各不相同,因此MySQL数据库支持多种索引类型,如BTree索引,哈希索引,全文索引等等。 为了避免混乱,本文将只关注于BTree索引,因为这是平常使用MySQL时主要打交道的索引。 MySQL官方对索[详细]
-
MySQL数据库监控指标之执行性能总结
所属栏目:[MySql教程] 日期:2019-09-29 热度:197
概述 如果你的数据库运行缓慢,或者出于某种原因无法响应查询,技术栈中每个依赖数据库的组件都会遭受性能问题。为了保证数据库的平稳运行,你可以主动监控与性能及资源利用率相关的指标--查询执行性能。 查询性能 MySQL 用户监控查询延迟的方式有很多,既[详细]
-
详解MySQL数据库监控指标之连接状态
所属栏目:[MySql教程] 日期:2019-09-29 热度:182
概述 如果你的数据库运行缓慢,或者出于某种原因无法响应查询,技术栈中每个依赖数据库的组件都会遭受性能问题。为了保证数据库的平稳运行,你可以主动监控数据库的连接情况。 连接情况 监控客户端连接情况相当重要,因为一旦可用连接耗尽,新的客户端连接[详细]
-
高并发环境下如何让Redis和MySQL保持数据统一
所属栏目:[MySql教程] 日期:2019-09-29 热度:184
业务场景 在高并发的业务场景下,数据库大多数情况都是用户并发访问最薄弱的环节。所以,就需要使用redis做一个缓冲操作,让请求先访问到redis,而不是直接访问MySQL等数据库。 这个业务场景,主要是解决读数据从Redis缓存,一般都是按照下图的流程来进行[详细]
-
阿里面试MySQL灵魂拷问20题,Java程序员秋招必会的8个知识点
所属栏目:[MySql教程] 日期:2019-09-29 热度:121
对于程序员来说,面试内容一般分为两个部分:编程面试题部分 + 数据库面试题部分。 据不完全调查,作为数据库中的主流选择 MySQL 的薪资待遇正在逐年增加,而且似乎不仅仅是程序员在学,就连很多产品经理和运营人也开始学习 MySQL 去分析数据。 对于技术面[详细]
-
记一次生产数据库sql优化案例--23秒优化到0.9秒
所属栏目:[MySql教程] 日期:2019-09-29 热度:138
新项目业务人员反馈说最近订单发放模块经常很卡,导致总是有锁的情况发生,在用慢查询和开启锁监控观察后发现实际上只是单条查询慢造成的阻塞锁,这里考虑先对单条查询做一下优化。 一、优化前的表结构、数据量、SQL、执行计划、执行时间 1. 表结构 A表有9[详细]
-
频繁插入(insert)的业务,用什么存储引擎更合适? | 数据库系列
所属栏目:[MySql教程] 日期:2019-09-29 热度:137
继续回答星球水友提问: 沈老师,MyISAM只支持表锁,但网上文章却说,在并发插入量比较大的时候,比较适合使用MyISAM,这矛盾吗? 这个问题,涉及MySQL表锁的一些细节,借着这个问题,系统性说下表锁的所以然。 画外音:网上不少文章只说结论,不说为什么,[详细]
-
详解Oracle中三大类型与隐式数据类型转换
所属栏目:[MySql教程] 日期:2019-09-29 热度:192
在某些情况下,Oracle Server 会收到数据类型与预期的数据类型不同的数据。发生这种情况时,Oracle Server 可自动将该数据转换为预期的数据类型。这种数据类型转换可以由Oracle Server 隐式完成,也可以由用户显式完成。 在MySQL跟Oracle中,如果存在隐式[详细]
-
几千万记录,数据库表结构如何平滑变更?
所属栏目:[MySql教程] 日期:2019-09-25 热度:69
继续回答知识星球水友提问。 问题域:数据量大、并发量高场景,如何在流量低峰期,平滑实施表结构变更? 画外音,一般来说,是指增加表的属性,因为: 如果是减column,升级程序不使用即可; 如果是修改column,程序兼容性容易出问题; 首先,一起看下有哪些[详细]