MySQL-脏读

马同学 评论

事务在高并发执行的时候可能会发生脏读、不可重复读、幻读, 隔离级别越高，越能保证数据的完整性和一致性，但是对并发性能的影响也越大

事务隔离级别 脏读 不可重复读 幻读
读未提交（read uncommitted） 是 是 是
不可重复读（read committed） 否 是 是
可重复读（repeatable read 否 否 是
串行化（serializable） 否 否 否
  • 未提交读（READUNCOMMITTED）另一个事务修改了数据，但尚未提交，而本事务中的SELECT会读到这些未被提交的数据（脏读）
  • 提交读（READCOMMITTED）本事务读取到的是最新的数据（其他事务提交后的）。问题是，在同一个事务里，前后两次相同的SELECT会读到不同的结果（不重复读）
  • 可重复读（REPEATABLEREAD）。在同一个事务里，SELECT的结果是事务开始时时间点的状态，因此，同样的SELECT操作读到的结果会是一致的。但是，会有幻读现象
  • 串行化（SERIALIZABLE）。读操作会隐式获取共享锁，可以保证不同事务间的互斥。

MySQL中默认是可重复读（repeatable read）

查看当前session事务级别 show variables like '%tx_isolation%';

查看全局事务隔离级别 show global variables like '%tx_isolation%';

相关资料

MySQL 事务隔离实验-认识：脏读、不可重复读、幻读
MySQL InnoDB四个事务级别 与 脏读、不重复读、幻读

MySQL-锁

马同学 评论

乐观锁、悲观锁、共享锁、排他锁、行锁、表锁、死锁

疑问难点

  • 什么是锁?
  • 为什么会出现锁情况?
  • 如果模拟锁情况?

基础知识

锁是计算机协调多个进程或线程并发访问某一资源的机制。锁保证数据并发访问的一致性、有效性；锁冲突也是影响数据库并发访问性能的一个重要因素。锁是Mysql在服务器层和存储引擎层的的并发控制。

加锁是消耗资源的，锁的各种操作，包括获得锁、检测锁是否是否已解除、释放锁等。

相关资料

MySQL-InnoDB-锁概念的理解
MySQL锁总结

mysql 死锁模拟测试
MySQL单表模拟锁和事务的几个场景

http-https代理之AnyProxy

马同学 评论

安装部分

  1. 安装node.js
  2. npm install -g anyproxy

命令使用

启动anyproxy服务: anyproxy -i 加i参数可以抓取https
Tip: 关于https在iphone中需要设置信任: [设置] -> [通用] -> [关于本机] -> [证书信任设置]

手中中安装ca证书-启动anyproxy后访问电脑中的局域网ip:8002, 在打开的页面中右侧有RootCA文件下载或手机扫描二维码下载安装.

筛选部分

  • 域名筛选 将域名放置右侧筛选输入框中.

相关资料

AnyProxy抓取http/https请求
Python爬虫五：微信公众号爬虫-使用AnyProxy

人人商城_Base_EweiShopV2Model_not found

马同学 评论

请求地址: app/index.php?i=3&c=entry&m=ewei_shopv2&do=mobile&r=oilrebate.register
错误信息: Fatal error: Class 'Base_EweiShopV2Model' not found in /var/www/renren/addons/ewei_shopv2/core/model/oilcarduser.php on line 13
错误备注: windows-10 phpstudy运行正常 laradock中运行报错.

  • include
  • include_once
  • require
  • require_once

关于include函数

php.ini 关于包含文件可配置项: include-path

查看脚本包含过那些文件get_required_files() return array

测试代码: svn://svn.majianwei.com/less/_php phpstudy 与 laradock 运行都正常.

人人商城相关文件及代码片段

  • renren\addons\ewei_shopv2\core\model\oilcarduser.php
if (!defined('IN_IA')) {
    exit('Access Denied');
}
require_once 'base.php';
class Oilcarduser_EweiShopV2Model extends Base_EweiShopV2Model
{
...
  • renren\addons\ewei_shopv2\plugin\oilrebate\core\mobile\register.php
if (!defined('IN_IA')) {
    exit('Access Denied');
}

require_once 'base.php';
require_once 'Captcha.php';
class Register_EweiShopV2Page extends Base_EweiShopV2Page
{
...

ab-压力测试-laradock

马同学 评论
  1. docker-compose build apache2
  2. docker run -it --name apache2 --net=host laradock_apache2 bash
  3. ab -n 100 -c 10 http://test.com/
  • 其中－n表示请求数，－c表示并发数
  • Requests per second: 19.66 [#/sec] (mean) 吞吐率 LR 中的每秒事务数，后面括号中的 mean 表示这是一个平均值
  • Time per request: 5087.180 [ms] (mean) 用户平均请求等待时间，大家最关心的指标之二，相当于 LR 中的平均事务响应时间，后面括号中的 mean 表示这是一个平均值
  • Time per request: 50.872 [ms] (mean, across all concurrent requests) 服务器平均请求处理时间，大家最关心的指标之三

相关资料

ab工具
apahce的ab工具测试nginx服务

实例1-python获取接口数据保存数据库

马同学 评论

在这个需求中需要处理的问题.

  • 获取的数据如果统计总的条数? 数据类型有哪些?
  • 内置的模块、函数如何查看?
  • 如何查看变量类型?
  • json数据如何转换成python指定的数据类型?
  • python如何连接数据库保存数据?
  • 获取去的数据和保存的数据如何保证唯一不重复?
  • 如何遍历list、dict数据类型?
  • 如何区分是内置模块还是自己安装的模块?
    继续阅读