Max's Blog

在我们设计和使用 API 授权的时候，经常会接触到如下内容： 1Authorization : Bearer Tokenxxxxxx 为什么前面会有个 Bearer，直接弄成这样不是更简单么。 1Authorization : Tokenxxxxxx 这是因为 W3C 的 HTTP 1.0 规范，具体见 10.2 和 11 。Authorization 的格式是： 1Authorization: <type> <authorization-parameters> Bearer 是授权的类型，常见的授权类型有： Basic 用于 http-basic 认证； Bearer 常见于 OAuth 和 JWT 授权； Digest MD5 哈希的 http-basic 认证 (已弃用) AWS4-HMAC-SHA256 AWS 授权 …

前言 前面的一篇文章已经介绍了 docker-compose 搭建 Prometheus + Grafana 服务。当时实现了监控服务器指标数据，是通过 node_exporter。Prometheus 还可用来监控很多服务，比如常见的 MySQL。本文就介绍如何通过 mysqld_exporter 来监控 MySQL 指标。 下载安装包12345cd /optwget https://github.com/prometheus/mysqld_exporter/releases/download/v0.14.0/mysqld_exporter-0.14.0.linux-amd64.tar.gztar xvf mysqld_exporter-0.14.0.linux-amd64.tar.gzmv mysqld_exporter-0.14.0.linux-amd64 mysqld_exportermv /opt/mysqld_exporter /usr/local/ 创建监控账号并授权 在需要监控的 mysql 上创建账号并授权。1234# 创建用户CREATE USER ' ...

前言 PrometheusPrometheus 是有 SoundCloud 开发的开源监控系统和时序数据库，基于 Go 语言开发。通过基于 HTTP 的 pull 方式采集时序数据，通过服务发现或静态配置去获取要采集的目标服务器，支持多节点工作，支持多种可视化图表及仪表盘。 贴一下官方提供的架构图： Pormetheus 几个主要模块有，Server，Exporters，Pushgateway，PromQL，Alertmanager，WebUI 等，主要逻辑如下： Prometheus server 定期从静态配置的 targets 或者服务发现的 targets 拉取数据。 当新拉取的数据大于配置内存缓存区时，Prometheus 会将数据持久化到磁盘（如果使用 remote storage 将持久化到云端）。 Prometheus 配置 rules，然后定时查询数据，当条件触发时，会将 alert 推送到配置的 Alertmanager。 Alertmanager 收到警告时，会根据配置，聚合、去重、降噪等操作，最后发送警告。 可以使用 API，Prometheus Consol ...

日志与我们日常的项目开发有着密切关系，日志是我们分析和排查问题的重要依据。今天就来简单总结下笔者个人对于项目中日志的一些经验。 1. 日志文件规范 1.1 日志文件命名 日志文件名格式：logname_YY-MM-dd_hh.[roll-count].log例子：api_2022-06-20_12.0.log 1.2 日志滚动大小 一般要限制每个日记文件的大小，需日志滚动。一般常设置文件大小为 100M。Linux 对于小文件存在 Inodes 限制，所以当日志量大时，日志文件大小不宜设置的过小，否则将会产生大量日志滚动，造成日志文件过多，造成 Inodes 报警。并且最好定期清理过期的日志文件。 1.3 日志文件存放位置 日志文件统一保存在服务器的目录中，这个目录在团队内部最好是固定的，且有一定规律。例如日志的根目录均为 /data/logs，项目的日志可以放在/data/logs/app/order-service/ 目录下，nginx 的日志可以放在 /data/logs/service/nginx/ 目录下面。统一的日志存放路径便于后续接入日志平台与运维自动化，否则日志采集 ...

概述beanstalkd 是一个简单快速的分布式工作队列系统，协议基于 ASCII 编码运行在 TCP 上。其最初设计的目的是通过后台异步执行耗时任务的方式降低高容量 Web 应用的页面延时。其具有简单、轻量、易用等特点，也支持对任务优先级、延时 / 超时重发等控制，同时还有众多语言版本的客户端支持，这些优点使得它成为各种需要队列系统场景的一种常见选择。 beanstalkd 优点 如他官网的介绍，simple&fast，使用非常简单，适合需要引入消息队列又不想引入 kafka 这类重型的 mq，维护成本低；同时，它的性能非常高，大部分场景下都可以 cover 住。 支持持久化 支持消息优先级，topic，延时消息，消息重试等 主流语言客户端都支持，还可以根据 beanstalkd 协议自行实现。 beanstalkd 不足 无最大内存控制，当业务消息极多时，服务可能会不稳定。 官方没有提供集群故障切换方案(主从或哨兵等)，需要自己解决。 beanstalkd 重点概念 job 任务，队列中的基本单元，每个 job 都会有 id 和优先级。有点类似其他消息队列中的 mes ...

概述 本文笔者主要介绍 nginx 信号管理方面的知识及实践操作，内容包括 nginx 信号管理体系，nginx 信号管理的常见操作，通过具体案例来分析，如 nginx 的 reload，热升级以及日志切割。 nginx 命令行管理nginx 的管理可以通过两种方式实现。一种是通过命令行，下面是 nginx 常用的操作命令， [email protected]:~# nginx -hnginx version: nginx/1.10.3 (Ubuntu)Usage: nginx [-?hvVtTq] [-s signal] [-c filename] [-p prefix] [-g directives]Options: -?,-h : this help -v : show version and exit -V : show version and configure options then exit -t : test configurati ...

在日常开发中，邮件发送是个比较常见的场景。因此出现了很多相关的软件和服务，各大云厂商也推出自己的邮件服务。今天笔者就像大家介绍一种常见的组合，AWS 的邮件服务 SES 与邮件服务器 postfix 的配置和使用方法。 概述 什么是 AWS-SES Amazon Simple Email Service (SES) 是一种经济高效、灵活且可扩展的电子邮件服务，使开发人员能够从任何应用程序中发送电子邮件。 您可以快速配置 Amazon SES 以支持多种电子邮件使用案例，包括交易、营销或群发电子邮件通信。 什么是 postfix Postfix 是一种电子邮件服务器，它是由任职于 IBM 华生研究中心（T.J. Watson Research Center）的荷兰籍研究员 Wietse Venema 为了改良 sendmail 邮件服务器而产生的。它是为了改良 sendmail 产生的，同时它兼容 sendmail，是比较常用的一种邮件服务器。 开通 Amazon Simple Email Service (SES)服务 创建一个 identity 此处我们为了演示方便，使用 ...

简介mydumper 是一款开源的 MySQL 逻辑备份工具，主要由 C 语言编写。与 MySQL 自带的 mysqldump 类似，但是 mydumper 更快更高效。mydumper 的一些优点特性： 轻量级 C 语言开发 支持多线程备份数据，备份后按表生成多个备份文件 支持事务性和非事务性表一致性备份 支持将导出的文件压缩，节约空间 支持多线程恢复 支持已守护进程模式工作，定时快照和连续二进制日志 支持按指定大小将备份文件切割 数据与建表语句分离 下载安装 安装方式非常多，以下介绍几种常见的方式。 Ubuntu 中自带了 myloader sudo apt-get install mydumper 使用 deb 包安装，以 Ubuntu 为例 apt-get install libatomic1wget https://github.com/mydumper/mydumper/releases/download/v0.11.5/mydumper_0.11.5-1.$(lsb_release -cs)_amd64.deb dpkg -i mydump ...

有些时候我们需要对 git 仓库中的项目进行一些迁移，如从 a 账号迁移到 b 账号下，从 github 平台迁移到内部的 gitlab 平台等。一般平台会自带 migrate 或者 import 的功能，可以很方便的进行仓库的迁移。当然，我们也可以自行进行迁移，当需要迁移的项目比较多时，脚本进行迁移更快捷。 下面来看看如何进行手动迁移，同时在迁移后，保留原项目的分支和 tag，以及提交记录等。 先将待迁移的项目 clone 下来 12git clone --mirror <url_of_old_repo>cd <name_of_old_repo> 确保新的空仓库已经创建完成，然后即可将项目推送到新的空仓库中。 123git remote rm origingit remote add origin <url_of_new_repo>git push origin --mirror 大功告成，可以看到新的仓库中，项目的分支和 tag，以及提交记录等，都会保留。

laravel 源码分析具体注释见 https://github.com/FX-Max/source-analysis-laravel 前言 队列 (Queue) 是 laravel 中比较常用的一个功能，队列的目的是将耗时的任务延时处理，比如发送邮件，从而大幅度缩短 Web 请求和响应的时间。本文我们就来分析下队列创建和执行的源码。 本文笔者基于 laravel 5.8.* 版本 队列任务的创建 先通过命令创建一个 Job 类，成功之后会创建如下文件 laravel-src/laravel/app/Jobs/DemoJob.php。 123> php artisan make:job DemoJob> Job created successfully. 下面我们来分析一下 Job 类的具体生成过程。 执行 php artisan make:job DemoJob 后，会触发调用如下方法。 laravel-src/laravel/vendor/laravel/framework/src/Illuminate/Foundation/Providers/Artisa ...