Golang后端面试题目

...通过面试发现了自己的很多问题，还是要多多总结 总结 目录...阅读全文

Kong 发布 API 协作设计工具 Insomnia Designer

帮助他们采用和适应分布式架构，同时提升开发的质量和速度。 Insnia Designer 的诞生是为了让用户能够模仿团队的工作方式来构建工作流。Insomnia Designer 以 DevOps、CI/CD 和 GitOps 最佳实践为基础构建，能够自动生成 Kubernetes 和 Kong 的声明式配置，使繁琐的流程自动化，并将配置飘移(Configuration Drift)的风险降到最低。 同时，为了提高可视化效果以及协作性，Insomnia Designer 提供了一个文档列表，用于查看和管理 API 规范。此外还提供了用于 API 设计的详细消息以及关于它们的整个 Git 历史记录（已集成 Git）。这样的好处在于用户可以确保对所有 REST 和 GraphQL API 规范文...阅读全文

Irssi: 命令行下的 IRC 客户端

> # 向某人说话（不新开窗口） /notice # 向指定人发出注意消息 /me <动作>，在当前聊天室窗口中做出动作。 如做出晕倒动作：/me 晕倒 /away # 留下信息说明暂时离开，别人向你发出私聊时将会返回此消息，再重新输入 /away（不指定参数）则解除离开状 /ignore # 忽略某人的聊天内容 /set autolog on # 自动保存聊天记录 退出频道 /part # 退出一个频道，不加频道名退出当前频道，后面可以跟退出原因。 /wc # 离开当前频道 退出服务器 /quit or /exit # 退出 irssi，结束IRC会话 /disconnect...阅读全文

三种SSL证书之间有什么区别

SSL指的是安全套接层协议（以及传输层协议TLS），位于 TCP/IP 协议与各种应用层协议之间，为数据通讯提供安全支持。 ssl 在市面上多指的是安全证书，SSL证书是数字证书的一种，因为配置在服务器上，也称为服务器证书。 数字证书在广义上可分为：个人数字证书、单位数字证书、单位员工数字证书、服务器证书、VPN证书、WAP证书、代码签名证书和表单签名证书。我们这里介绍SSL证书的类型与区别。 DV（域名型）SSL证书：只验证域名，适合个人网站、博客等站点使用；在网络黑客、钓鱼威胁层出不穷，域名型SSL数字证书可有效保护通过互联网所发送的数据，为网络账户登录、邮件等机密信息资讯提供安全防护。安全级别较低。  OV（企业型）SSL证书：验证网站所属单位身份，适合于中型企业级用户使用；企业型证...阅读全文

2017 Linux 内核开发报告 Linux统治着计算机世界

-Day 测试服务在到达 Linux 内核前很久就发现了错误。此服务会自动从 Linux 内核邮件列表 (LKML) 中提取修补程序并对其进行测试。这意味着在影响用户之前，许多问题都会被解决。 4.9 开发周期是内核历史上最繁忙的一次，其变化比任何时候都要多。不过，4.12 涉及到的开发人员数量和首次贡献者的数量创造了一个新的记录。经过这么多年，内核开发社区成长迅速。 Kroah-Hartman 和 Corbet 总结说：“Linux 内核是迄今为止最大和最成功的开源项目之一，巨大的变革率和个人贡献者人数显示，它拥有一个充满活力和活跃的社区，参与其中的开发着和公司的数量也在增加；到目前为止，开发过程已经证明是能够无障碍地扩展到更高的速度。“ 来自：ZDNet...阅读全文

Kubernetes 使用 PodPreset 注入信息到 Pods_哎_小羊的博客

文章目录 1、PodPreset 介绍2、环境、软件准备3、K8s 启用 PodPreset 配置4、PodPreset 注入信息示例4.1、匹配指定 Pod 加载配置4.2、匹配某个 Namespace 下所有 Pod 加载配置 1、PodPreset 介绍 PodPreset 是一种 K8s API 资源，用于在创建 Pod 时注入其他运行时需要的信息，这些信息包括 secrets、volume mounts、environment variables 等，我们可以使用标签选择器来指定某个或某些 Pod，来将 PodPreset 预设信息应用上去。使用 PodPreset 的好处就是我们可以将一些常用 Pod 预设信息配置为模板，这样就不需要显式为每个 Pod 提供所有信息，简化...阅读全文

百度运维工程师挖矿实录：四个月用155台服务器挖矿赚10万判3年

资源，从而获取虚拟货币的一种程序，需要较高的硬件配置及用电量。 而单凭一个矿工的力量是挖不到比特币的。于是“安某”便想到可以利用自己的职务之便利用百度的服务器来开启自己的发家致富之路，只是他可能没想到的是事情会败露的这么快。 那么，他具体是怎么做的呢？ 首先，他用自己的工作账户上传了一个压缩文件 miner.tar.gz ，其中包含一个名为 java_4u3 的脚本， 而这个脚本可以自动执行解压缩、创建目录、删除目录、自动连接代理进行网络交换，达到控制服务器的目的。 然后，编译了一个挖矿程序，并将上述程序部署非法控制了百度的 155 台服务器上，利用公司为其配备的苹果电脑上的 iterm 软件控制所有服务器的中控机，通过中控机上传挖矿脚本，并通过 iterm 软件发出批量下载指令，让 200...阅读全文

Docker 17.06 社区版发布

="_blank" href="http://nginx.com/" >nginx.com.

Thank you for using nginx.

Ceph 12.2.0 正式版本发布， 代号 Luminous

。 RBD import 和 copy命令现在可以检测稀疏并保留稀疏区域。 快照可以包含创建时间戳。 为RBD客户端指定了用户授权功能简化。 使用RBD功能配置文件的一般语法是“mon’profile rbd’osd’profile rbd [-read-only] [pool = {pool-name} [，…]]’”。 CephFS 多MDS已经稳定，主MDS数量可以根据需求进行调整。 CephFS目录分片已经稳定的，默认情况下在新的文件系统上启用。 要使其在现有的文件系统上启动，要使用“ceph fs set allow_dirfrags”。大型或非常繁忙的目录被分割并（可能）自动分布在多个MDS后台驻留程序中。 在不需要自动负载均衡的情况下，目录子树可以明确固定到特定的...阅读全文

为何说微软不会基于Linux内核重构Windows

播，Windows 和 Linux 的开放源码贡献者能够共享两个生态系统的精华。 2.兼容性 目前尚不清楚如果 Windows 用户空间从 NT 迁移到 Linux 内核，是否能够保持良好的兼容性，特别是那些拥有关键任务应用、付费获取的东西。 Windows 没有像 Linux 那样严格区分内核空间和用户空间。NT 内核大约有 400 个已记录的 syscalls 以及大约 1700 个已记录的 Win32 API 调用。对于重新部署从而确保 Windows 开发者和他们工作达到预期的兼容性这是非常庞大的工作量，这完全超过了 Wine 提供的修正贡献。 Linux 在 arm64 上只有 313 个 syscalls，而另一个原因是微软已经从 WSL 1 中的 syscall 翻译层...阅读全文

监控Kubernetes集群证书过期时间的三种方案 - OSCHINA

前言 Kubernetes 中大量用到了证书, 比如 ca证书、以及 kubelet、apiserver、proxy、etcd等组件，还有 kubeconfig 文件。 如果证书过期，轻则无法登录 Kubernetes 集群，重则整个集群异常。 为了解决证书过期的问题，一般有以下几种方式： 大幅延长证书有效期，短则 10年，长则 100 年； 证书快过期是自动轮换，如 Rancher 的 K3s，RKE2 就采用这种方式； 增加证书过期的监控，便于提早发现证书过期问题并人工介入 本次主要介绍关于 Kubernetes 集群证书过期的监控，这里提供 3 种监控方案： 使用 Blackbox Exporter 通过 Probe 监控 Kubernetes apiserver 证书过期时间； 使...阅读全文

为什么 Django 能持续统治 Python 开发世界

ATOM feeds 使用 Django，你可以通过创建一个简单的Python类来快速创建 RSS 和 ATOM feeds。 在数据库中自动创建表 如果你的数据库中缺失了某一个表，你可以通过执行 Django 的迁移命令来自动创建它。 容易的数据迁移 数据迁移是 Django 中最有用的功能之一。通过使用 Django 的迁移方法，你可以在短时间内改变一个数据库模式。同样也容易就能跟踪你的数据库模式和相关的改变。为数据迁移所做的命名能够帮助你进行版本控制，还有很多选项可以用来合并版本和进行修改。 安全性 Django非常安全，该框架默认情况下可以防止 XSS 攻击、CSRF 攻击，SQL 语句注入、点击劫持、用户管理、cookies、邮件标头注入、密码攻击、目录遍历攻击等等。 Django有一个...阅读全文

Cortex: 高可用和水平扩展Prometheus监控系统

# ... remote_write: - url: http://cortex1:9009/api/prom/push # Prometheus three global: # ... external_labels: cluster: tree # ... remote_write: - url: http://cortex1:9009/api/prom/push 使用docker-compose启动所有服务。docker-compose -f docker-demo/docker-compose.yaml up 转到http://localhost:3000/explore，使用凭据admin/admin登录，然后选择cortex3作为数据源。运行示例查询（例如up）Cortex将返回所有3个Prometheus容器的...阅读全文

Calico 介绍、原理与使用-腾讯云社区

用的也比较多，所以要比flannel的方式好，而这些路由信息都是由BGP client传输。为什么叫边界网关协议呢？和 flannel host-gw 工作模式基本上一样，BGP是一个边界路由器，主要是在每个自治系统的最边界与其他自治系统的传输规则，而这些节点之间组成的BGP网络是一个全网通的网络，这个网络就称为一个BGP Peer。启动文件放在 /opt/cni/bin 目录下，/etc/cni/net.d 目录下记录子网的相关配置信息。代码语言：javascript复制$ cat /etc/cni/net.d/10-calico.conflist { "name": "k8s-pod-network", "cniVersion": "0.3.0", "plugins...阅读全文

Ruby 2.5.0 稳定版发布

NEWS 或提交记录以查看详情。 自 Ruby 2.4.0 以来，已有 6158 个文件更改，348484 行增加(+)，82747 行删减(-)！ 圣诞快乐！享受你 Ruby 2.5 的编程之旅吧！ 下载 https://cache.ruby-lang.org/pub/ruby/2.5/ruby-2.5.0.tar.gz...阅读全文

Rust的模块化系统: 包Packages, 箱Crates, 和模块Modules

箱(binary crate)的根文件, 该箱(crate)与包(package)同名src/lib.rs 是类库箱(library crate)的根文件, 该箱(crate)与包(package)同名多个二进制箱(binary crates): 在src/bin目录下创建.rs文件, 每个文件对应一个二进制箱(binary crate).模块Modules模块通过关键字mod加模块定义, 例如:// Filename: src/lib.rs mod front_of_house { mod hosting { fn add_to_waitlist() {} fn seat_at_table() {} } mod serving { fn take_order() {} fn...阅读全文

不可变基础设施 (immutable infrastructure) - 云原生定义解析

（对于大中型机，甚至重启都是一种奢侈的）。所以，在当时不可变基础设施的设想是难以实现的，开发人员总是需要在服务器上对运行环境做一下持续的更改，如：系统升级，配置修改，补丁等。在许多手动修改之后，服务器的不同配置的重要性或必要性变得不清楚，因此更新或更改任何配置可能会产生意想不到的副作用（这就导致了 Martin Fowler所说的snowflake server “Phoenix Server”,2012）。可变基础设施通常会导致以下问题。在灾难发生的时候，难以重新构建服务。持续过多的手工操作，缺乏记录，会导致很难由标准初始化后的服务器来重新构建起等效的服务。在服务运行过程中，持续的修改服务器，就犹如程序中的可变变量的值发生变化而引入的状态不一致的并发风险。这些对于服务器的修改，同样会引入中间...阅读全文

Netty+Nacos+Disruptor自研企业级API网关

。 TypeScript：TypeScript是JavaScript的超集，它可以增加类型检查、接口声明等特性，减少错误和提高可读性。 NestJS：NestJS是一种流行的Node.js框架，它采用面向对象的编程方式，提供了路由、中间件、模块化等丰富的功能。 GraphQL：GraphQL是一款优秀的数据查询和操作语言，它可以帮助我们快速构建API，并减少网络传输的数据量。 功能设计 我们将开发一个电商平台，包含以下主要功能： 用户管理：用户可以注册、登录、修改个人信息等，管理员可以查看用户列表并进行管理。 商品管理：管理员可以添加、修改、删除商品信息，包括商品名称、价格、库存、图片等。 购物车：用户可以将商品加入购物车，并在结算时进行支付。 订单管理：管理员可以查看订单列表、订单详情、订单状态等。 开发流程 下面是全栈开发的开发流...阅读全文

Rancher 2.2.2 发布：优化 Kubernetes 集群运维

Windows 节点正式提供生产级别支持的 Kubernetes 版本。 UI 和 API 的性能提升 Rancher v2.2.2 中，UI 和 API 的性格都得到了大幅优化。项目相关的资源 API 调用（特别是 pod）所需的加载时间大幅减短，页面在极短的时间内即可用。 其他的修复或更新 修复了无法为 AWS 中国区域添加节点模板的问题。出于稳定性考虑，暂时移除了项目级别的监控，将在下一个版本中重新添加；集群级别的监控不受此影响。修复了发布目录模板可能因证书错误而失败的问题。修复了用于与独立 Rancher 服务器通信的自签名证书可能过期的情况。修复了 Rancher 配置集群状态在带有前缀补丁的集群中被错误提取的问题。 更新详情可查阅 RancherLabs 的 发布公告 下载地址：https...阅读全文

系统分析工具 Sysdig 详解

login shell with the given ID：sysdig -r trace.scap.gz -c spy_users proc.loginshellid=5459 容器 应用 硬盘 I/O 进程和CPU使用率 性能和错误 安全 目录...阅读全文

英特尔放出Linux微代码以修复Meltdown和Spectre漏洞

。 如果你无法通过Package管理器来安装更新文件的话，你还可以手动安装。在现代Linux发行版系统中，我们还可以直接将下载下来的intel-ucode文件夹拷贝到/lib/firmware目录中，然后运行下列命令完成更新： echo 1 > /sys/devices/system/cpu/microcode/reload 下面给出的是Ubuntu平台中实现手动更新的方法，以及截图： Intel所发布的原版微代码更新完整教程如下： --Microcode update instructions -- Thispackage contains Intel microcode files in two formats: *microcode.dat *intel-ucode directory...阅读全文

Kubernetes调度算法浅析

在真正的生产环境中，如何合理的分配服务器资源、提高利用率、让整个集群运行的更加稳定使得 k8s-scheduler 这个角色在集群中的地位愈发重要。 kube-scheduler的预选(过滤)和精选(打分) api-server会将创建pod的请求发送给kube-scheduler，并且将pod信息记录在etcd数据库中。之后kube-scheduler会根据预选（过滤）规则，首先过滤掉一部分node节点中的pod，没有被过滤掉的pod可以看做是可以被调度的pod，之后再通过更加严格的规则给剩下的pod打分，这一步也叫作优选。打分最高的pod可以看做被优先分配到pod任务。 调度流程简介 创建pod的命令被api-server的api接口接收到。api-server将pod信息存储在...阅读全文

Debian 环境下安装配置 Gitlab

-ctl reconfigure 添加 ssh 公钥 因为在gitlab上使用git命令进行操作，需要进行身份验证，依赖于ssh公钥，所以需要将ssh公钥加入到自己的配置文件中， ssh-keygen 下面命令得到的内容就是公钥 cat ~/.ssh/id_rsa.pub 1. 安装配置依赖项 2. 添加GitLab仓库,并安装到服务器上 3. 启动GitLab 目录...阅读全文

LFS 8.0 正式发布：从零开始编译自己的 Linux 发行版

LFS的方法生成可以自行启动并安装了足够软件的CD，可以用来在空机器上安装LFS，或者直接在其上运行应用。 Patches 由于软件之间的依赖关系，在升级软件包之后可能会导致LFS的过程出现故障。Patch项目致力于研究最新版本的软件之间的互动，并提供一些补丁修复这些故障。 这次发布的 LFS 和 BLFS 总共有29个包得到了更新，包括启动脚本和安装指南。而 BLFS 则跟上一个旧版本相比，有大概800个包得到了更新，主要更新包括： * glibc-2.24 * binutils-2.27 * gcc-6.2.0 * /lib 移到了 /lib64 * 移除/usr/lib64 目录 * 增加 /usr/bin/ld.gold 可用 LFS 手册： http...阅读全文

第8个LTS版本 Ubuntu 20.04 将带来哪些新特性？

存驱动、数码相机和 MP3 播放器中使用最为充分，你平时用这些电子产品的时候，多半就使用到了 exFAT 技术。 另一方面，在 19.10 版本中引入的 ZFS 作为根目录的支持会进一步得到改进，但是，它将保持实验状态。 关于 ZFS 的争论近期也因为 Linus Torvalds 的参与而白热化，他在某个论坛上讨论关于内核的相关问题时，提到了 ZFS 并表明了自己的态度，在 Oracle 对 ZFS 的代码进行重新授权以使其能更友好地被引入到 Linux 内核主线之前，他不会推荐使用 ZFS，同时，即便抛开许可证的原因，Linus 也觉得 ZFS 的综合性能并不特别强。随后有人公开宣称 Linus 不懂 ZFS。 此外，20.04 其它增强功能包括： GNOME 从 v3.34 升级到...阅读全文

Scrapy 架构及数据流图简介

, asynchronous programming Scrapy 组件介绍 数据流(Data flow) 事件驱动网络(Event-driven networking) 目录...阅读全文

Facebook 正式发布 JavaScript 包管理器 Yarn 1.0

Workspaces) 越来越多的科技公司开始采用单体仓库模式（mono-repository — 方便跨项目共享代码，同时避免依赖同步问题）来进行代码控制，这种模式也正逐渐被开源社区和一些小型公司所采纳。 因此，Yarn 增加了一个新特性 ——工作区。工作区可以自动从多个 package.json 中收集所有的依赖项，并一次性将它们安装完毕。项目根目录下会生成一个独立的 yarn.lock 来锁定这些文件。此外，如果多个工作区之间存在依赖，Yarn 会为它们创建链接，这样所有的项目就可以始终共享最新的代码。 自动合并 yarn.lock 文件 (Auto-merging of lockfiles) 多个开发者在开发同一个项目时，可能会需要更新包依赖，从而导致 yarn.lock 文件出现冲突。如果只有一两个...阅读全文

轻量级发行版 Alpine Linux 介绍

可以用以下方法访问这些包， $ echo "http://dl-4.alpinelinux.org/alpine/edge/testing" >> /etc/apk/repositories$ apk --update add --no-cache 参考资源 Alpine 官网：https://alpinelinux.org/ Alpine 官方仓库：https://github.com/alpinelinux Alpine 官方镜像：https://hub.docker.com/_/alpine/ Alpine 官方镜像仓库：https://github.com/gliderlabs/docker-alpine 获取并使用官方镜像 迁移至 Alpine 基础镜像 参考资源 目录...阅读全文

Focalboard ：一款开源、本地存储、免费的类 Notion 应用

：这款软件支持笔记记录。同 Notion 一样，页面属性也支持文字框、数字、电话号码、超链接、单选、多选、时间等属性类型。具体文本编辑的话，与Notion有所不同。Notion 是可见即可得的富文本，Focalboard 则区分编辑模式和预览模式。此外，Notion 的每一个段落均是一个 Block，而 Focalboard 的每个编辑区域算一个 Block，允许用户自由拖拽。预览模式编辑模式平台：这款软件支持 Mac 、Linux、Windows 三个平台。软件版本：这款软件包括两个版本：一个是个人桌面版本(Focalboard Personal Desktop)，一个是个人服务器版本(Focalboard Personal Server)。前者是用于待办事项和个人项目的桌面应用程序，后者则...阅读全文

Redis 命令、特性介绍与性能调优

本文从 Redis 的基本特性入手，通过讲述Redis的数据结构和主要命令，对 Redis 的基本功能进行直观介绍。之后概览Redis提供的高级能力，并在部署、维护、性能调优等多个方面进行进一步的介绍。本文适合使用Redis的普通开发人员，以及对Redis进行选型、架构设计和性能调优的架构设计人员。 目录 概述 Redis的数据结构和相关常用命令 数据持久化 内存管理与数据淘汰机制 Pipelining 事务与Scripting Redis性能调优 主从复制与集群分片 Redis Java客户端的选择 概述 Redis是一个开源的，基于内存的结构化数据存储媒介，可以作为数据库、缓存服务或消息服务使用。 Redis支持多种数据结构，包括字符串、哈希表、链表、集合、有序集合、位图...阅读全文

深入了解Docker背后的namespace技术

namespaces为你的系统网络协议栈提供了自己的视图。这个协议栈包括你的本地主机（localhost）。确认你在目录crosbymichael/make-containers下，并运行 ip a查看所有运行在你的主机上的网络接口。 > ip a root@development:/containers# ip a 1: lo: mtu 65536 qdisc noqueue state UNKNOWN group default link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00 inet 127.0.0.1/8 scope host lo valid_lft forever preferred_lft...阅读全文

Linux系统诊断-内存基础

谈及linux内存，很多时候，我们会关注free，top等基础命令。当系统遇到异常情况时，内存问题的根因追溯，现场诊断时，缺乏深层次的debug能力。本篇幅不做深层讨论，能把当前系统的问题描述清楚，是每个SRE应该具备的最基础能力。free========2.1 free命令原理free是通过查看 /proc/meminfo 来获取内存的使用情况。但是 /proc/meminfo 这个文件又是怎么来的？我们先了解下 /proc 目录：/proc 是一个虚拟文件系统，该目录下的所有文件都是伪文件，该类文件只存在于内存中，并不占用空间——使用 du -sh 即可验证，该模具路下的磁盘占用都是0。/proc 下的所有文件都是内核调用proc_create() 接口来创建的虚拟条目。/proc 中...阅读全文

Kubernetes 部署 Nacos 1.4 集群 · 小豆丁

!版权声明：本博客内容均均为原创,每篇博文作为知识积累,写博不易,转载请注明出处。 目录[-] 参考地址： Nacos 官方文档 系统环境： Nacos 版本：1.4.1 Mysql 版本：8.0.19 Kubernetes 版本：1.20.1 项目示例地址： Kubernetes 中部署 Nacos 的部署文件 Kubernetes 中部署 Mysql 数据库部署文件 如果该文章对你有帮助，别忘了 Github 帮忙点颗星哦~ 一、什么是 Nacos Nacos 是阿里开源的服务注册中心与配置中心组件，能够帮助开发人员快速实现动态服务发现、服务配置、服务元数据及流量管理。同时能够与 SpringCloud、Kubernetes、Dubbo 等开源生态无缝集成。 Nacos 支持如下核心特...阅读全文

基于thanos搭建分布式prometheus

: failureThreshold: 10 httpGet: path: /-/ready port: 9090 scheme: HTTP initialDelaySeconds: 60 periodSeconds: 5 successThreshold: 1 timeoutSeconds: 3 terminationGracePeriodSeconds: 60 thanos-querier需要指定反向代理的列表，它支持基于DNS SRV记录的服务发现机制，因为thanos querier部署在K8S集群内，所以直接走coredns的DNS SRV记录发现thanos receive的所有POD地址即可，对应参数：–store=dnssrv+_grpc._tcp.thanos...阅读全文

架构师详解 Nginx 架构

引言：众所周知，Nginx 服务器是一个高性能的 Web 和反向代理服务器。Nginx 在激烈的 Web 服务器竞争中依旧保持良好的发展势头，一度成为 Web 服务器市场的后期之秀，这一切跟 Nginx 的架构设计是分不开的。 一. Nginx 模块化设计 高度模块化的设计是 Nginx 的架构基础。Nginx 服务器被分解为多个模块，每个模块就是一个功能模块，只负责自身的功能，模块之间严格遵循“高内聚，低耦合”的原则。 核心模块 核心模块是 Nginx 服务器正常运行必不可少的模块，提供错误日志记录、配置文件解析、事件驱动机制、进程管理等核心功能。 标准 HTTP 模块 标准 HTTP 模块提供 HTTP 协议解析相关的功能，如：端口配置、网页编码设置、HTTP 响应头设置等。 可选...阅读全文

在TKE上使用Kubecost进行成本管理

://main.qcloudimg.com/raw/def229e1eeb39af2abb6c029294329dd.png) ### Reports Reports 主要保存一些观测数据，观测粒度和 Cost Allocation 里一致，支持按照某种方式聚合/观测数据之后，一键保存。如下图所示：  ## 操作步骤 ### 安装 helm 登录到某个 Node 节点，执行以下命令安装 helm： ```sh curl https:``//raw.githubusercontent.com/helm/helm/master/scripts/get-helm-3 | bash...阅读全文

五款流行开源的 HIDS 系统简单介绍

火墙等），OSSEC作为强大的日志分析引擎是一个不错的选择。​后来的发行版增加了用于基于debian的系统的身份验证日志文件，以及用于分析（3.6.0）的非标准Sophos UTM时间戳，用于缩进日志的多行日志收集（3.5.0）以及对多行的其他升级。记录。2. Tripwire顾名思义，这是Tripwire开发的基于主机的免费开放源代码检测系统。该公司也提供商业解决方案，但我们将专注于开源HIDS。开源的Tripwire软件包仅在几乎所有Linux发行版上运行。它以确保数据完整性的强大功能而闻名，它可以帮助系统管理员检测对系统文件的更改，并在文件损坏或被篡改时通知他们。要将其安装在Linux主机上，只需使用apt-get或yum实用程序。在安装过程中，系统将要求您添加必需的密码。最好选择一个...阅读全文

成功运作一个开源项目的15个要点

少。 2、透明 这一点很容易理解：我们要使得社区可以观察和了解你正在做的事情：使用易于查找的可公开访问的源代码存储库，使用面向公众的问题跟踪软件，在社区可以找到的地方公布发布计划，以及在公共论坛捕获会议记录(例如归档邮件列表)。 3、开放 对于很多开源项目来说，“透明度”和“开放性”意味着同一件事，但其实这两个术语的含义截然不同。开放不仅仅指的是“一目了然”(这与透明本质上是一样的)。对于许多人来说，开源的“开放”意味着开放新思想，或开放参与。参与开源项目的规则对于每个人应该是一样的(“公平的竞争环境”)：仅仅接受几个补丁是不够的，你必须对新的思路点子开放。总之，你必须允许别人参与你的项目，放弃对项目的绝对控制。 4、保持“公平的竞争环境” 这并不一定意味着你必须让任何人加入项目，而是要确保...阅读全文

RabbitMQ 高可用实现镜像队列

消息的同步方式，有效值为 automatic 和manual 2. 通过监控面板设置镜像队列 请注意一个事实，镜像配置的 pattern 采用的是正则表达式匹配，也就是说会匹配一组。 RabbitMQ集群节点失效，MQ处理策略： 如果某个 slave 失效了，系统处理做些记录外几乎啥都不做：master 依旧是master，客户端不需要采取任何行动，或者被通知 slave 失效。 如果 master 失效了，那么 slave 中的一个必须被选中为 master。被选中作为新的 master 的 slave 通常是最老的那个，因为最老的 slave 与前任 master 之间的同步状态应该是最好的。然而，特殊情况下，如果存在没有任何一个 slave 与 master 完全同步的情况，那么前任...阅读全文

Debian 9 使用kubeadm创建 k8s 集群（下）

; 我们告诉kubeadm使用相同的子网。第二个任务在/home/sammy创建一个.kube目录。 此目录将保存配置信息，例如连接到群集所需的管理密钥文件以及群集的API地址。第三个任务将从kubeadm init生成的/etc/kubernetes/admin.conf文件复制到非root用户的主目录。 这将允许您使用kubectl访问新创建的集群。最后一个任务运行kubectl apply安装Flannel 。 kubectl apply -f descriptor.[yml|json]是告诉kubectl创建描述descriptor.[yml|json]文件中descriptor.[yml|json]的对象的语法。 kube-flannel.yml文件包含在集群中设置Flannel所需的...阅读全文

译：Kubernetes 最佳实践

本文翻译自 Jack Roper 的文章 Kubernetes Best Practice。译者：文章中作者从应用程序开发、治理和集群配置三个方面给出了一些 Kubernetes 的最佳实践，同时翻译过程中也加入了我过往的一些使用经验。有误的地方，也欢迎大家指正。在这篇文章中，我将介绍一些使用 Kubernetes (K8s) 时的最佳实践。作为最流行的容器编排系统，K8s 是现代云工程师掌握的事实标准。众所周知，不管使用还是维护 K8s 复杂的系统，因此很好地掌握它应该做什么和不应该做什么，并知道什么是可能的，将是一个好的开局。这些建议包含 3 大类中的常见问题，即应用程序开发、治理和集群配置。最佳实践目录使用命名空间使用就绪和存活探针（译者注：还有启动探针）使用自动缩放使用资源请求和约...阅读全文

粘合万种芯片的“万能胶” 是摩尔定律的续命丹吗？ - 硬件

上的延伸。"之前的PCIe解决了电脑系统与周边设备的数据传输问题，UCIe解决的是小芯片和小芯片，封装片上独立模块与模块之间的数据传输问题，如果没有统一的电气信号标准，就不会形成多家企业共同完成系统集成的生态合作，如果没有合作，入局Chiplet的单个企业就很难完成行业发展所需的生态建设。"刘宏钧说到。王宏波也表达了同样的观点，"PC时代，英特尔主导建立的x86体系就有一系列标准，例如：PCIe标准，可以让其他家的产品能够同英特尔的CPU分工协作，x86体系的一系列标准，构建了整个PC时代的硬件体系，到了Chiplet时代，其实是将PC时代建立生态体系的逻辑缩小复刻到芯片中，Chiplet作为一个芯片组合，也需要靠UCIe标准将不同公司的芯片设计方便的组合在一个芯片中，通过这种方式建立生态并...阅读全文

案例：Redis命令不当 引起数据库雪崩 造成数百万损失

统瘫痪！ 5.线上Redis禁止使用Keys正则匹配操作 Redis是单线程处理，在线上KEY数量较多时，操作效率极低【时间复杂度为O(N)】，该命令一旦执行会严重阻塞线上其它命令的正常请求，而且在高QPS情况下会直接造成Redis服务崩溃！如果有类似需求，请使用scan命令代替！ 6.可靠的消息队列服务 Redis List经常被用于消息队列服务。假设消费者程序在从队列中取出消息后立刻崩溃，但由于该消息已经被取出且没有被正常处理，那么可以认为该消息已经丢失，由此可能会导致业务数据丢失，或业务状态不一致等现象发生。 为了避免这种情况，Redis提供了RPOPLPUSH命令，消费者程序会原子性的从主消息队列中取出消息并将其插入到备份队列中，直到消费者程序完成正常的处理逻辑后再将该消息从备份队列...阅读全文

Kafka生产问题总结以及性能优化

消费消息需要紧急处理，可以修改消费端程序，让其将收到的消息快速转发到其他topic(可以设置很多分区)，然后再启动多个消费者同时消费新主题的不同分区。 2）由于消息数据格式变动或消费者程序有bug，导致消费者一直消费不成功，也可能导致broker积压大量未消费消息。 此种情况可以将这些消费不成功的消息转发到其它队列里去(类似死信队列，kafka没有死信队列，需要自己写)，后面再慢慢分析死信队列里的消息处理问题。 2.1.5 延时队列 kafka没有延时队列，需要自己实现；延时队列存储的对象是延时消息。所谓的“延时消息”是指消息被发送以后，并不想让消费者立刻获取，而是等待特定的时间后，消费者才能获取这个消息进行消费，延时队列的使用场景有很多， 比如 ： 1）在订单系统中， 一个用户下单之后通常...阅读全文

协议介绍之深入了解 gRPC

经过很长一段时间的开发，TiDB 终于发了 RC3。RC3 版本对于 TiKV 来说最重要的功能就是支持了 gRPC，也就意味着后面大家可以非常方便的使用自己喜欢的语言对接 TiKV 了。 gRPC 是基于 HTTP/2 协议的，要深刻理解 gRPC，理解下 HTTP/2 是必要的，这里先简单介绍一下 HTTP/2 相关的知识，然后在介绍下 gRPC 是如何基于 HTTP/2 构建的。 HTTP/1.x HTTP 协议可以算是现阶段 Web 上面最通用的协议了，在之前很长一段时间，很多应用都是基于 HTTP/1.x 协议，HTTP/1.x 协议是一个文本协议，可读性非常好，但其实并不高效，笔者主要碰到过几个问题： Parser 如果要解析一个完整的 HTTP 请求，首先我们需要能正确的读出...阅读全文

全民HTTPS时代：盘点免费SSL证书那些事儿

Signing Request)，这里有 CSR 在线生成工具。参考网址：https://www.csr.sh/ 五、Cloudflare 官方网站：https://www.cloudflare.com/ 点评：Cloudflare 很早就开始提供免费 SSL 证书，前提是你的域名要放在 Cloudflare 解析，注册为 Free Plan 就可以。 备注：只要域名加入 Cloudflare Free Plan，解析 A 记录的时候，点击 Traffic to this hostname will go through Cloudflare，就可以了。一般情况下，这个免费的 Universal SSL 里会包含一大堆别人的域名（该证书也是 Comodo 发行的）。当然，如果你比较介意这个的话，可以付费...阅读全文

Rust 1.37.0 稳定版发布

1.37.0 中，还可以使用 Self : Variable 引用枚举变量： impl Coin { fn value_in_cents(&self) -> u8 { match self { Self::Penny => 1, Self::Nickel => 5, Self::Dime => 10, Self::Quarter => 25, } } } 更确切地说，Rust 现在允许通过“type-relative resolution”来引用枚举变量，>::Variant。 内置 cargo 支持独立依赖关系 cargo vendor 命令集成到 Cargo，该命令获取项目的所有依赖项，将它们解压缩到 vendor/ 目录中，并展示了在构建过程中使用分布式代码所需的配置片段...阅读全文

3个 Linux 命令让你看起来很忙：摸鱼的技巧

。它播放的序列由你决定，但默认情况下它包括一个加密货币挖掘模拟器、composer PHP 依赖管理器、内核编译器、下载器、内存管理等等。不过，我最喜欢的是显示 simcity 加载消息的设置。因此，只要没有人检查得太仔细，你就可以花整个下午的时间等待电脑完成进度条。 Genact 有 linux、os x 和 Windows 版本，Rust 源码可以在 github 上找到。 Hollywood Hollywood 采取了更直接的方式。它本质上是在终端中创建一个随机数和拆分屏幕的配置，并启动看起来很忙的应用程序，如 htop、目录树、源代码文件和其他应用程序等，并每隔几秒钟进行切换。它以 shell 脚本的形式组合在一起，因此可以很容易地根据你的需要进行修改。 Hollywood 的源代码可...阅读全文

AWS IAM 基本概念介绍

序使用角色使用角色委托权限不共享访问密钥定期轮换凭证删除不需要的凭证使用策略条件来增强安全性监控 AWS 账户中的活动关于 IAM 最佳实践的视频演示 User Group Role Temporary Security Credentials Permissions Policies 目录...阅读全文

Go 1.16 即将发布，这些变更你需要知道

-bindata/go-bindata 这类第三方开源库来实现。 而从 Go1.16 起，通过 go:embed 就可以快速实现这个功能： import _ "embed" //go:embed hello.txt var s string print(s) 通过对变量 s 声明 go:embed 指令，使其在编译时读取当前目录下的 hello.txt 文件。 最终变量 s 就会输出 hello.txt 文件中的字符串内容。 新增 io/fs 的支持 新增了标准库 io/fs，正式将文件系统相关的基础接口抽象到了该标准库中。 以前的话大多是在 os 标准库中，这一步抽离更进一步的抽象了文件树的接口。在后续的版本中，大家可以优先考虑使用 io/fs 标准库。 调整切片扩容策略 Go1.16 以前的...阅读全文