控制器故障转移接近瞬时。Kafka 社区计划在下一个版本（3.4）中弃用 ZooKeeper，然后在 4.0 版本中完全删除它。此外，Kafka 3.3 还提供了其他一些新特性，比如添加了与元数据日志处理错误相关的指标，允许用户为其他用户创建委托令牌，以及严格统一的粘性分区器，以缩短分区时间。对于 Kafka Streams，这个版本增加了源/接收器指标，如消费/生产吞吐量、暂停/恢复拓扑，并集成了 KStream transform()和 process()方法。Kafka Connect 增加了对源连接器的精确一次语义支持。原文链接： https://www.infoq.com/news/2022/10/apache-kafka-kraft/...阅读全文
-3.1.0]$ ./bin/kafka-storage.sh format -t YkJwr6RESgSJv-sxa1R1mA -c ./config/kraft/server.propertiesFormatting /opt/install/kafka_2.12-3.1.0/topiclogs[hadoop@bigdata01 kafka_2.12-3.1.0]$ ./bin/kafka-server-start.sh ./config/kraft/server.properties（四）创建kafka的topic集群启动成功之后，就可以来创建kafka的topic了，使用以下命令来创建kafka的topic：./bin/kafka-topics.sh --create --topic...阅读全文
Java 进程后来变得比较空闲，被占用掉的内存也不会归还操作系统，从资源利用角度，这会带来某种意义上的浪费。阿里巴巴方面表示，ElasticHeap 主要用于改变这一情况。 据介绍，ElasticHeap 是一个基于 G1 GC 的动态堆弹性伸缩功能，可以有效节约 Java 进程实际物理内存占用。Dragonwell JDK 的 ElasticHeap 提供更敏捷有效的归还内存方式，主要有如下特点： 不依赖 Full GC 和其他 STW 暂停处理弹性堆伸缩，不增加额外 STW 开销，不影响 Java 线程服务；支持多种模式。 根据内存分配速度和 GC 压力自适应调整堆大小（自动归还内存）；根据 jcmd/MXBean 命令主动式限制堆大小 (可整堆限制或分代限制）； 下图是阿里巴巴电商应用在双...阅读全文
systemctl restart apache2 部署多个Rails应用程序 有许多方法可以使用Passenger部署多个Rails应用程序。 最简单的方法是运行如上配置的多个不同的虚拟主机来托管单个Rails应用程序。 或者，您可以在单个虚拟主机中托管多个Rails应用程序。 本节介绍一个。 1.添加RailsBaseURI指令，指定虚拟主机配置中Rails应用程序的路径，如以下示例所示, /etc/apache2/sites-available/example.com.conf： DocumentRoot /var/www/html/example.com/public_html/ RailsBaseURI /app1 RailsBaseURI /app2 RailsBaseURI /app3 这些指...阅读全文
的永久存储和查询能力。 Compactor则是对Bucket里的历史数据进行采样或者清理，有具体需求后再自行研究即可。 上述组件均是可选的，没有历史数据永存需求的可以直接忽略。 方案2：thanos receive + thanos querier thanos提供的另一种方案是计算与存储分离，利用thanos receive组件部署一个分布式存储集群，然后令prometheus通过remote write机制直接写入到thanos receive集群完成分布式存储，这样prometheus本身就无状态了。 再利用thanos querier反向代理到thanos receive集群，最终对外提供统一的promql查询入口，这个阶段就没有prometheus什么事了。 这套方案的工作原理如下...阅读全文
泛型又近了一步。 另外在本次新版本中，像是 template 支持跨行： {{"hello" | printf}} 又或是 Linux 的默认内存管理策略下又从 MADV_FREE 改回了 MADV_DONTNEED 策略，大家在新版本中不再需要设置： GODEBUG=madvdontneed=1 大家若有需求都可以进一步去了解，现在新版本的功能特性已经锁定，基本尘埃落定。 传送门：https://tip.golang.org/doc/go1.16。 分享 Go 语言、微服务和奇怪的系统设计 ???? 长按关注煎鱼，在知识的海洋里遨游 学习资料分享，关注公众号回复指令： 回复【000】，下载 LeetCode 题解大全。回复【001】，下载 Go 进阶图书 Mastering Go。...阅读全文
Atom文本编辑器。 12. Steam Linux Gaming 如果你打算在Linux系统上玩游戏，那么确实值得花一番心思来安装Steam，这是一种大受欢迎的游戏发布平台。 有3000多款Steam游戏适用于Linux，包括众多知名游戏，比如《古墓丽影》、《杀出重围：人类分裂》和《战锤：全面战争》。还有大批的独立游戏和经典游戏值得探究一番。 13. NeoFetch系统信息工具 在寻找一种巧妙的方法来了解你运行的是什么窗口管理器、GTK主题、桌面环境、内核和bash版本?你可以点击一大堆菜单来搞个明白，也可以运行一个命令：neofetch。 重要的事先说：你需要先安装这个应用程序，之后才可以运行它;为此，你需要从NeoFetch Github页面下载最新版本。 14. Corebird...阅读全文
2020年前后将进入5G时代，5G将推动对整个产业带来革命性影响，并改变我们所有人的工作和生活方式，人类社会全面进入到数字化时代。 云计算和智能互联,正在快速演进，5G将是全球最智能的互联设备之一。在全球范围内，中国率先启动5G试验，在国际上率先发布5G系统在中频段内的频率使用规划。 怀柔5G试验外场对5G系统技术的验证，在技术、频谱利用、密集组网、大规模天线的布设、复杂网络的优化等方面，业界已可以看到5G特定场景的演示，促进5G发展进入新的阶段。 中国率先启动5G试验 2018年将重点研发5G产品 对于5G频谱的研究，专家认为，全球频谱越统一越有利于频谱效率的最大化。毫米波的频率规划，是我国5G推进的重要工作。目前毫米波频段，仍有一些不确定性，建议业界尽早明确一些5G场景，明确中国毫米波...阅读全文
重置工具添加“ ”选项通过kafka-streams-application-reset添加新的命令行参数，应用程序重置工具的 Streams 使用变得更加灵活：–internal-topics. 新参数接受逗号分隔的主题名称列表，这些名称对应于可以使用此应用程序工具安排删除的内部主题。将此新参数与现有参数相结合，–dry-run允许用户在实际执行删除操作之前确认将删除哪些主题并在必要时指定它们的子集。MirrorMakerKIP-720：弃用 MirrorMaker v1在 3.0 中，不推荐使用 MirrorMaker 的第一个版本。展望未来，新功能的开发和重大改进将集中在 MirrorMaker 2 (MM2) 上。KIP-716：允许使用 MirrorMaker2 配置偏移同步主题的...阅读全文
WordPress 开发团队刚刚发布了 WordPress 4.8 正式版，现在已经可以下载了。该版本以爵士乐钢琴家和作曲家 William John “Bill” Evans 的名字命名。WordPress 4.8 的新功能，讲给你提供更多的方式，让你来在网上表达自我和展现品牌。 虽然 WordPress 4.8 都是一些小的改进，但这些改进都是用户们所关注的，由数以百计的开发者共同完成的。现在，我们来一起看看这些关注已久的新功能：链接功能改进；三个媒体挂件（小工具）包括：图片、音频、和视频；文本挂件（小工具）增加了可视化编辑功能；管理后台增加了新模块，显示附近即将举行的 WordPress 活动。 令人激动的挂件更新 图片挂件（小工具） 往挂件里添加图片，现在可以说是非常简单了...阅读全文
Serverless 框架之一。该服务最迟支持 Node.js，现在也支持 Java 和 Python。它与 Alexa Skills Kit（软件开发工具包）紧密集成，亚马逊提供交互式控制台和命令行工具，以便上传和管理代码片段。 Google Cloud Functions Google 是为服务架构的最前沿公司，除了推动 Kubernetes，Google 还投资了 Cloud Functions，该架构可以在其公共云基础设施上运行。 Iron.io Iron.io 最初是为企业级应用提供微服务。Iron.io 是用 Go 语言编写的，用于处理高并发、高性能计算服务，并已经集成 Docker 服务，提供一种完整的微服务平台。 IBM OpenWhisk 2016 年 2 月的 InterConnect 大...阅读全文
docker/engine#260现在允许设置 buildkit 输出 docker/cli#1766查找 Dockerfile 特定的 dockerignore 文件 (例如，Dockerfile.dockerignore) 以查找被忽略的路径 docker/engine#215自动检测 x86、ARM 和 ARM 64 二进制文件是否可以执行进程 docker/engine#215更新 buildkit 到 1f89ec1 docker/engine#260默认情况下使用 Dockerfile 版本 docker/dockerfile:1.1 docker/engine#215不再依赖外部映像进行复制/添加操作 docker/engine#215 Client 在 docker update 中添...阅读全文
线程启动和执行的流程如下：主程序 Master process 启动后，通过一个 for 循环来接收和处理外部信号；主进程通过 fork() 函数产生子进程，每个子进程执行一个 for 循环来实现 Nginx 服务器对事件的接收和处理。 一般推荐 worker 进程数与 cpu 内核数一致，这样一来不存在大量的子进程生成和管理任务，避免了进程之间竞争 CPU 资源和进程切换的开销。而且 Nginx 为了更好的利用多核特性，提供了 cpu 亲缘性的绑定选项，我们可以将某一个进程绑定在某一个核上，这样就不会因为进程的切换带来 cache 的失效。 对于每个请求，有且只有一个工作进程对其处理。首先，每个 worker 进程都是从 master 进程 fork 过来，在 master 进程里面，先建...阅读全文
问题被频繁提及，这不免令人有些惊讶。如果你不运行主流的发行版，这个问题会更严重。也许你在使用中没有更多的体会，但越来越多人在使用AppImage、Flatpak或者Snaps，这让我们意识到问题的存在，笔者很想更多地了解软件不兼容的问题，如果你最近遇到了，请在评论中告诉我们。 3.UEFI和安全引导 UEFI(UnifiedExtensibleFirmwareInterface)全称"统一的可扩展固件接口"，是一种详细描述类型接口的标准。这种接口用于操作系统自动从预启动的操作环境，加载到一种操作系统上。尽管随着部署更多支持的硬件，UEFI和安全引导问题仍在改善，许多用户表示，他们仍然存在与UEFI安全启动相关的问题。使用一个完全支持UEFI安全启动开箱分配是最好的解决之道。 4.32位操作系...阅读全文
据外媒报道，磁性随机存取内存(MRAM)将在今年达到一个新的里程碑。Everspin宣布开始尝试打造1Gb (128MB)的ST-MRAM芯片，另外他们已经将这款高寿命、非易失性的内存芯片生产提上议程。 Everspin的ST-MRAM能够提供持久的记忆能力，相较于普通的NAND闪存技术，它可以减少写入放大倍数并拥有更好的耐用性。 这款新芯片采用的则是一个兼容DDR4的接口。这家公司表示，供应商可以利用持久的记忆技术设计企业级SSD或对现有的储存产品展开进一步的改善。 据了解，ST-MARAM的密度要比公司旗下现有的任何256MB(32MB)芯片大得多。Everspin指出，从Global Foundries的40nm工艺到foundry 28nm工艺的转变是开发这种千兆级芯片的关键，另外...阅读全文
目前没有64位。） 目前新版本是12.0.71510。下载完成后，打开一个终端窗口，切换到下载目录。64位的Debian8系统要先输入下面的命令启用i386架构。 sudo dpkg --add-architecture i386 sudo apt-get update 然后，安装TeamViewer所需要的库。 sudo apt-get install libdbus-1-3:i386 libasound2:i386 libexpat1:i386 libfontconfig1:i386 libfreetype6:i386 libjpeg62:i386 libpng12-0:i386 libsm6:i386 libxdamage1:i386 libxext6:i386 libxfixes3...阅读全文
多线程处理开发过程中的并发请求。 之前不推荐使用的 flask.ext 已被完全删除。 在调试模式下访问 request.form 的缺失密钥时会显示更有用的错误提醒，以避免开发者混淆常见的错误来源。 app.logger 的行为已大大简化，更容易定制。 test_client 新增用于发布 JSON 数据的 json 参数，Response 对象新增 get_json 方法来在测试中将数据解码为 JSON 。 新增 test_cli_runner ，用于测试应用程序的 CLI 命令。 大量文档已被重写，更清晰明了。这是一项长期持续的工作。 教程和相应的示例已被重写。新的示例使用结构化布局并详细介绍每个方面，以帮助新用户更好地规避常见问题并适应 Flask 。 细节请查阅发行说明...阅读全文
GitLab 12.9 将弃用用于 Python 依赖扫描的 Alpine Linux 镜像，改用 Debian 作为基础镜像。 GitLab 官方表示，在评估了改变基础镜像 Alpine 以更好地支持 Python 的 issue ＃13694 之后，决定切换到 Debian，这样可以使扫描工具支持更多的 Python 项目。 具体来说，从今年 3 月 22 日发布的 GitLab 12.9 开始，开发者将不再可获得用于 Python 依赖扫描的基于 Alpine 的镜像，届时即使运行的是旧版本，也会受到影响。 由于弃用 Alpine，如果使用 Alpine 特定的命令，如 apk add xyz，则可能需要在以下情况进行修改： 在扫描之前（仅当禁用 docker-in-docker 时...阅读全文
创建主题kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic debian.cn 查看所有主题kafka-topics.sh --zookeeper localhost:2181 --list 查看指定主题的详细信息kafka-topics.sh --zookeeper localhost:2181 --topic debian.cn --describe 命令行生产者kafka-console-producer.sh --broker-list localhost:9092 --topic debian.cn 行消费者消费所...阅读全文
-command，以便从损坏的数据库文件中恢复更多内容增强 RBU 扩展，以支持表达式索引更改架构解析器，因此如果 sqlite_master 表的类型、名称和 tbl_name 列中的任何列已损坏，并且数据库连接未处于 writable_schema 模式，它将出错现在默认情况下，所有版本中都启用 PRAGMA function_list，PRAGMA module_list 和 PRAGMA pragma_list 命令，可使用 -DSQLITE_OMIT_INTROSPECTION_PRAGMAS 禁用它们为 sqlite3_db_config() 添加 SQLITE_DBCONFIG_ENABLE_VIEW 选项添加了 TCL 接口配置方法，以便能够禁用...阅读全文
Cincoze 刚刚推出了面向嵌入式应用的全新紧凑型迷你工作站，除了采用至强 E 系列处理器，还支持自定义 I/O 扩展。从外形来看，Diamond Extreme 系列的 DX-1100 周身被硕大的散热片包围，但较小的体型，很适合空间受限的环境。处理器方面，客户可选英特尔八代酷睿、或至强 E-2100 系列 CPU 。 值得一提的是，DX-1100 工作站为办公室和工业环境提供了极其强大的连接选项，可定制 I/O 的功能相当受客户欢迎。 Cincoze DX-1100 采用了全金属机身，能够为容量 3.2L 的内部空间带来不错的被动式散热性能（TDP 80W 封顶）。 此外，主板上提供了 2 根 DDR4 SO-DIMM 内存插槽、2 个前端可访问的 2.5 英寸热插拔 SATA 托架...阅读全文
Cygwin，而且一开始很难理解其报告。Samhain日志默认情况下位于/ var / log ，默认情况下用于XML编写（使用./configure –enable–xml-log 命令对其进行配置）。Samhain包括日志文件旋转和锁定功能。它有助于记录SQL数据库，控制台，电子邮件，系统日志，Prelude IDS等。5.安全洋葱Security Onion是由Doug Burks设计和维护的基于Linux的免费开源入侵检测系统。该项目由三个组件组成：完整的数据包捕获功能，将基于主机的事件与基于网络的事件相关联的入侵检测系统，以及许多其他工具集，包括Snort，Bro，Sguil，Suricata和许多其他实用程序。安全洋葱不只是入侵检测系统。归根结底，如果您想在几分钟之内轻松地建立网络安全监控...阅读全文
随着 Debian"Stretch" 9 的正式发布和大规模部署，HardenedLinux 社区也发布了 STIG(安全技术实现指南) for Debian 9 的版本，STIG 是美国国防部对 IT 设施的安全防护合规，其中也包含了 GNU/Linux 操作系统，自 STIG for Debian 8 发布已经有两年时间【注】，Debian 9 的 STIG 实现参照 RHEL 7，相比上一版，STIG for Debian 9 和 RHEL-STIG 有更高的耦合度，除了 SELinux 和少量条目需要手工检测外，大部分都已经在 Debian 9 上实现了自动化，未来我们会继续完善 MAC/RBAC 基于 Debian 9 的替代方案以满足 STIG 的标准化合规。 【注】安全部署...阅读全文
的。许多基于Debian的发行版(包括Ubuntu)使用Testing或者Unstable软件包，不过在发布之前进行自己的一番测试。除非准备进行技术方面的重大变化，比如上一个版本改用systemd，否则Unstable通常来说足够安全，如果你借鉴的对象仅限于非核心元素(比如桌面环境)，更是如此。 5.自由程度的选择 Debian软件库分为三个部分：Main、Contrib 和 Non-Free。Main完全包括免费许可证的软件，Contrib包括本身免费许可证的软件，但是依赖其他的非免费软件，而Non-Free包括采用专有许可证发布的软件。 Debian安装时只启用了Main，所以该项目的偏好显而易见。不过，添加另外两个部分只需要五分钟的时间来编辑/etc/apt/sources.list...阅读全文
9 月 8 日，字节跳动正式宣布开源 CloudWeGo。这是一套以 Go 语言为核心、专注于微服务通信与治理的中间件集合，具有高性能、可扩展、高可靠的特点。 据介绍，作为项目维护方，字节跳动基础架构团队已推进项目以 CloudWeGo 开源库为主进行迭代，未来团队将坚持内外维护一套代码，统一迭代演进，并逐步分享更多内部微服务最佳实践。 项目地址：https://github.com/cloudwego 项目官网：www.cloudwego.io CloudWeGo 第一批开源了四个项目，以 RPC 框架 Kitex 和网络库 Netpoll 为主。 Kitex Kitex 是一个 Golang 微服务 RPC 框架，具有高性能、强可扩展的特点。 字节跳动使用 Golang 作为主要业务开...阅读全文
点通信。在 Kubernetes 中， MPI Operator 可用于实现 Allreduce 式的 TensorFlow 模型同步训练。 ## TensorFlow 模型在 Kubernetes 上的可扩展服务 由于处理客户端对推理服务的请求是一项非常耗时耗力的任务，因此可扩展服务对于机器学习工作负载的生产部署至关重要。在这种情况下，部署的模型应该能够扩展到多个副本，并为多个并发的请求提供服务。 Kubeflow 支持 TensorFlow 模型的几种服务选项。这里要注意以下几点： - **TFServing** 是 TFX Serving 模块的 Kubeflow 实现。通过 TFServing，你可以创建机器学习模型 REST API，并提供许多有用的功能，包括服务交付、自动生命周期...阅读全文
表的不同部分，都会有不同的评审者进行细致的审查。当然如果是结对编程，且你的队友能进行高质量的代码评审，那么这样写的代码一般可以视为已经过评审了。此外，我们也可以进行面对面的评审，评审者会问开发者一些问题。 根据谷歌的项目描述，代码审核规范为两套独立文档组成，代表了两方面内容的最佳实践： 代码评审者的指南CL 作者指南 在其中一些文档中使用了一些术语，如下： CL：表示“变更列表 (changelist)”，意思是已经提交到版本控制或正在进行代码检查的一个独立的更改。其他组织通常称为“改变”或“补丁”LGTM：意思是“在我看来不错 (Looks Good to Me)”，这是代码审阅者在批准 CL 时说的 接下来我们来看看两份文档分别的主要内容是什么： 1. 代码评审者的指南——如何进行代码评...阅读全文
当上世纪九十年代互联网开始被广泛使用的时候，其大部分的通讯只使用几个协议：IPv4 协议路由这些数据包，TCP 协议转发这些包到连接上，SSL（及后来的 TLS）协议加密连接，DNS 协议命名那些所要连接的主机，而 HTTP 协议是最常用的应用程序协议。 多年以来，这些核心的互联网协议的变化几乎是微乎其微的；HTTP 增加了几个新的报文头和请求方式，TLS 缓慢地进行了一点小修改，TCP 调整了拥塞控制，而 DNS 引入了像 DNSSEC 这样的特性。这些协议看起来很长时间都一成不变（除了已经引起网络运营商们的大量关注的 IPv6）。 因此，希望了解（甚至有时控制）互联网的网络运营商、供应商和决策者对这些协议采用的做法是基于其原有工作方式 —— 无论是打算调试问题，提高服务质量，或施加政策...阅读全文
Debian 提供的免费的长期支持（LTS）版本将所有 Debian 稳定版本的生命周期延长到至少 5 年。除此以外，还有商业的扩展 LTS 计划，该计划将对有限的软件包的支持延长到了 5 年以上。云映像官方云映像可用于所有的主流云端平台。我们还提供了工具和配置，因此您可以构建自己的自定义云映像。您还可以在桌面或容器里的虚拟机中使用 Debian。转自：https://www.debian.org/intro/why_debian.zh-cn.html...阅读全文
经渐渐回归业务本身，让更多的开发者看到了一丝曙光。It's enough? 来看下Bilgin Ibryam在Multi-Runtime Microservices Architecture文章中提及的分布式应用的四大需求： 从上图可以看出，除了网络（Networking）外，生命周期（Lifecycle）、状态（State）、捆绑（Binding）也是分布式应用要解决的问题之一。网络问题可以借由Service Mesh 比如Istio予以解决。那其他三个该如何解决呢？又要应用自行开发集成吗？显然不符合应用回归业务本身的诉求。这时，Dapr登场了，Dapr提出的分布式应用运行时就是实现了以上四个需求并将其下沉作为分布式应用的运行环境。 简而言之：Dapr将分布式能力进行封装下沉作为运行时以简...阅读全文
树莓派基金会发布了一款别具一格的新品单板计算机：Raspberry Pi 400。这部新款树莓派的外观看起来就是一块小键盘，开发板集成在键盘内部。官方表示其性能比此前发布的 Raspberry Pi 4 略高。 据 Phoronix 的评测介绍，树莓派 400 是一个非常漂亮的小设备，外形小巧，采用大铝块冷却的方式作为键盘内的散热器。常用的线路接口设置在键盘的后方。 树莓派 400 配置的是与树莓派 4 相同的 Broadcom SoC，采用 Cortex-A72 四核设计，主频为1.8GHz，比树莓派 4 Model B 的 1.5GHz 略高。起步价为 70 美元。关于树莓派 400 的更多测试信息可查看 Phoronix。...阅读全文
Gmail、日历、网盘等）； ● Google Chrome（需采取部分额外措施）； ● Google Chrome OS（含 Chromebook）； ● Google Cloud Platform（需采取部分额外措施）； ● Google Home / Chromecast（无需采取额外措施）； ● Google Wifi / OnHub（无需采取额外措施）。 需要指出的是，这个列表和产品的状态可能随着新的进展而改变，必要的情况下，Google 安全团队会对这篇博客的内容进行修改和更新：https://security.googleblog.com/2018/01/todays-cpu-vulnerability-what-you-need.html...阅读全文
微软发烧友 Brad Sams 近日在 Petri 上写道，微软正在开发一个名为 Windows Lite 的新版操作系统。顾名思义，Windows Lite 将是轻量级并快速的，因为它抛开了 Windows 长达数十年的臃肿积累。此举似乎暗示着微软转向云计算并重新进入移动领域的野心。但微软想取得成功，它必须从过去的错误中吸取教训。 Windows 的转型是有必要的。尽管微软已经在其 Surface 系列产品上取得了成功，但即便是最新的 Windows 10 系统，仍然包含着几十年前的代码，部分原因是微软的许多企业客户仍然需要与旧软件兼容。因此，Windows 10 不仅臃肿，而且还不适合移动世界。比方说，微软试图将 Surface Go 作为 iPad 的竞争对手，但受操作系统的限制，它...阅读全文
除了 ConnectTimeout 参数外，我们还可以在外部包装一层， 当 ssh 执行超时时，自动 kill 掉超时的 ssh 链接，样例如下： $ cat /tmp/ip`; do echo -n ++++++++++++++ $i\ ; timeout -s 9 3s ssh -o ConnectTimeout=2s -o ConnectionAttempts=1 $i md5sum /etc/resolv.conf ; done 这里 timeout 的含义是，如果3s没有返回，就发送signal 9，结束进程。...阅读全文
然避免不了，为了更加从容的应对这些故障，就搞了一个工具 Chaos Monkey 会随机停止生产环境中的虚拟机，通过观察系统在真实故障中的表现来确保程序的健壮性，也通过实战来验证各种高可用技术是否靠谱。接着冒出了 Chaos Gorilla，会停止一整个可用域中的所有机器；最后还有Chaos Kong，直接停掉一整个 Region，非常有挑战精神（丧心病狂）。 为了更好的观察系统在故障时的情况，还研发了全局可视化系统，代号 Flux，可以将整个系统的逻辑架构和各服务之间的流量可视化在大屏幕上，效果图如下： 他们每个月有一个活动：将一个 Region 里的机器全部关掉，看 Netflix 服务是否正常。有兴趣看视频的可以移步这里。 另外，Netflix 除了云服务，还有自建CDN，即 Open...阅读全文
结果发布到IM中，比如 HipChat、JIRA 或者 Slack 等。 自动修复 - 识别和验证OpenStack计算节点上的硬件故障，正确排空实例并向管理员发送关于潜在停机时间的电子邮件，但如果出现任何问题 - 冻结工作流程并呼叫PagerDuty唤醒人员。 持续部署 - 与Jenkins一起构建和测试，配置新的AWS群集，基于NewRelic的应用程序性能数据，打开负载均衡器的一些流量，以及前滚或回滚。 Stackstorm工作原理 主要组件角色： 传感器（Sensors） 用于分别接收或监视事件的入站或出站集成的Python插件。 当来自外部系统的事件发生并由传感器处理时，StackStorm触发器将发射到系统中。 触发器（Triggers）外部事件的StackStorm表示形式...阅读全文
为期三天的第13届红帽峰会已在波士顿当地时间5月4日闭幕。除了前两日报道的OpenShift与企业数字转型的动向，本次峰会还有另外两个产品动向值得注意。 1、以Ansible为核心的全栈自动化 红帽管理平台相关负责人已经明确在一次媒体沟通会上表示，Ansible已经被定位作为红帽自动化工具体系的中心。红帽其他的自动化工具—— 跨云管理产品CloudForms 自动打安全补丁产品Satellite 自动化运维工具Puppet API管理工具3scale 上述工具仍将继续履行各自的职责，同时全面与Ansible集成。非红帽的其他自动化工具——比如Amazon Lambda——也优先以Ansible作为与红帽管理平台的接入点。也就是说，未来在Ansible上（尤其是Ansible Tower）将...阅读全文
新年伊始，VNote发布小更新v1.11.1。顾名思义，这次更新将会很“小”，主要是修复已知问题。当然，这次更新也有值得大家浪费带宽下载的地方： 1. 更好的中文支持 这一次基本所有界面都已经支持中文了，强迫症表示幸福感来的有点突然。 2. 更好的复制粘贴 如果大家之前使用VNote来编辑，然后在阅读模式将HTML文本复制到其他应用（如OneNote或者邮件客户端）的话，那么这次绝对要更新了。现在VNote支持在阅读模式复制，基本格式无损地粘贴到其他富文本编辑器中，甚至支持文本图片混合复制哦！另外，还提供了无背景复制功能，让你的粘贴更酸爽！ 3. 更好的主题 改进了主题，特别是针对暗色主题，让大家用得更舒服！ 4. 外部程序支持快捷键 自定义外部程序现在支持快捷键了，从此可以一键打开喜欢的...阅读全文
近日，一位安全研究员在博客上表示发现了本田公司的云端数据库未设密码，这可能导致 1.34 亿份文档，约 40GB 数据被泄漏，其中包括机器主机名、MAC 地址、内部 IP 及操作系统版本等。在收到该研究员的提醒后，本田方面已对漏洞进行修复。 本田 1.34 亿份文档，40GB 数据险遭泄漏 根据安全研究员 Justin Paine 的说法，自 2019 年 7 月 1 日起，他就发现了本田对外暴露的 ElasticSearch 数据库未设置任何密码，内部包含大约 1.34 亿份文档，这些文档可以转换为大约 40GB 数据，而这些数据的日期最早可以追溯至 2019 年 3 月左右。 最初，Justin Paine 以为这些数据来自本田的一家经销商，但他很快否定了这一想法，因为这些文档包含了本...阅读全文
一地点的容器的集合，共同组成部署和调度服务。与基于基于相似性的容器协同调度机制（如 Swarm 和 Mesos）相比，这种方法简化了集群的管理。 Kubernetes 调度程序的任务是监视 PodSpec 为空的 Pod。NodeName 赋予一个值，以将容器调度在集群中的某个位置。 这是与 Swarm 和 Mesos 不一样的地方，因为 Kubernetes 允许开发人员在运行 Pod 时通过定义 PodSpec.NodeName 来绕过调度程序。 调度程序使用谓词和优先级来定义容器应运行的节点。这些参数的默认值可以使用新的调度程序策略配置覆盖。 如果使用命令行标志 policy-config-file 指向描述启动 Kubernetes 时要使用的谓词和优先级的 JSON 文件，调度程序...阅读全文
有望提升40%以上。除了CPU性能，ARMv9还非常重视整体的性能提升，包括降低内存延迟（从150ns降至90ns）、频率提升（从2.6GHz到3.3GHz）内存带宽（从20GB/s到60GB/s）、缓存等。ARMv9这次与性能有关的一个重要升级是SVE2指令集，SVE最早是ARM与富士通合作的浮点性能扩展，日本最强也是TOP500最强超算富岳就使用了SVE指令集，现在推出的是第二代SVE浮点指令了。相比SVE的128位矢量，SVE2可以支持多倍128位运算，最多2048位，因此SVE2可以增强ML机器学习、DSP信号处理能力，提升了未来5G、虚拟现实、增强现实以及CPU本地运行ML的性能，同时ARM未来还会继续提升AI人工智能性能。除了CPU之外，这次还简单提到了未来的Mali GPU...阅读全文
随着企业的逐步成熟，他们会开发更多工具。在Google，我们持续创建新的外部和内部服务，以及支持这些服务的基础架构。 从2013年起，我们开始放弃之前用来更新和维护服务的简单的自动化工作流。每个服务都要求复杂的更新逻辑，并且还需要适应基础架构的变化，经常性的集群的启动关闭等等。配置多个，互相交互的服务的工作流变得难以维护。 我们需要一种全新的方案来适应业务的增长以及所涉及到的配置的复杂性。为此，我们开发了声明式的自动化系统，作为统一的控制层，并且取代了工作流。这个系统包括两个主要的工具：Podspec，描述服务基础架构的工具，和Annealing，更新生产环境来匹配Prodspec输出的工具。本文讨论我们解决过的问题，以及我们所选择的架构。 Prodspec和Annealing有一个根本共...阅读全文
Linus Torvalds 在内核邮件列表上宣布释出 Linux 5.6。Torvalds 称，他没有看到内核开发受到新冠疫情影响的迹象，大部分人可能早就习惯了在家远程工作。 他估计 Linux 5.7 的发布不太会有变动，但有人错过合并窗口还是可能的，毕竟合并窗口没有你或你周围的人的健康更重要。 Linux 5.6 的特性包括： Arm EOPD 支持，时间命名空间，BPF 调度器和批映射操作，openat2() 系统调用，WireGuard VPN 实现，流队列 PIE 包调度器，2038 年问题接近解决，pidfd_getfd()系统调用，ZoneFS 文件系统，BPF TCP 拥堵控制算法实现，移除 /dev/random blocking pool 等等。 具体可阅读...阅读全文
，代码重新检查，避免修改问题引发新的问题 3.6撤销提交（reset） 当发现这一次commit的内容是有错误的，有两种处理方法： 1、修改错误内容，再次commit一次 2、使用git reset 命令撤销这一次错误的commit 第一种方法比较直接，但会多次一次commit记录，而且有可能改错 推荐第二种方法，因为错误的commit没必要保留下来，还原到上一次也能保证正常工作 git commit提交后的结果 重置有三种模式：soft,mixed,hard git reset --hard HEAD 重置stage区和工作目录，就是没有commit的修改会被全部擦掉，适用于重新理清思路 git reset --hard HEAD^ 将你的 HEAD 和当前 branch 切到上一条...阅读全文
随着互联网的高速发展，云存储技术已经相当成熟了，网盘成了人们工作和学习中不可缺少的部分。尽管如此，离线存储技术也无法被取代，毕竟在没有网络的情况下，离线存储才是最佳的解决方案。 而目前使用的最多的且最方便的离线存储设备就是U盘，凭借小巧便携的体型设计赢得了广大用户的喜爱，但随着数据的日益膨胀，小小的U盘无论是在读写速度还是在容量上已经无法满足我们日益增长的存储需求。 而今天，金士顿在CES大会上展示了一款离线存储设备——HyperX Savage EXO外置SSD。HyperX Savage EXO外置SSD外壳采用聚碳酸酯打造，存储颗粒为3D TLC NAND闪存，拥有480GB和960GB两种容量可供选择。 外置SSD的接口为USB3.1 Gen 2，带宽高达10Gbps，实际连续读写...阅读全文
接收我的交易通知。】 然后点击 【提交】，等待审批即可。部分是在线秒批（应该是机审），个别需要等待一段时间。11 到这一步就注册好了。然后设置账户，包括登录名和密码之类的。接着，创建登录账户。记牢。以后登录就靠这个。12 启用数字安全令牌，点击启用。这一步是开启短信验证码功能。13 设置完成，会显示你的两个账户。分别是美元账户和新币账户。点击开始即可进入账户。14 账户充值OCBC对于我们大陆来说属于离岸账户，是个境外银行。所以我们入金的时候需要从国内银行跨境汇款过去。 一般流程是，购汇然后再跨境汇款（转账）。这个过程资料要认真填写。下面是给这个账户汇款可能用到的信息：收款行所在地选新加坡，收款行地址：63 Chulia Strel #10-00, OCBC Centre East...阅读全文
本文大部分内容翻译总结自《Software Engineering at Google》 第10章节 Documentation。 另外，该书电子版近日已经可以免费下载了 https://abseil.io/resources/swe_at_google.2.pdf，有兴趣的同学可以下载翻阅下。 首先声明，本问所说的文档不仅限于纯文本文档，还包含代码注释(注释也是一种特殊形式的文档)。 ## 文档的重要性 ## 高质量的文档对于一个组织或团队来说有非常多的益处，比如让代码和API更容易理解、错误更少；让团队成员更专注于目标；也可以让一些手工操作更容易；另外如果有新成员加入的话有文档也会让他们更快融入…… 写文档有比较严重的收益滞后性，不像测试，你跑一个测试case，它能立即告诉你是对还是错...阅读全文
Debian 发行团队发布了有关即将到来的 Debian 10 “Buster” 的最新信息。Debian 发行团队目前计划在 2019 年 1 月 12 日开始往冻结状态过渡，2019 年 2 月 12 日处于软代码冻结状态 (Soft Freeze)，并最终于 2019 年 3 月 12 日左右进行全面冻结。 据表示，官方发布 Debian 10.0 “Buster” 的时间将是明年年中左右。 此外，对于 Debian 11 “Bullseye”，他们希望能通过持续集成、自动打包测试等方式引入更多的自动化 QA 测试，而根据过去的发布时间，Debian 11.0 可能会在 2021 年发布， 而 Debian 12 的代号也已经确定，被命名为“Bookworm”。显然，还要再过好几年才...阅读全文
Django 2.2 已正式发布 ，这是一个长期支持版本（LTS），亦即意味着官方会提供 至少三年 的安全问题和数据丢失修复。除此之外，它还会接收到修复崩溃错误、新引入特性中主要功能错误的程序，以及修复接下来八个月到 2019 年 12 月为止关于旧版 Django 的回归错误。 2.2 新特性：https://docs.djangoproject.com/en/2.2/releases/2.2/下载地址：https://www.djangoproject.com/download/升级指南：https://docs.djangoproject.com/en/2.2/howto/upgrade-version/ 值得关注的新特性 HttpRequest.headers 可访问请求者的...阅读全文
Canonical 官方 宣布 Ubuntu 19.10 版本的发布日期定在 2019 年 10 月 17 日，它将是 Ubuntu 20.04 LTS 发布之前的最后一个短期版本。 根据 Ubuntu 按照字母顺序进行版本命名的规则，该版本名称基于字母 “E”，代号为 “Eoan Ermine”。“Ermine” 学名白鼬，俗称短尾黄鼠狼。 定于 9 月份发布的 GNOME 3.34 桌面版 将构成下一个 Ubuntu 版本的基础。此更新包括 Nautilus、Evince 和 Calendar 等核心应用程序的新版本，还可能包含改进的录音机工具。 此外，在 Ubuntu 19.04 版本中首次亮相的实验性 Xorg 分数缩放 设置将会在 19.10 版本中更容易获得。 新版本其他的计划...阅读全文
