Gogs 是由 Go 语言编写的，自由开源的 Git 服务。Gogs 是一款无痛式自托管的 Git 服务器，能在尽可能小的硬件资源开销上搭建并运行您的私有 Git 服务器。Gogs 的网页界面和 GitHub 十分相近，且提供 MySQL、PostgreSQL 和 SQLite 数据库支持。 在本教程中，我们将使用 Gogs 在 Debian Stretch 上按步骤指导您安装和配置您的私有 Git 服务器。这篇教程中涵盖了如何在 Debian 上安装 Go 语言、PostgreSQL 和安装并且配置 Nginx 网页服务器作为 Go 应用的反向代理的细节内容。 步骤 1 - 更新和升级系统 继续之前，更新 Debian 所有的库，升级所有包。 运行下面的 apt 命令： sudo apt...阅读全文
、Bitbucket 和 Subversion。 Git Git 是一个分布式版本控制系统，用来在软件开发过程中跟踪源代码的更改。它是专为协调不同程序员的工作而设计的，也可用于跟踪各种文件集中的更改。它的优势包括速度、数据完整性以及对分布式非线性工作流的支持。 GitHub GitHub 提供了 Git 的分布式版本控制和源代码管理功能，自己也有很多特性。 GitLab GitLab 中的版本控制提供了世界一流的源代码管理功能，可帮助你的开发团队共享、协作并尽可能提高生产力。 Bitbucket Bitbucket 是 Atlassian 所有的、基于 Web 的版本控制库托管服务，可用在使用 Mercurial 或 Git 版本控制系统的源代码和开发项目上。 Subversion Apache...阅读全文
在安装 Debian 10 的时候提示没有iwlwifi驱动，因为当时没有安装有 iwlwifi 的驱动盘，跳过后开机发现没有 wifi。这里我们将介绍，有线网正常的状态下，如何下载安装 iwlwifi 驱动，并开启 wifi 。 因为我用的是 Intel Wireless-N 的无线网卡，所以本教程以 Intel Wireless-N 为例说明。如果你使用的是其他厂商的无线网卡，请参考 Debian wiki，查找相应的配置方法。如果不确定无线网卡的型号，可以通过命令 lspci 查询，或者在 dmesg 的命令输出中找到线索。 更新安装源 我们需要添加 non-free 的安装源，到系统中，更新 /etc/apt/sources.list，添加以下记录： deb http...阅读全文
项目使电信运营商可以轻松地在难以到达的区域部署移动网络，从而降低了建设和维护电信网络的成本。Facebook 的 “Data for Good” 计划用于共享地理数据，以解决一些世界范围内的人道主义问题，包括在 COVID-19 疫情期间发挥作用。创建并维护 PyTorch 开源生态系统，为在计算机视觉、自然语言处理和其他学科中利用人工智能和机器学习贡献了很大一份力量；React.js 也由 Facebook 创建，它为世界上一些最受欢迎的网站提供支持，并且由于其简单性和灵活性而成为前端 Web 开发标准。 Linux 基金会会员分为银级、金级和白金级三种不同等级，白金级即最高等级，每年需缴纳会费 50 万美元，同时拥有董事会席位。AT&T、谷歌、华为、IBM、英特尔、微软、Oracle、腾...阅读全文
， 即可彻底屏蔽 /usr/lib/ 目录中的同名文件。 选项 所有选项都位于 "[Journal]" 小节： Storage= 在哪里存储日志文件： "volatile" 表示仅保存在内存中， 也就是仅保存在 /run/log/journal 目录中(将会被自动按需创建)。 "persistent" 表示优先保存在磁盘上， 也就优先保存在 /var/log/journal 目录中(将会被自动按需创建)， 但若失败(例如在系统启动早期"/var"尚未挂载)， 则转而保存在 /run/log/journal 目录中(将会被自动按需创建)。 "auto"(默认值) 与 "persistent" 类似， 但不自动创建 /var/log/journal 目录， 因此可以根据该目录的存在与否决定日志的保存...阅读全文
> 6.1 抽象为block块的好处 1) 一个文件有可能大于集群中任意一个磁盘 10T*3/128 = xxx块 2T，2T，2T 文件方式存—–>多个block块，这些block块属于一个文件 2) 使用块抽象而不是文件可以简化存储子系统 3) 块非常适合用于数据备份进而提供数据容错能力和可用性 6.2 块缓存 通常 DataNode 从磁盘中读取块，但对于访问频繁的文件，其对应的块可能被显示的缓存在 DataNode 的内存中，以堆外块缓存的形式存在。默认情况下，一个块仅缓存在一个DataNode的内存中，当然可以针对每个文件配置DataNode的数量。作业调度器通过在缓存块的DataNode上运行任务，可以利用块缓存的优势提高读操作的性能。 例如： 连接（join）操作中使用的一个小的查询表...阅读全文
10 月 20 日，2021 云栖大会上，阿里云发布全新操作系统“龙蜥”并宣布开源。同时，阿里达摩院操作系统实验室也宣告成立。 龙蜥操作系统定位于服务器端，支持 x86、ARM 等多种芯片架构和计算场景，兼容 CentOS 生态，支持一键迁移，并提供全栈国密能力。 阿里云在大会上透露，龙蜥操作系统已经在阿里巴巴内部打磨 10 年，... 30 13 阿里平头哥宣布开源四款玄铁 RISC-V 系列处理器 10 月 19 日，2021 云栖大会现场，阿里云智能总裁张建锋宣布，平头哥开源玄铁 RISC-V 系列处理器，并开放系列工具及系统软件。 此次开源的 OpenXuantie 系列 RISC-V 处理器，包括玄铁 E902、E906、C906、C910 等 4 款量产处理器，以及基于...阅读全文
如下: 当容器镜像挂载点文件系统的磁盘使用率大于--image-gc-high-threshold时（containerRuntime 为 docker 时，镜像存放目录默认为 /var/lib/docker），kubelet 开始删除节点中未使用的容器镜像，直到磁盘使用率降低至--image-gc-low-threshold 时停止镜像的垃圾回收。kubelet GarbageCollect 源码分析kubernetes 版本：v1.16GarbageCollect 是在 kubelet 对象初始化完成后启动的，在 createAndInitKubelet 方法中首先调用 kubelet.NewMainKubelet 初始化了 kubelet 对象，随后调用...阅读全文
Flatpak，Linux应用程序沙箱和分发框架（以前称为XDG-App），用于在Linux桌面上构建和分发托管应用程序，今天已经达到1.0里程碑。 经过三年多的开发，广泛使用的Flatpak Linux应用程序沙盒和分发框架终于达到了1.0版本，这意味着它已经足够成熟，可以在生产环境中部署和使用，用于分发和运行Linux应用程序。 “Flatpak 1.0是新稳定版系列中的第一个版本。这个新的1.x系列是0.10.x系列的继承者，它于2017年10月首次推出.1.0是新标准的Flatpak版本，推荐使用发行版尽快更新，“开发商Alexander Larsson说。 与Flatpak 0.10.0系列相比，Flatpak 1.0版本的亮点包括一个新的Flatpak门户，允许Linux应用程...阅读全文
LMDE 4 “Debbie” 正式发布了，LMDE 即 “Linux Mint Debian Edition”。它的目标是与 Linux Mint 尽可能相似，但不使用 Ubuntu，软件包库由 Debian 提供。 新版本主要带来了以下新特性： 支持 LVM 和全盘加密的自动分区主目录加密支持自动安装 NVIDIA 驱动程序支持 NVMe支持 SecureBoot支持 Btrfs 子卷改进安装程序自动安装微码包在 Virtualbox 中，实时会话的自动分辨率提高到最小 1024×768Linux Mint 19.3 改进（HDT、引导修复、系统报告、语言设置、HiDPI 和插图改进、新的引导菜单、Celluloid、Gnote、绘图、Cinnamon 4.4、XApp 状态图标等...阅读全文
西部数据开发了有一段时间的Zonefs已经确定要在Linux 5.6内核中登场了，这并不是一个传统意义上面的通用文件系统（比如Ext4、NTFS），而是一个针对特定硬件设备的文件系统，它为分区式存储设备进行了高度的优化。 熟悉Linux的朋友应该知道，在Linux下面内核会将存储设备视为块设备，比如目前会将SATA存储设备视为/dev/sdX。传统文件系统是在这个块设备上面进行操作，而应用程序则是通过系统提供的接口对块设备上面的数据进行访问。 但SMR HDD（叠瓦式硬盘）有一个毛病，它只有在顺序写入时才能正常发挥性能，一旦要进行数据覆盖写入，就需要改写这块数据所在区块内的所有磁道，造成严重的性能下降。传统的文件系统不会因为SMR HDD的特性而特别对待它，而Zonefs就是西部数据对...阅读全文
最近腾讯云活动不断，双十一智慧上云服务器的优惠力度非常的大，可以说是前所未有的历史低价了。赶紧行动吧， 2核4GB内存50GB硬盘，3Mbps带宽的国内主机，三年只需要688元，1核2GB内存50GB硬盘，1Mbps带宽的国内主机三年也只要268块，1核1GB内存50GB硬盘，1Mbps带宽的香港主机，三年只要428块。 需要特别提醒的一句是，如果你的账号之前就已注册，但是没有购买记录，也是可以参加的。活动页面也是很炫的，如果不想买国内主机，还有免备案的香港主机可选，价格都很良心， 相比此前的方案，优惠力度绝对是杠杠的， 活动地址（已更新）： 1核1GB 1Mbps 只要88/年：直达链接2核4GB 3Mbps 带宽 仅688元/三年：直达链接 目前活动优惠力度历史新低，建议大家尽快下单...阅读全文
许多人认为10月5日是 Linux 系统的周年纪念日，因为这是 Linux 在1991年首次对外公布的时间。不过，你可能不知道的是，早在1991年8月25日，当年还是大学生的 Linus Torvalds 就向 comp.os.minix 新闻组的人透露了由于“业余爱好”他正在研究操作系统的消息。因此，该时间也被许多爱好者视为 Linux 的真正诞生日期。 为纪念 Linux 27 岁诞辰，OMG Ubuntu 列出了 27 个与 Linux 和 Linus Torvalds 相关的有趣事实。 1、截至 2018 年，Linux 内核已有 20,323,379 行代码。尽管近期有所减少，但庞大的代码量意味着 Linux 仍然是地球上（单个）最大的开源项目。 2、Linux 差点不叫这个名字...阅读全文
进行完整的依赖性维护。Arch 可以从光盘镜像或者从 FTP 服务器安装，它以一份连续演化的、动态的系统形式运作。缺省的安装提供一份坚实的 基础，用户可再进行定制安装。此外，Arch Build System（ABS）能支持简便创建新软件包，修改原先软件包的配置，以及通过 Arch Linux User Repository 来将这些软件包与其他人共享。 下载地址：https://www.archlinux.org/download/...阅读全文
很多同学都已经学习了 Linux ，可能已经在自己的机器上安装过 Linux，甚至都能搭建个简单的个人博客，也有可能编译部署过邮件服务器之类的软件，可是感觉仍然对 Linux 有点摸不着，颇有隔靴挠痒的感受。 总是好奇 Linux 内核是怎么回事，究竟里面有点什么？总是好奇 Linux 是怎么启动起来的，那个什么 GRUB 怎么知道读取引导信息？总是好奇设备怎么就可以被当成文件操作，为什么可以从 /proc 读到进程的信息？总是好奇如何才能构建一个操作系统，从无到有的做成一个可引导的 Linux 启动盘？ 不用羡慕那些说起这些就头头是道是 Linux 极客们，其实你和他们之间只是差一个 LFS 而已。 LFS 是什么？ LFS（英文 Linux From Scratch 的缩写），中文释意...阅读全文
AMD表示，公司最新发布的“米兰”服务器芯片比目前最好的数据中心芯片处理速度更快。据悉，AMD完成该芯片的设计，并委托台积电采用7nm芯片制造工艺来实现量产。很快，Intel也要反击，其将在未来几周推出最新的“冰湖”（Ice Lake）服务器芯片，这将是首款采用Intel 10nm制造工艺量产的服务器芯片（据说性能相当于7nm制造工艺的“米兰”芯片）。无论这两款芯片的速度如何，但AMD仍有望拥有一些优势，比如每个芯片上的计算内核数更多，这使得芯片可以同时处理更多的软件应用程序。AMD服务器业务部门高级副总裁兼总经理丹·麦克纳马拉（Dan McNamara）表示，如果公司继续将客户反馈整合到新一代芯片中，就能保住领先地位。第三代EPYC 7003系列采用和锐龙5000系列同款的Zen3架构...阅读全文
去年的时候，Google 旗下 Project Zero 团队发现了一个由 CPU “ 预测执行 ” 导致的严重安全漏洞，而它也是一项被大多数现代处理器使用的性能优化方案。根据研究人员 Jann Horn 的演示，恶意攻击者可借此读取不该被它访问到的系统内存。某个未经授权的一方，可能在系统内存中读取到一些敏感信息，比如密码、加密密钥、或者在应用程序中打开的其它机密信息。 测试还表明，在一台虚拟机上发起的攻击，甚至能够访问到主机的物理内存。基于此，还可以获取在同一主机上、不同虚拟机的内存读取访问。 该漏洞影响许多 CPU，包括来自英特尔、AMD、ARM 的芯片，以及搭配运行的设备和操作系统。在获悉这种新型攻击的第一时间，谷歌安全和产品开发团队就积极动员了起来，以保护自家系统和用户数据。 万幸...阅读全文
使是用户删除计算实例之后，数据存储继续有效。亚马逊还提供了基于硬盘的弹性块存储服务，每个月每GB的存储费仅为4.5美分。上述业者苏里预测，弹性块存储的毛利率在60%到70%之间。数据库软件亚马逊云计算还给企业提供了多种数据库工具。传统上，企业更多使用关系数据库。数据存储在一个表中，每个表有多行和多列数据。应用软件可以在数据库中保存数据，也可以读出数据。AWS的“关系数据库服务”提供了多种选项：比如微软公司的SQL Server，甲骨文公司知名的Oracle，开放源码的MariaDB、MySQL和PostgreSQL，以及亚马逊自家的Aurora（可以和MySQL和PostgreSQL兼容）。苏里表示，如果客户在关系数据库中使用亚马逊自有的Aurora，那么这一业务的毛利润率大约65%到75...阅读全文
Linux Kernel 5.10 有望在本周末发布，外媒 Phoronix 盘点了 10 个值得关注的改进和新功能。5.10 不仅是 2020 年最后一个内核版本，而且还是长期支持（LTS）版本。 Linux Kernel 5.10 合并窗口期在今年 10 月关闭，当时外媒 Phoronix 就发文概览了主要功能。而在 5.10 即将发布之际，外媒体再次盘点了 10 项比较有趣的功能： 1.AMD Zen 3 温度监控 AMD Zen 3 温度监控现在可以在支持 k10temp 驱动程序和其他持久 Zen 3 扩展的 Linux 上运行，这对操作至关重要。Ryzen 5000 系列在 Linux 5.8-5.9 上运行良好，并且具备所有核心功能。 2.英特尔图形 在英特尔图形方面...阅读全文
美元），则要便宜，可能这就是 Intel 要切入的试产定位。 据悉，二代可扩展至强每颗处理器支持 6 通道内存，最多 12 条插槽，而傲腾内存条容量目前提供 128GB、256GB、512GB，插上六条那就是 3TB，而在一套八路系统里，傲腾＋DDR4 内存混合使用，总容量最高可以达到惊人的 36TB。 性能方面，傲腾 DC 内存无论是延迟还是带宽速度都会比 DDR4 差一些，可胜在便宜，且关机或重启时不会丢失数据 (非易失性)，系统恢复后可立即重新载入，大大减少下线时间，将服务器重启时间从分钟级别缩短到秒级别。...阅读全文
很多人误以为shell脚本只能在命令行下使用。其实shell也可以调用一些GUI组件，例如菜单，警告框，进度条等等。你可以控制最终的输出，光标位置还有各种输出效果。下面我将介绍一些工具，帮助你创建强大的，互动的，用户友好的 Unix/Linux shell脚本。我在FreeBSD和Linux下测试过这些工具，不过其他UNIX系列的操作系统应该都支持的。 1. notify-send 命令 这个命令可以让你通过通知进程发送一个桌面通知给用户。这可以用来向用户发送提示，或者显示一些信息而不用打断用户工作。你需要安装如下软件包： $ sudo apt-get install libnotify-bin 下面这个例子展示了如何从命令行向桌面发送一个简单的消息： notify-send...阅读全文
示前一部分的输出结果中含有“/usr/games”的那些行。这个游戏很酷哦。说不定还有其他赛道可玩的？apt-cache search torcs我的磁盘空间不够用了。我得把apt的缓存空间清空才行。apt-get clean哦不，老妈叫我把机器上的所有游戏都删掉。但是我想把配置文件保留下来，这样待会我只要重装一下就可以继续玩了。apt-get remove torcs如果我想连配置文件一块删除：apt-get remove –purge torcs额外的软件包deborphan和debfoster工具可以找出已经安装在系统上的不会被用到的软件包。提高命令行方式下的工作效率 您可以通过定义别名（alias）来提高这些命令的输入速度。例如，您可以在您的*~/.bashrc*文件中添加下列内容...阅读全文
（用于充电）microSD 读卡器（用于操作系统）3.5 毫米耳机插孔视频输出相机接口2 个电源指示灯3 个可编程按键（连接到 Raspberry Pi Zero 的 GPIO pins）电源开关 NODE 还发布了一个视频，展示了 Zero Terminal 3 的详细组装过程。目前，Zero Terminal 3 并未上市销售，不过 NODE 表示，他计划提供更多细节和说明，以帮助大家来构建自己的 Zero Terminal 设备和模块化附件。 更多详细介绍可查看：https://n-o-d-e.net/zeroterminal3.html...阅读全文
GitLab是一个利用Ruby on Rails开发的开源应用程序，实现一个自托管的Git项目仓库，可通过Web界面进行访问公开的或者私人项目。 它拥有与GitHub类似的功能，能够浏览源代码，管理缺陷和注释。可以管理团队对仓库的访问，它非常易于浏览提交过的版本并提供一个文件历史库。 前言 公司目前的开发架构中，使用了gitlab来统一管理上线发布代码的操作。鉴于是之前的前辈搭建的，所以打算自己手动安装一次，来熟悉相关的配置。 安装 中文版gitlab网站：https://www.gitlab.com.cn/installation/ 英文版gitlab网站：https://about.gitlab.com/downloads/ 选择对应的操作系统 我这里选择 Debian 9 版本，因为...阅读全文
引入的新的仲裁控制器确保元数据在整个仲裁中可以被准确复制。活动控制器将元数据存储在事件源日志主题中，仲裁中的其他控制器对活动控制器创建的事件做出响应。事件日志定期进行快照，确保日志不会无限增长。与基于 ZooKeeper 的控制器不同，如果出现了问题，仲裁控制器不需要从 ZooKeeper 加载状态，因为集群的内部状态已经分布在元数据主题中。这大大减少了不可用时间窗口，缩短了系统最坏情况恢复时间。下图显示了使用新的仲裁控制器比使用 ZooKeeper 更快地关闭具有 200 万个分区的 Kafka 集群。新的 KRaft 共识算法和仲裁控制器使得 Kafka 集群可以扩展到数百万个分区，不仅提升了稳定性，让 Kafka 变得更容易监控、管理和支持，而且让整个系统可以有一个单一的安全模型，使...阅读全文
Debian 项目宣布 Debsources，允许浏览和搜索所有 Debian 发行版软件包源代码的 Web 服务，现在是托管在官方Debian基础设施在https://sources.debian.org。 Debian 称，该服务之前托管在域名 sources.debian.net（已重定向到 sources.debian.org）， 他们现在将其迁移到 Debian 硬件和基础设施上，并借此机会正式宣布了这一服务。Debsources 内容可通过 HTML 界面和 JSON API 访问，会定期更新，目前是一天更新四次。 Debsources 被广泛用来进行各种 Debian 的源代码研究。 Dear developers, We're happy to announce that...阅读全文
束使用 Deployment、DaemonSet、ReplicaSet 或者 StatefulSet 跨节点部署 Pod使用多节点使用基于角色的访问控制（RBAC）在外部托管Kubernetes集群（使用云服务）升级Kubernetes版本监控集群资源和审计策略日志使用版本控制系统使用基于Git的工作流程（GitOps）缩小容器的大小用标签整理对象（译者注：或理解为资源）使用网络策略使用防火墙使用命名空间K8s 中的命名空间对于组织对象、在集群中创建逻辑分区以及安全方面的考虑至关重要。 默认情况下，K8s 集群中有 3 个命名空间，default、kube-public 和 kube-system。RBAC 可用于控制对特定命名空间的访问，以限制组的访问以控制可能发生的任何错误的爆炸半径，例...阅读全文
目前出现U盘启动盘制作工具，一般有两个版本装机版和 UEFI 版本。大家可能不知所措，不知道究竟该下载哪个版本使用了？ uefi就必须主板支持才能用，一般老电脑都不支持，所以不支持的用装机版或者普通版，新电脑用uefi版。 UEFI版： UEFI 版简单来说就是新一代的BIOS，图形的界面，用鼠标点就可以，再深入一点，这种BIOS里面有一项EFI启动，开启了这个功能，装好的电脑开机启动速度大大加快。2012年以后的电脑和主板基本都带有EFI功能。 优点： 1. 免除了u盘启动设置 2. 可直接进入菜单启动界面: 3. 进入pe快捷方便 UEFI进入方法： 1、主板UEFI启动优先的，启动电脑会直接进入支持uefi的PE。 2、BIOS启动菜单选择U盘带UEFI字样的。 装机版： 装机版为最...阅读全文
、Memory、Storage。 4. **资源效率**： - 基于当前的资源提供量和过去7天的资源使用量计算。 - 资源分成三个维度： Compute、Memory、Storage。 - 成本构成四个维度：空闲、系统、应用、其他。 5. **Controller Allocation**：按 Controller 分类，通过过去两天计算每个 Controller 的成本。 6. **Service Allocation**：按 Service 分类，通过过去两天计算每个 Service 的成本。 7. **Namespace Allocation**：按 Namespace 分类，通过过去两天计算每个 NS 的成本以及成本效率。 计算方法：每种资源利用率 × 各自的价格之和 / 总价格 8...阅读全文
Knoppix 8.6 已经发布，Knoppix 是一套光盘启动的 GNU/Linux 系统 (LiveCD)，原来的 Linux Live Area 现在基于 Debian Buster。 Knoppix 8.6 基于 Debian 10.0 Buster，从 Debian 测试中选择了包，对于更新的图形支持使用了 Unstable/Sid 。Knoppix 8.6 附带了 Linux 5.2 内核，Knoppix 8.6 还附带了最新的桌面环境 BITE 和其他更新的软件。具体内容如下： 8.6 基于 Debian/stable (buster)，一些来自 Debian/testing 和 unstable(Sid) 的包用于更新的图形驱动程序或桌面软件包。它使用 Linux...阅读全文
Proxmox 5.3 默认包含CephFS, 可以直接用Web界面进行配置和管理。相比之下，Proxmox 5.2 版本用 pveceph install 安装，用命令行初始化pveceph init --network网络。在Proxmox VE web管理界面，点几下鼠标就能完成文件系统的创建和配置，以前的版本需要在命令行下完成。 这次官方发布更新的点比较多，这里只挑几个重要的介绍，想详细了解的同学请参考发布记录。 磁盘管理GUI界面（ZFS, LVM, LVMthin, xfs, ext4） CephFS管理GUI界面（MDS） ZFS over iSCSI 插件支持 Linux-IO 目标（LIO Target） 支持模拟运行ARM架构虚拟机（试验特性，搞开发的同学可以体验下...阅读全文
Linux Kernel 5.11 为期两周的窗口合并期即将于今天结束。Linux 5.11 合并了很多新特性和令人激动的改进，正式版将会在明年 2 月和大家见面。Linux 5.11 作为非 LTS 长期支持版本，是 2021 年首个主要的稳定内核版本。 Linux Kernel 5.11 新版本的工作量比较繁重，主要涉及了大量英特尔和 AMD 的更改，改进 Syscall User Dispatch 以便于让 Wine 运行更新的 Windows 游戏，持续 IO_uring 改进，优化 Btrfs 文件系统，并会整合联想贡献的 ThinkPad 掌托传感器检测等。 在英特尔方面，经过多年的努力 Linux 5.11 中将合并 SGX Enclaves，英特尔的图形驱动也支持整数缩放支...阅读全文
1. Kafka介绍 1.1.1. Kafka是什么 kafka使用scala开发，支持多语言客户端（c++、java、python、go等） Kafka最先由LinkedIn公司开发，之后成为Apache的顶级项目。 Kafka是一个分布式的、分区化、可复制提交的日志服务 LinkedIn使用Kafka实现了公司不同应用程序之间的松耦和，那么作为一个可扩展、高可靠的消息系统 支持高Throughput的应用 scale out：无需停机即可扩展机器 持久化：通过将数据持久化到硬盘以及replication防止数据丢失 支持online和offline的场景 复制代码 1.1.2. Kafka的特点 Kafka是分布式的，其所有的构件borker(服务端集群)、producer(消息生产...阅读全文
在 Systemd (linux 操作系统流行的 init 系统和服务管理器) 中发现了一个关键漏洞, 这使得远程攻击者有可能触发缓冲区溢出, 从而通过 dns 响应在目标计算机上执行恶意代码。 Systemd是什么 systemd 是一种系统初始化程序。和 sysVinit 以及 upstart 一样，systemd 会成为系统开机时启动的第一个进程（至少 PID 是 1），由它掌管计算机接下来要做的事情，例如读取 fstab 挂载磁盘和按照 runlevel 的设定启动各种服务。其安全的重要性不言而喻。 Systemd远程代码执行漏洞 CVE-2017-9445 该漏洞编号 CVE-2017-9445 ，实际上驻留在 " systemd-resolved " 的...阅读全文
虚拟内存对进程的”欺骗”，每个进程都认为自己获取的内存是一块连续的地址。我们在编写应用程序时，就不用考虑大块地址的分配，总是认为系统有足够的大块内存即可。 安全：由于进程访问内存时，都要通过页表来寻址，操作系统在页表的各个项目上添加各种访问权限标识位，就可以实现内存的权限控制。 数据共享 通过虚拟内存更容易实现内存和数据的共享。 在进程加载系统库时，总是先分配一块内存，将磁盘中的库文件加载到这块内存中，在直接使用物理内存时，由于物理内存地址唯一，即使系统发现同一个库在系统内加载了两次，但每个进程指定的加载内存不一样，系统也无能为力。 而在使用虚拟内存时，系统只需要将进程的虚拟内存地址指向库文件所在的物理内存地址即可。如上文图中所示，进程 P1 和 P2 的 B 地址都指向了物理地址 C。 而...阅读全文
SK海力士日前宣布推出新一代企业级SSD硬盘，不过官方并没有公布SSD硬盘的名称，只知道是NVMe标准的，基于72层堆栈的3D TLC闪存，M.2版容量最大4TB，U.2容量可达8TB。 性能方面，SK海力士表示新一代企业级硬盘的连续速度可达3200MB/s，随机性能可达160K IOPS，与2018年FMS展会上推出的72层堆栈闪存硬盘相比，新一代企业级SSD的顺序读写性能提升30%，随机写入提升了70%，同时支持读取敏感型及混合型应用，包括数据中心、AI、ML机器学习及VDI虚拟桌面架构等。 值得一提的是，SK海力士的新一代企业级SSD具备极低的功耗，正常应用低于14W，这在企业级SSD中是很低的水平了。 此外，SK海力士还表示将在今年底推出容量更大的企业级SSD硬盘，闪存会从目前的...阅读全文
ListBucket 操作，它将返回有关存储段中项目的信息。任何您没有显式允许的操作都将被拒绝。 资源：您允许对哪些资源执行操作。例如，您将允许用户对哪些特定 Amazon S3 存储段执行ListBucket 操作？用户不能访问任何您没有显式授予许可的任何资源。 效果：当用户请求访问权限时将产生什么效果（允许或拒绝）。因为默认设置为拒绝用户访问资源，因此您通常需要指定您将允许用户访问资源。 AWS IAM 最佳实践 隐藏您的 AWS 账户根用户 访问密钥创建单独的 IAM 用户使用组向 IAM 用户分配权限授予最低权限利用 AWS 托管策略开始使用权限使用客户托管策略而不是内联策略使用访问权限级别查看 IAM 权限为您的用户配置强密码策略为特权用户启用 MFA针对在 Amazon EC2 实例上运行的应用程...阅读全文
Python 开发者现在可以观摩下美国情报机构 NSA 是如何培训 Python 程序员的。软件工程师 Chris Swenson 根据信息自由法案递交申请，要求访问 NSA 的 Python 培训材料，结果收到了 400 页经过编辑的 NSA COMP 3321 Python 培训课程打印资料。 Swenson 扫描了打印稿，用 OCR 进行识别，确保数字档案可搜索，将其托管在 Digital Oceans Spaces，之后又被上传到了互联网档案馆。Swenson 称他问 NSA 索要 Python 培训材料纯粹是出于好奇。 Python 开发者 Kushal Das 观摩之后摘录些有趣的细节：NSA 有内部的 Python 包索引，其 GitLab 实例是...阅读全文
的定制能力。ECharts 底层依托了开源渲染引擎 ZRender ，支持 Canvas 和 SVG 等多种方式的渲染，支持 PC 、移动端、数据大屏、服务端渲染等多种设备场景。 目前，在 2018 年初发布的新版本 ECharts (4) 中，一些常用图表已支持最高达千万级的数据可视化，并且提供了小程序、无障碍访问等支持。基于 WebGL 的 ECharts-GL 能支持各种 3D 图表渲染、以及海量数据的渲染加速。目前，各种基于 ECharts 的扩展库，以及相关的可视化服务系统已经形成了丰富的产品体系和活跃的社区环境。ECharts 目前在 GitHub 上拥有 25k+ 的关注和 2k+ 的相关项目。大量的社区的反馈和贡献使 ECharts 不断地迭代进化。 业内人士认为，进入...阅读全文
都要用G1垃圾收集器，因为年轻代内存比较大，用G1可以设置GC最大停顿时间，不至于一次minor gc就花费太长时间，当然，因为像kafka，rocketmq，es这些中间件，写数据到磁盘会用到操作系统的page cache，所以JVM内存不宜分配过大，需要给操作系统的缓存留出几个G。 2.1 线上问题及优化 2.1.1 消息丢失情况 消息发送端： （1）acks=0： 表示producer不需要等待任何broker确认收到消息的回复，就可以继续发送下一条消息。性能最高，但是最容易丢消息。大数据统计报表场景，对性能要求很高，对数据丢失不敏感的情况可以用这种。 （2）acks=1： 至少要等待leader已经成功将数据写入本地log，但是不需要等待所有follower是否成功写入。就可以继续发...阅读全文
树莓派基金会发布了一款别具一格的新品单板计算机：Raspberry Pi 400。这部新款树莓派的外观看起来就是一块小键盘，开发板集成在键盘内部。官方表示其性能比此前发布的 Raspberry Pi 4 略高。 据 Phoronix 的评测介绍，树莓派 400 是一个非常漂亮的小设备，外形小巧，采用大铝块冷却的方式作为键盘内的散热器。常用的线路接口设置在键盘的后方。 树莓派 400 配置的是与树莓派 4 相同的 Broadcom SoC，采用 Cortex-A72 四核设计，主频为1.8GHz，比树莓派 4 Model B 的 1.5GHz 略高。起步价为 70 美元。关于树莓派 400 的更多测试信息可查看 Phoronix。...阅读全文
EXT4 和 NTFS 文件系统引导、“持续变动”（Persistent Changes）特性也已默认启用。 其它方面，Slax 9.3 改进了 xLunch 应用程序启动器的能力（支持自动更新、显示新安装的程序）、支持在启动时挂载外部驱动器（在 PCManFM 中添加了一个快捷方式）、键盘布局也能够长期保持。 最后，Slax 9.3 默认使用的 syslinux bootloader 已更新至最新版本，并且重新实现了屏幕分辨率的变更，以使它能够更好地工作。 传送门： http://www.slax.org/en/blog/24578-Slax-9.3-is-here.html...阅读全文
2009 年正式发布的 Windows 7 操作系统，已于 2020 年 1 月 14 日终止面向公众的技术支持。即便如此，自由软件基金会（FSF）还是做好了下一步行动的准备。为了接管 Windows 7 源码，该组织已于上周向微软邮寄了一枚空硬盘。至于软件巨头将如何回应，目前暂不得而知。 自由软件基金会称： 鉴于其拥有所有必要的合法权利与措施，微软有权选择是否开源 Windows —— 只待该公司一声问候，我们可随时为其提供力所能及的帮助。 尽管微软不大可能开放 Windows 7 的源码，但自由软件基金会表示将该操作系统的钥匙交由开源社区的提议，已经收到了热烈的反响。 过去几周，我们已经向其传达了这样的信息 —— 全世界成千上万的人希望 Windows 开源 —— 而我们将为其提供相应...阅读全文
使用的东西。密集字段将使用与以前相同的空间量，但稀疏字段将显着减小。这不仅可以减少磁盘空间使用量，还可以减少合并时间并提高查询吞吐量，因为可以更好地利用文件系统缓存。 完整更新内容请点此查阅...阅读全文
通过先后收购HGST（日立）、SanDisk（闪迪），西部数据坐上了全球硬盘界的头把交椅。虽然西数和希捷一样看到了SSD的巨大势头，但出于各种因素，仍不敢贸然掉头。近日，西数在官方博客秀出了新一代的充氦硬盘的内部，高达8碟装。 早在2013年，HGST率先推出充氦技术的时候，当时设定的技术极值是7碟6TB，现在已经发展到8碟最高12TB，据说两年内还有14和16TB。 充氦的目的是减少碟片间距便于封装多碟，这一方式比提高单位面积的存储量在技术上要稍微容易点。 具体来说，充氦硬盘的外观看上去和普通机械硬盘一模一样，也是标准的3.5寸规格，内部机械结构也是相同的，仅仅是将内部填充的普通空气换成了氦气。 但就是这点变化，可以大大缩短碟片之间的距离，彼此靠得更近。在这项技术诞生前，硬盘最多只能塞进...阅读全文
2021 年 1 季度，HDD / SSD 年化故障率对比。在笔记本电脑市场，厂商也愈加倾向于将内置 SSD 作为其轻薄本产品线的唯一选项。此外 BackBlaze 祖辛发表的一项研究，更是揭示了一个有趣的事实 —— SSD 的可靠性，竟然是 HDD 的 21 倍！以定期发表企业存储可靠性报告而被大家所熟知的 BackBlaze，让我们直观地了解到了各款驱动器的平均或年化故障率（AFR）。HDD / SSD 终身年化故障率对比2021 年 1 季度期间，BackBlaze 发现，各品牌机械硬盘的 AFR 为 10.56%，而同期各品牌固态硬盘的 AFR 低至惊人的 0.58% 。换言之，大约每 10 块 HDD 中，就有 1 个发生了故障。而在大约每 200 块 SSD 中，也只有 1 个...阅读全文
器交付给OpenShift 将控制接口暴露给Ansible 将数据接口暴露给Insights Paul Cormier在主题演讲上对目前红帽各个产品线所处的位置和相互关系进行了梳理，可参考文末附录部分的演讲截图。 其他：跨领域开源 从两年前开始，红帽成立了一个名为Open Source Stories的制片项目，平均每半年制作一个讲述跨领域开源案例的记录短片，至今已经发布了五个短片，分别涉及教育、义肢制作、脑肿瘤治疗、城市庆典活动组织、以及一套关于AI发展的系列。在本次峰会，红帽也邀请了新加坡GovTech创新实验室、开源硬件组织OSHWA.org、以及MIT开放农业实验室（Media Lab下的OpenAg项目）等不同领域的负责人到现场分享。 与传统企业数字转型的目标类似，跨领域开源的目标...阅读全文
本文记录如何从 Debian 安装 Proxmox VE，以及配置 IPv4 和 IPv6 网卡，为硬盘分区。 预配置系统装好后，从 NOCIX 后台面板取得 登陆用户名 和 密码。 用户名是 customer密码是一串随机生成的字符串 使用 su 切换到 root 还需要输入密码，这样频繁操作比较麻烦。 免密登陆 root安装 sudo 实现免密 su 12apt updateapt install -y sudo 修改 /etc/sudoers 文件注意：只能用 visudo 交互式来修改 sudoers 文件 这是为了防止被脚本修改，就别想用 echo 来改了 visudo 会验证配置的格式，如果不验证，而你写的配置有问题，那么你无法切换到 root，而只有 root 用户才能修改...阅读全文
了答案。 从单机到分布式，是追求更快和更高的性能，但也带来了更多的不确定性。比如，不确定计算机何时异常，不确定磁盘何时损坏，不确定网络通信的延迟，也不确定消息是否被正常消费。这些不确定性构成了分布式应用的挑战，简而言之： 异构的机器与网络：稳定性问题普遍的节点故障：可靠性问题不可靠的网络：一致性问题 面对这些挑战，业界提出了诸多的分布式理论、协议，如CAP定理，BASE理论，一致性协议2PC/3PC/ZAB，来保证系统的正常运行。虽然问题貌似是有了解决方案，但是应用的复杂度升高了。应用除了需要实现业务需求，还要兼顾非业务需求，集成诸如服务发现、负载均衡、失效转移、动态扩容、数据分片、调用链路监控等分布式系统的核心功能，对应用有很强的侵入性，这就是以Spring Cloud为代表的微服务框架的...阅读全文
EnduroSLC闪存芯片，从名字上就可以看出强调超长寿命，P/E循环可选5万次、10万次、25万次三种规格(QLC才不过1000-1500次左右)，搭配无缓存主控支持增强型掉电保护，性能也是上一代的四倍，而且可耐受-40℃到85℃的极端温度。 该硬盘采用BGA整合封装的单芯片方案，集成主控和闪存，145-ball封装，尺寸仅14×24mm，容量不大2GB-128GB，系统通道是SATA 6Gbps，支持NCQ。 具体读写速度指标没有公布，但是对于这种产品来说，能跑多快反而是次要的。 Greenliant表示，NANDDrive EX系列已经开始向客户送样，计划今年第四季度量产，同时还会推出基于3D MLC闪存的NANDDrive MX系列，也是SATA 6Gbps，今年第四季度初出样，年底量产。...阅读全文
