三星谈论下一代DRAM解决方案：GDDR7、DDR5、LPDDR5X和V-NAND

。系统LSI业务不仅制造领先的单个产品，而且是一个整体解决方案供应商，可以将各种逻辑技术合并到一个平台，以便向客户提供优化的解决方案。"在一个需要机器像人一样学习和思考的时代，扮演大脑、心脏、神经系统和眼睛角色的逻辑芯片的重要性正增长到前所未有的水平，"三星电子总裁兼系统LSI业务负责人Yong-In Park说。"三星将融合并结合其嵌入SoC、传感器、DDI和调制解调器等各种产品中的技术，以便作为整体解决方案供应商引领第四次工业革命。"第四次工业革命是System LSI技术日会议的一个关键主题。System LSI业务的逻辑芯片是超智能、超连接和超数据的重要物理基础，这些都是第四次工业革命的关键领域。三星电子的目标是将这些芯片的性能提高到能够像人一样完成人类任务的水平。考虑到这一愿景，系统...阅读全文

打破IP协议重塑互联网 华为能做到吗

的变更可能导致政府对互联网及其用户实行更集中、自上而下的控制，这将对安全和人权产生影响。 华为对此解释称，开发 New IP 只是为了满足快速发展的数字世界的技术要求，并没有将任何一种控制机制做入到设计中。同时，华为还指出，New IP 的研究和创新向全世界的科学家和工程师开放，他们可以参与进来，并为之贡献。 另外，关于安全方面的质疑，华为表示该架构将具有“关闭命令”功能，可以使中心点断开特定信号源的连接。 除了对 New IP 质疑，还存在从根本上否定 New IP 的观点。IETF（The Internet Engineering Task Force，互联网工程任务组）主席 Alissa Cooper 表示，互联网的发展是通过模块化和弱耦合的构建模块实现的，这是互联网的卓越之处。即使是...阅读全文

图解 Debian 系统通用安装教程

这篇文章我会尽可能详细地说明如何快速安装纯净的Debian新系统，需要懂一点vi编辑器的使用方法。 如果是新手，没用过 vim 编辑器也不用担心，我会尽量详细地说明使用方法。 首先在Debian官网上下载网络安装CD或者完整DVD镜像，DVD镜像只需DVD-1即可。如果你的网络环境不错，推荐下载 netinst 包，通过网络安装 Debian 系统。 下载好镜像后做成U盘启动盘，从U盘启动开机。在引导界面选择Graphical install（图形化安装），进入安装过程，如图： 选择语言界面，选择中文吧， 提示虽然是好心，但是安装过程中我就见到一处乱码还就是下面这个图上，直接选是，下一步。 区域选择，选择中国。 主机名，自己随便填吧。 域名可不填，直接下一步。 设置root密码，自己设定好...阅读全文

新加坡华侨银行(OCBC) 零门槛开户 使用APP在家即可申请

者自己手机自带的商店。2. 进入开户流程准备好所需材料，开始进入开户流程。1 打开APP 选择简体中文。如果没有弹出，可以点击右上角来选择语言。然后，点击 【注册成为新客户】​2 选择第二项 【持电子护照的外国人】，然后点击【开始申请】​输入介绍人代码 【 IRVU37JB 】，可以获得 15 新币，大约80元人民币的奖励。不写的话没有任何奖励。​3 国家代码点进去选择中国大陆 +86，手机号和邮箱输入自己的即可。然后，接收验证码并填写。​4 点击下一步，扫描护照条形码。这一步，把护照打开到有人像的那一页，然后在光线充足的地方使用手机扫描。 需要一些耐心，扫描可能不会很快，手拿稳多试试即可。​5 NFC 读取护照芯片。护照合上，手机背面贴在护照正面上，开始读取。缓缓移动手机，调整到可以读取的...阅读全文

为什么 Django 能持续统治 Python 开发世界

：避免重复。 Django是用Python编写的，因此其减少了太多中间层代码并突出提高了效率。Django可以支持云平台，使其成为Web开发中更受欢迎的选择。 Django主要特点 Django“自备军需”（Batteries-Included） Django基于“自备军需”的理念，您不必使用单独的库来实现常见功能，例如身份验证，URL路由，模板系统，对象关系映射器（ORM）和数据库模型迁移。 如果您正在使用或曾经用过Flask，您一定注意到了它需要调用其他库，如Flask-Login来执行用户身份验证。 Django不是这样。 自由的API 使用Django，很容易根据您的模型生成Python API。 只需一个简单的命令，不需要额外的编码就足以开始生成API了。 独特的管理页面 即使在网站...阅读全文

漫画赏析：Linux 内核到底长啥样

今天，我来为大家解读一幅来自 TurnOff.us 的漫画 “InSide The Linux Kernel” 。TurnOff.us 是一个极客漫画网站，作者 Daniel Stori 画了一些非常有趣的关于编程语言、Web、云计算、Linux 相关的漫画。今天解读的便是其中的一篇。 在开始，我们先来看看这幅漫画的全貌！ Inside the Linux Kernel 这幅漫画是以一个房子的侧方刨面图来绘画的。使用这样的一个房子来代表 Linux 内核。 地基 作为一个房子，最重要的莫过于其地基，在这个图片里，我们也从最下面的地基开始看起： Filesystem 地基（底层）由一排排的文件柜组成，井然有序，文件柜里放置着“文件”——电脑中的文件。左上角，有一只胸前挂着 421 号牌的小企...阅读全文

DevOps 越来越流行，2019 年这八大趋势值得关注

务就跟着学，一定要了解自己的需求，并知道为什么要采用微服务架构。 更多公司预计会选择企业版软件 很多公司仍处于是自己开发还是购买企业版软件的两难境地。我们建议你做自己最擅长的事情，并按照自己的要求购买相应的工具。这样不仅可以帮助你专注于你的目标，还可以完全依赖第三方平台来提高工作效率。很多公司现在都在通过企业版软件来构建自己的基础设施，并确保安全性尽可能得到最好的控制。 Kubernetes 将进一步演化 Kubernetes 因为易用性而成为增长最快的容器技术。Kubernetes 还建立了一个壮大的开源社区。在世界各地，很多 CIO 和技术专家已经在使用 Kubernetes，并预计在 2019 年会有重大的发展。 最近，云原生计算基金会（CNCF）进行了一项调查，分享了容器编排领域所发...阅读全文

APISIX Ingress 如何使用 Cert Manager 管理证书

NodePort，你可以根据需要修改其类型，比如你的 Kubernetes 集群是云厂商托管的，则可以考虑将其修改为 LoadBalancer 类型，以获取一个外部可达的 IP。 这里我们通过端口转发的方式将服务映射到本地。 kubectl port-forward -n ingress-apisix svc/apisix-gateway 8443:443 然后开始配置访问。 curl https://httpbin.org:8443/json --resolve 'httpbin.org:8443:127.0.0.1' -sk { "slideshow": { "author": "Yours Truly", "date": "date of publication", "slides...阅读全文

理解 Linux 的虚拟内存

前不久组内又有一次我比较期待的分享：“Linux 的虚拟内存”。是某天晚上加班时，我们讨论虚拟内存的概念时，leader 发现几位同事对虚拟内存认识不清后，特意给这位同学挑选的主题。 我之前了解一些操作系统的概念，主要是毕业后对自己大学四年的荒废比较懊恼，觉得自己有些对不起计算机专业出身，于是在工作之余抽出时间看了哈工大在网易云课堂的操作系统公开课，自己也读了一本讲操作系统比较浅的书 《Linux内核设计与实现》，而且去年自己用 C 写简单的服务器时，也追根究底了解了更多的系统底层知识。多亏了这些知识，让我对应用层的知识更有掌控感，也在上次排查问题时（从应用到内核查接口超时）助了我一臂之力。 前几天另一位同事来问另一个虚拟内存相关的问题，我才发现对于虚拟内存，我的理解还不够深刻，一些概念还...阅读全文

阿里巴巴版 JDK 首发 GA 版 生产环境可用

Dragonwell JDK 尽快在生产环境中可用。该版本同步了 OpenJDK 上游社区 jdk8u212-b04 的最新更新，并通过了阿里巴巴内部生产环境测试。该项目最初开源时，阿里云智能基础产品事业部资深技术专家李三红在接受 InfoQ 独家专访时反复强调一个观点： Alibaba Dragonwell 一定是 OpenJDK 的下游，每个 Alibaba Dragonwell 发行版都会同步上游最新更新，并经过阿里巴巴内部大规模的应用集群测试。同时，阿里巴巴也会积极将 AJDK 上的技术积累贡献到 OpenJDK，积极参与社区的项目更新和维护。 除了同步上游社区，Dragonwell 8.0.0 还修复了一些在阿里巴巴场景下发现的重要 Bug。同时，该版本提供了默认安全证书，并会随时更新维护。 此外...阅读全文

容器原理之cgroup - abin在路上

“ 以 docker 为代表，轻量、便携的 container 使得打包和发布应用非常容易。系列文章容器原理主要分析 container 用到的核心技术，主要包括 Linux namespace，cgroups，overlayfs，看完这些内容，你将可以手动创建一个和 container 类似的环境。 cgroup（control group）是一个内核特性，用于限制、统计、隔离一组进程的资源（CPU、内存、磁盘、网络等），首字母不要大写。 “ “cgroup” stands for “control group” and is never capitalized. 单数形式（cgroup）指所有特性，也可以作为“cgroup controllers”的修饰。 复数形式（cgroups）指...阅读全文

Kafka 3.0新特性全面曝光，真香！

导语 | kafka3.0的版本已经试推行去zk的kafka架构了，如果去掉了zk，那么在kafka新的版本当中使用什么技术来代替了zk的位置呢，接下来我们一起来一探究竟，了解kafka的内置共识机制和raft算法。一、Kafka简介Kafka是一款开源的消息引擎系统。一个典型的Kafka体系架构包括若干Producer、若干Broker、若干Consumer，以及一个ZooKeeper集群，如上图所示。其中ZooKeeper是Kafka用来负责集群元数据的管理、控制器的选举等操作的。Producer将消息发送到Broker，Broker负责将收到的消息存储到磁盘中，而Consumer负责从Broker订阅并消费消息。（一）Kafka核心组件producer：消息生产者，就是向broker...阅读全文

Facebook 开源的一组 Linux 内核组件与工具

安全（比如沙箱）。 Btrfs：https://facebookmicrosites.github.io/btrfs/ Btrfs 是下一代文件系统，它以当下的数据中心为基础。它是一个写时复制（CoW）文件系统，专注于高级功能实现、容错、修复和轻松管理。Btrfs 旨在解决和管理大型存储子系统，并支持快照、联机碎片整理、池化和集成的多设备支持等功能。 Netconsd：https://facebookmicrosites.github.io/netconsd/ Netconsd 是一个基于 UDP 的 netconsole 守护程序，为 Linux netconsole 消息提供轻量级传输。它接收并处理来自 Linux 内核的日志数据，并将其作为结构化数据提供以给生产工程师以快速识别集群中问...阅读全文

Go 1.9 的新特性介绍

， 可以使用./vendor/...通配符。 性能提升 性能提升多少势很难精确描述的，对于大部分的程序，应该运行更快一点。 主要在于垃圾回收器的优化、更好的生成的代码以及核心库的优化。 完整的信息可以参考 Tip Go 1.9 Release Notes, Go 1.9发布后可以访问Go 1.9 Release Notes 本文转自 http://colobu.com/...阅读全文

历数2017年五大Linux痛点

统的消失 许多用户都在哀叹他们最喜爱的发行版和软件项目中不再支持32位操作系统。越来越少的产品继续支持32位平台，这将会带来市场份额的降低和用户的流失。幸运的是，我们谈论的是开源，所以只要有人还在关心32位平台，你至少会有几个32位系统可选择。 5.不支持X-forwarding 很多长期用户经常使用X-forwarding，并将其看作一个关键功能。但随着Linux有越来越多的人使用，其对于X-forwarding的测试和支持有所减少，尤其是新应用程序。随着网络的透明度不断发展，情况可能会在好转之前变得更糟。 与去年相比有哪些变化 ·视频（特别是加速器加速；最新的视频卡；专用驱动程序；高效的电源管理） ·蓝牙支持，特定的wifi芯片和打印机，电源管理以及暂停/恢复，对许多用户来说仍然是麻烦的...阅读全文

故意泼脏水？AMD官方回应Zen安全漏洞

司来回应业界和媒体联系，这并非正常安全公司的风格。 AnandTech就这些疑问向CTS-Labs发去邮件查询，尚未得到任何回应。 很多人可能会和此事将近来闹得沸沸扬扬的Meltdown熔断、Spectre幽灵漏洞相比，但后者是Google等权威安全团体早就确认的，而且第一时间和Intel、AMD、ARM、微软、亚马逊等等业内相关企业都做了联系沟通，共同解决，最后媒体踢爆属于意外曝料，而且当时距离解禁期已经很近了。 另外值得注意的是，这次曝光的漏洞，都是涉及AMD Zen处理器内部的安全协处理器(ARM A5架构模块)和芯片组(祥硕给AMD外包做的)，和Zen微架构本身并无任何关系，并非核心级别问题。 还有媒体报道指出，攻击者如果要利用这些漏洞，都必须提前获取管理员权限，然后才能通过网络安装...阅读全文

Linux 基金会与 RISC

Linux是全球最重要的开源软件，RISC-V则是近年来兴起的一个开源CPU指令集，现在这两个阵营宣布达成合作——Linux基金会与RISC-V基金会将共同合作加速推广RISC-V ISA的开发及采用，Linux基金会还将为RISC-V生态系统提供大量资源，包括培训计划、基础工具以及社区扩展、营销和法律专业知识。 Linux开源社区经过这么多年发展已经很成熟了，而RISC-V在普通人眼里还很陌生，有些人可能还记得之前ARM公司还专门上线了一个网站，攻击RISC-V指令集的各种缺点，而ARM之所以如此兴师动众就是担心RISC-V指令集未来会跟自己抢饭碗，因为ARM赖以生存的就是ARM处理器/指令集授权费，但RISC-V是开源、免费的CPU指令集。 相比ARM指令集，RISC-V的历史很短...阅读全文

Metasploit Framework 5.0 发布 最流行的渗透测试框架

的开源 Metasploit Framework 安装程序等开源项目；另一个是核心开发已经完成的不稳定分支。如果在过去的一年里你已经在 Github 检出了 Metasploit，你可能已经使用了后者，其默认提示符是 “msf5>”。 之前，一个特性可能会在一个 PR 中停留数月，并且仍然会造成在直接向 Kali Linux 或其他发行版推送之前出现不能被发现的 bug。而通过 Metasploit 开发的不稳定分支，开发团队现在可以在逐步升级到 Metasploit 稳定版前，更快速彻底地完成迭代，并且更简单地收到真实反馈。一些特性甚至早期就被合并到了 4.x 分支，因为它们在 Metasploit 5.0 发布前就被认为是稳定的。其他特性需要更长时间来稳定，并在最终的...阅读全文

NVDIMM-P非易失内存标准公布：断电不丢数据、兼容DDR4

我们知道，传统的DDR DIMM内存是易失性的，也就是必须维持通电才能保持数据，一旦断电就都没了。 Intel创造了Optane傲腾持久内存，做到了非易失性，也兼容DDR DIMM，但仅用于数据中心，和普通用户无关。 现在，JEDEC固态技术标准协会发布了DDR4 NVDIMM-P非易失内存标准规范，序列编号JESD304-4.01，也可以在断电后不丢失数据，而且完全兼容DDR4内存标准。 根据规范，这种新内存兼容普通的DIMM内存标准、固件，可以最大程度减少对于现有设备、平台的更改，同时为新内存提供了低延迟接口，提高了易用性，未来也会兼容支持DDR5。 NVDIMM-P的新功能： － 持久性：操作系统能够低延迟、高带宽访问非易失内存。 － 虚拟化的内存：在DDR通道启用尽可能多的内存容量...阅读全文

ChaosMesh 的基本功能有哪些

Chaos Mesh 的基本功能，包括故障注入、混沌实验场景、可视化操作、安全保障。故障注入​故障注入是混沌实验的核心。Chaos Mesh 充分考虑分布式系统可能出现的故障，提供全面、细粒度的故障类型，分为基础资源类型故障、平台类型故障和应用层故障三大类。基础资源类型故障：PodChaos：模拟 Pod 故障，例如 Pod 节点重启、Pod 持续不可用，以及特定 Pod 中的某些容器故障。NetworkChaos：模拟网络故障，例如网络延迟、网络丢包、包乱序、各类网络分区。DNSChaos：模拟 DNS 故障，例如 DNS 域名解析失败、返回错误 IP 地址。HTTPChaos：模拟 HTTP 通信故障，例如 HTTP 通信延迟。StressChaos：模拟 CPU 抢占或内存抢占场景...阅读全文

谷歌如何为数十万台设备更新内部 Linux 发行版 - OSCHINA

并到所使用的 LTS 版本。 因此谷歌转向了滚动更新发行版，不过它没有选择知名的滚动更新发行版 Arch Linux，而是基于 Debian 测试分支构建了 gLinux Rodete (Rolling Debian Testing)。 选择 Debian 是因为它有着庞大的社区和软件库，还可以使用 Debian 格式的现有内部软件包和工具。而且 Ubuntu 也是基于 Debian，迁移过去更容易顺畅。 Debian 稳定分支也是差不多两年发布一次大更新，但其测试分支是滚动更新的。滚动更新意味着需要尽可能防止新版本对现有工作流程造成破坏，为了管理从源代码构建所有上游软件包的所有这些复杂任务，谷歌构建了一个名为 Sieve 的工作流系统。通过运行一个虚拟化测试套件，确保核心组件和开发者工作流...阅读全文

Ubuntu 创始人爆粗口: 开源社区弥漫着“反社会人格”

更加自由。 在这里，我不得不表达我对 Mir 的恨意。说真的，它颠覆了我对自由软件社区的看法。 我曾经认为能够为那些深爱着这项服务的用户服务是一种崇高的特权，但是我现在认为自由软件社区的大部分成员都存在极度的反社会人格，非常习惯于怀恨主流的一切东西。在 Windows 系统成为主流，他们就会怀恨在心。从理性角度出发，Windows 做了很多非常优秀事情，他们的努力值得尊敬。当 Canonical 逐渐成为主流之后，Ubuntu 再次成为非理性仇恨攻击的对象。 那些听风就是雨的媒体极有可能会写道 iOS 和 Android 系统没有竞争对手是如何的可怕，然后又会在 Canonical 在开源社区所掀起的整合又是如何的可怕。Fu*k the shit。 从回复来看啊，Shuttleworth 充...阅读全文

Raspberry Pi 推出 Zero W

W 在推出当天就发货超过 10000 台 。 Pi Zero W 在性能特性、软件兼容性和通用输入输出（GPIO）配置上与前面的版本基本相同，因此也能受益于 Pi 设备丰富的应用和附件。Raspberry Pi 还具有一个大型的活跃社区，该社区是围绕 Raspberry Pi 基金会构建的，查找各类主题和用例的指导信息非常方便。 尽管 Pi Zero W 的功能并未超越前期版本的 Pi，但是它可以使有联网需求项目的实现更快速也更容易，而且与添加 WiFi 或蓝牙所导致的开销相比，所需的额外投资也是可控的。如果 Pi Zero W 能紧跟需求，将会在大量的物联网项目中发挥核心作用。 查看英文原文： Raspberry Pi Launch Zero W...阅读全文

如何在 Debian 上安装 TensorFlow

TensorFlow 是一个端到端开源机器学习平台。它拥有一个包含各种工具、库和社区资源的全面灵活生态系统，可以让研究人员推动机器学习领域的先进技术的发展，并让开发者轻松地构建和部署由机器学习提供支持的应用。 TensorFlow可以在系统范围内，Python虚拟环境中，作为Docker容器或与Anaconda一起安装。在本教程中，我们将讲解如何在Debian 10的Python虚拟环境中安装TensorFlow。 虚拟环境使你可以在一台计算机上拥有多个不同的隔离Python环境，并在每个项目的基础上安装模块的特定版本，而不必担心会影响其他项目。 以下内容提供了如何在Debian 10上的Python虚拟环境中安装 TensorFlow。 1、安装Python 3 venv 首先我们要验证...阅读全文

Oracle Linux 8.0 发布

Oracle Linux 8.0 发布了，更新包中包括基础 BaseOS 和 Application Streams，其中 BaseOS 提供运行环境的用户空间，Application Streams 提供了一系列以往分发在软件集中的应用，以及可在用户空间内运行的其它产品和程序。 Application Streams Oracle Linux 8 引入了 Application Streams 的概念，它可以比核心操作系统包更频繁地交付和更新多个版本的用户空间组件。Application Streams 包含必要的系统组件和一系列以往分发在软件集中的应用，以及其它产品和程序。 系统管理 引入 Dandified Yum 软件包管理器，它是基于 DNF 技术的 yum 工具的新版本，可在基...阅读全文

树莓派4发布：性能飙升 配件丰富 价格不变

（USB-C、3A）、GPIO 接头支持 5V DC @ 3A、或以太网供电（需单独的 PoE HAT）。工作温度：0 - 50 ℃摄氏度。 据悉，树莓派 4 主板及桌面套件已于今日开售，感兴趣的朋友可访问与之合作的 element14、OKdo 等授权零售商，或前往英国剑桥 Grand Arcade 购物中心的实体店。 1GB 版本的售价为 35 美元 / 33 英镑，2GB 版本为 45 美元 / 43 英镑，4GB 版本为 55 美元 / 53 英镑 —— 约合 288 / 376 / 464 RMB 。...阅读全文

三大浏览器敦促网站管理员更换 SHA–1 认证

Mozilla 也跟进，之后是Microsoft。在2015年中期，这些公司雄心勃勃移除SHA-1计划曾被推迟。主要是考虑到现在有很多不支持新算法的老设备，它们的Web访问会因此被切断。 对于网站的运营人员而言，检查一个网站是否正在使用基于SHA-1的认证并非难事。 查看英文原文：Google, Microsoft, and Mozilla Urge Site Operators to Replace SHA–1 Certificates 中文稿源：InfoQ...阅读全文

Linux 5.11窗口合并期今天结束 引入大量新特性

支持，- AMD S2idle支持改善- Intel P-State Schedutil 性能优化.- 其中一项移除的功能是从 k10temp 驱动中移除 AMD Zen 电压/电流报告,因为缺乏公共文档，无法正确报告所有硬件的数值。- 为 AMD EPYC with PostgreSQL提供性能优化- Intel Platform Monitoring Technology 支持硬件遥测功能，适用于组织和数据中心。- OpenRISC 和 RISC-V 改进- AMD Zen/Zen2/Zen3 RAPL PowerCap support.- INT340x中的英特尔工作负载提示和其他电源管理工作.- 新增大量 ARM 设备支持- The AMD Sensor Fusion Hub 驱动完...阅读全文

Redis 6 将采用全新协议RESP3 提供客户端缓存功能

Redis 创始人兼核心开发者 antirez 在博客 介绍 了将在 Redis 6 提供的新功能 —— Client side caching（客户端缓存）。 antirez 表示 全新的 Redis 协议 RESP3 将是 Redis 6 中最重要的特性，并解释了他为何如此急切地改进 Redis 协议，原因主要有两个，一是因为希望能为客户端提供更多的语义化回复（semantical replies），以开发使用旧协议难以实现的功能；另一个原因也是 antirez 认为最重要的一个，实现 Client side caching（客户端缓存）功能 。 这个功能十分常见，但 Redis 尚未提供。 当使用者需要进行快速存储或快速取操作时，就需要在客户端内存中存储一小部分信息，这是为了降低程序...阅读全文

树莓派4上如何安装 Raspbian Buster

载好操作系统后，会得到一个zip的压缩文件。先解压，我们会用到里面的一个 .img 格式的操作系统镜像文件。文件准备好后，就可以进入下一步操作了。 在SD卡中灌入系统 这一步，我们需要下载一个软件，以便录入系统。虽然 RaspberryPi Foundation推荐使用 Etcher，但个人建议使用 Win32DiskImager，操作比较简单，录入成功率也比较高。 运行 Win32DiskImager 后，可以看到上图。打开首选的磁盘映像器，然后选择您的SD卡。通过在资源管理器中检查确认 SD卡驱动器 的名称，确保它是你的microSD卡，而不是其他驱动器。 注意：如果您不小心选择了错误的驱动器，则会丢失大量数据。 一旦你确认了SD卡的设备名，就可以选择第一步中，准备的 .img。在...阅读全文

Hadoop 核心 - HDFS 分布式文件系统详解

1. HDFS概述 Hadoop 分布式系统框架中，首要的基础功能就是文件系统，在 Hadoop 中使用 FileSystem 这个抽象类来表示我们的文件系统，这个抽象类下面有很多子实现类，究竟使用哪一种，需要看我们具体的实现类，在我们实际工作中，用到的最多的就是HDFS(分布式文件系统)以及LocalFileSystem(本地文件系统)了。 在现代的企业环境中，单机容量往往无法存储大量数据，需要跨机器存储。统一管理分布在集群上的文件系统称为分布式文件系统。 HDFS（Hadoop Distributed File System）是 Hadoop 项目的一个子项目。是 Hadoop 的核心组件之一， Hadoop 非常适于存储大型数据 (比如 TB 和 PB)，其就是使用 HDFS 作为存...阅读全文

基于thanos搭建分布式prometheus

prometheus存在单点问题，具体痛点可以这么描述： prometheus单机存储和抓取能力都有上限，容易单点故障。 虽然有一种方式是通过部署N个prometheus分别抓取不同的target来分摊压力的，但是grafana就要为不同的图表配置不同的prometheus地址，复杂程度比较棘手。 thanos+prometheus可以解决这个问题，它提供了一个核心能力： 1，thanos querier组件可以反向代理到N个prometheus，然后grafana直接指向thanos querier即可，thanos querier会从N个prometheus同时查询数据，返回满足Promql的数据结果； 2，如果N个prometheus抓取的数据存在重复的，那么thanos...阅读全文

案例：Redis命令不当 引起数据库雪崩 造成数百万损失

） 升级数据库配置 迁移非核心业务到新的RDS实例中去 第二次宕机 由于上一次的宕机原因未找到，所以此次的宕机是可以预见的。 20180919，还是一样的”配方”，还是原来的”味道”。同一个RDS，CPU飙升至100%，接下来就是拒绝服务，宕机。当然，有了第一次的经验，直接主从切换，在几十秒左右就恢复了所有业务，但还是严重影响了公司的业务和形象 原因分析 恢复业务后，公司紧急召开了紧急事故研究会议，当然，我的级别是参与不了的。公司的高管，高层技术架构、DBA、各个项目的主负责人一起进行了会议。 在此次会议中，经过查看各个项目的日志，后台的监控数据，发现在那台RDS数据库CPU飙升时，有一台Redis数据库内存将近100%，然后急剧下降。联系第一次的宕机情况，也是类似的。 接下来就是联系服务器数据...阅读全文

influxdb内存消耗分析及性能优化【探索篇】

numa相关信息如下:#lscpu用于查看当前cpu相关信息 > lscpu Architecture: x86_64 CPU op-mode(s): 32-bit, 64-bit Byte Order: Little Endian CPU(s): 32 #共32个逻辑核数 On-line CPU(s) list: 0-31 Thread(s) per core: 2 #每个核心支持2个物理线程 Core(s) per socket: 8 #每个卡槽有8个核心 Socket(s): 2 #共2个卡槽，总共16个核心 NUMA node(s): 2 #共2个numa节点 ... ... L1d cache: 32K L1i cache: 32K L2 cache: 256K L3 cache...阅读全文

2017年DevOps的5大发展预测

经筹集了大量资金，它们将面临获得这些投资回报的压力。”Wrabetz提到。她认为这种整合在DevOps工具市场上是非常需要的。 进一步容器化 2016年，我们见证了大规模容器化，但是Morpheus数据公司技术运营总监兼系统架构师Greg Willis认为，由于工具变得更加稳定，且容器生态在编排工具的作用下更加巩固，我们将会见到进一步容器化。他说，“正如虚拟化技术让企业适应从物理机向虚拟机的转变，我们将会看见企业更多的将工作负载运行在诸如AWS ECS、Kubernetes、DCOS、Docker数据中心等平台上。” 统一开发、安全和运维 如果说2016年是运维安全的崛起，尤其是Docker对安全的更新，那么2017年我们将见到开发、安全和运维的统一。CA Technologies公司...阅读全文

Linux：为什么那么多人讨厌 Systemd

因。也有其他人认为，systemd的日志记录并不是很好，二进制日志被很多人所诟病，虽然systemd提供了更快的索引，但二进制日志本身就有问题，而且systemd的日志损坏也不是第一次发生了。而且systemd真正令人反感的是设计不够灵活，对很多人而言，systemd阻止了他们的选择自由，考虑到kFreeBSD分支的软件源无法纳入systemd，为与其他分支保持一致，Debian的开发者尽力避免纳入systemd。但Lennart Poettering本人对此并不在意，并称“Debian GNU/kFreeBSD不过是玩具系统”。 systemd目前还处于中间发展阶段，那些想要超级安全或超级小或超快速系统的人都不适合使用。事实的真相是，systemd的很多反对者并不真正关心“底层”，只是抱怨...阅读全文

Polar Signals 开源 Parca 以优化代码并减少云账单 - OSCHINA

。Apache Maven 是一个项目管理和构建工具。基于项目对象模型（POM）的概念， Maven 可以从中心位置管理项目的构建、报告和文档。 此版本更新内容如下： Bug [MNG-7045] - 从 Maven 中删除 CDI API [MNG-7214] - CDI API 中的过渡性依赖 parent 不好。 [MNG-7215] - [Regression] Maven 网站插... 1 4 Visual Studio Code 1.61 发布 Visual Studio Code 1.61 现已发布，其中一些主要亮点内容如下： 在同一组内拆分编辑器：为同一文件快速创建 side-by-side 的编辑器。添加了一个新命令 Split in Group ( Ctrl+K Ctrl+Shift...阅读全文

开源硬件是趋势，Arm 却走了一条与众不同的路

需的内容。但他们没有像 Arm 或其他一些较早建立的供应商那样支持着整个生态系统。” 那么，验收开源硬件与验证开源软件有何不同？Mellanox Technologies 的外部董事 Thomas J Riordan 告诉 Synced，他认为两者面临的挑战实际上非常相似。“从指令集架构（ISA）层面上来看，处理器和开源程序都是用某种高级语言（HLL）编写的软件（算法）。在这两种情况下，必须以详尽的方式对处理器/程序进行验收，以确保质量结果。” “就实现指令集架构而言，它是开放的这一事实几乎可以保证其可以从多个来源获得许多实现，这也是 Arm 所担心的情况之一。毕竟开源模型的功能已得到充分验证。如果说 RISC-V 就是处理器界的 Linux，那么就好比微软希望 Linux 和...阅读全文

Go 1.16 即将发布，这些变更你需要知道

=> os.ReadFileTempDir => os.MkdirTempTempFile => os.CreateTempWriteFile => os.WriteFile 与此同时大家也不需要担心存在破坏性变更，因为有 Go1 兼容性的保证，在 Go1 中 io/ioutil 还会存在，只变更内部的方法调用： func ReadAll(r io.Reader) ([]byte, error) { return io.ReadAll(r) } func ReadFile(filename string) ([]byte, error) { return os.ReadFile(filename) } 大家在后续也可以改改调用习惯。 支持静态资源嵌入 如果我们希望把静态文件编译进 Go 的二进制文件的话，在以往需要借助 go...阅读全文

如何在 Linux 上安装 Intel 微代码固件

12:41 intel-ucode -rw-r--r-- 1 vivek vivek 4847056 Jan 8 12:39 microcode.dat -rw-r--r-- 1 vivek vivek 1907 Jan 9 07:03 releasenote 我只在 CentOS 7.x/RHEL 7.x、Debian 9.x 和 Ubuntu 17.10 上测试了以下的操作。如果你没有找到 /sys/devices/system/cpu/microcode/reload 文件的话，旧版本的内核也许不能使用此方法更新。 请注意，在应用了固件更新之后，有一些客户遇到了系统重启现象。特别是对于那些运行 Intel Broadwell 和 Haswell CPU 的用于客户机和数据中心服务器上的系...阅读全文

Debian、Ubuntu安装源配置文件说明

处： Debian 安全性更新 不像 Ubuntu 放在「security」仓库，而是放在单独一个源中。各大镜像站通常都把一般的包放在根下来一级的「debian」目录中，而安全性更新则会放在「debian-security」目录中，如果有的话，如 http://ftp.cn.debian.org/debian-security/。 Debian 官方建议，所有安全性更新，只从官方主站更新，勿使用其它镜像站，除非你对镜像站非常有信心，见 https://www.debian.org/security/index.en.html。所以，很多镜像站并不提供安全更新源。 安全性更新的第三字段形式固定为「版本名/updates」，如「wheezy/updates」「jessie/updates...阅读全文

Proxy-Go v6.6 发布啦

。 跨平台性, 无论你是 widows,linux, 还是 mac, 甚至是树莓派, 都可以很好的运行 proxy. 多协议支持, 支持 HTTP(S),TCP,UDP,Websocket,SOCKS5 代理. TCP/UDP 端口转发. 支持内网穿透, 协议支持 TCP 和 UDP. SSH 中转,HTTP(S),SOCKS5 代理支持 SSH 中转, 上级 Linux 服务器不需要任何服务端, 本地一个 proxy 即可开心上网. KCP 协议支持,HTTP(S),SOCKS5 代理支持 KCP 协议传输数据, 降低延迟, 提升浏览体验. 集成外部 API，HTTP(S),SOCKS5 代理认证功能可以与外部 HTTP API 集成，可以方便的通过外部系统控制代理用户． 反向代理, 支持直接...阅读全文

Web前端知识体系精简

程会形成一个全局执行环境，执行环境采用栈的方式将待执行任务按顺序依次来执行。 但在浏览器中有一些任务是非常耗时的，比如http请求、定时器、事件回调等，为了保证其他任务的执行效率不被影响，JS在执行环境中维护了一个异步队列(也叫工作线程)，并将这些任务放入队列中进行等待，这些任务的执行时机并不确定，只有当主线程的任务执行完成以后，才会去检查异步队列中的任务是否需要开始执行。这就是为什么setTimeout(fn,0) 始终要等到最后执行的原因。关于单线程和异步队列问题请参考：setTimeout（0） 7、异步通讯 Ajax技术 Ajax是浏览器专门用来和服务器进行交互的异步通讯技术，其核心对象是XMLHttpRequest,通过该对象可以创建一个Ajax请求。为了防止XSS攻击，浏览器对...阅读全文

Docker 17.06 社区版发布

="_blank" href="http://nginx.com/" >nginx.com.

Thank you for using nginx.

利用 NAT VPS 进行流量中转

port 端口号如需只允许 UDP 入站：1sudo ufw allow proto udp from 中转机地址 to any port 端口号以上命令中，中转机地址 为 NAT VPS 的公网 IP 地址。其他系统、其他防火墙控制软件的操作与之类似，放行来自 NAT VPS 的 IP 的指定端口号即可。 一些大陆 NAT VPS 商注：本小节包含的链接含有 aff 值。CloudIPLC：热门稳定，价格合理，需要及时关注补货情况碳云：价格较低，年付套餐手慢则无AkkoCloud：二次元风格的网站，产品同样抢手 ReferencesHow to open and close ports on RHEL 8 / CentOS 8 LinuxPort ForwardingNAT 主机的正确食用方法通...阅读全文

深入学习golang — channel

Channel 1. 概述 “网络，并发”是Go语言的两大feature。Go语言号称“互联网的C语言”，与使用传统的C语言相比，写一个Server所使用的代码更少，也更简单。写一个Server除了网络，另外就是并发，相对python等其它语言，Go对并发支持使得它有更好的性能。 Goroutine和channel是Go在“并发”方面两个核心feature。 Channel是goroutine之间进行通信的一种方式，它与Unix中的管道类似。 Channel声明： ChannelType = ( "chan" | "chan" "<-" | "<-" "chan" ) ElementType . 例如： var ch chan int var ch1 chan<- int //ch1只能写...阅读全文

Kubernetes常用命令大全(持续更新)

分析错误）对控制器和服务，node同样有效 kubectl describe pods xxxxpodsname --namespace=xxxnamespace 其他控制器类似吧，就是kubectl get 控制器 控制器具体名称 查看pod日志 kubectl logs $POD_NAME 查看pod变量 kubectl exec my-nginx-5j8ok -- printenv | grep SERVICE kubectl get cs #### 集群健康情况 kubectl cluster-info #### 集群核心组件运行情况 kubectl get namespaces #### 表空间名 kubectl version #### 版本 kubectl api...阅读全文

项目总结报告应该怎么写

意以上统下，中心句可以概括表达下方层级的内容。在结论中如果涉及层级关系时，要注意逻辑递进，便于理解。比如说老板、经理、职员这三个职位排列时要按照职位的重要程度进行从上到下排列。结论：1)结论的排列顺序遵循先扬后抑，结论内容是正向的放在前面，结论内容是负向时放在后面；2)结论中必须有观点，且观点有数据支撑，表达方式为结论→理由→支撑理由的事实和依据；3)结论中的内容是正向的文字颜色可以标为绿色，内容是负向的文字颜色可以标为红色。6.方案落地执行这部分内容其实是报告发布之后，对报告中的解决方案进行跟踪落实，让我们做的事情有始有终，形成一个闭环。写在最后好的项目总结都是相似的：结构清晰、重点突出、观点明确且有数据支撑，便于快速获取关键信息。愿大家都可以写出一份可以解决实际问题好的项目总结。...阅读全文

不要光想着价格 QLC 与 TLC 闪存有什么不同

普通人来说,也没有那么可怕。一般人平均每天的写入量很少能超过10GB，那么我们就假设是10GB，120GB QLC SSD，写入寿命达到120 TB。假设写入放大系数则假定为3，甚至5，那么三年之内，很难写坏它。且QLC闪存拥有高容量，也意味着其在QLC驱动器中可通过超额配置以延长产品本身的有效寿命。 目前TLC SSD在质保期普遍达到3年，有的质保期甚至达到5年。那么QLC 寿命问题又有什么好担心？ 2、稳定性 QLC闪存是存储4位电荷，有16种状态，而TLC存储3位电荷，有8种状态 。这意味着QLC闪存单位存储密度更大，是TLC的2倍，单颗芯片可达到256GB甚至512GB。但是，也因如此，QLC闪存的电压更难控制，干扰更复杂，而这些问题都会影响QLC闪存的性能、可靠性及稳定性。不过...阅读全文

域名与商标： 如何防止域名被仲裁

被投诉人选择一人独任，则最终由一人独任审理，对另外一种情况我则没有查到具体的说法。 以上是我近期学习到的关于域名仲裁的相关内容，在这里分享给大家，由于个人理解的不同，描述不一定正常，在这里仅仅是作为一个介绍，欢迎朋友们一起讨论和指正。 关于域名与商标，虽然知识产权在社会中越来越被重视和保护，但还是希望各大公司、终端自身给予高度的重视，在这个互联网时代、眼球时代和信息爆炸时代，互联网经济必然会占到越来越大的比重，最终会与实体经济平起平座，各大依托于网络的公司能在短短几年内，超越苦心经营几十年的实体企业，这都是互联网经济的威力。而域名就是企业在网络上的虚似商标，是企业的网络脸面，一些大的公司无不在自身网站的域名上不惜成本，花空心思，说明一个契合自身特色的域名是多么的重要。 当然，在这里也奉劝各位...阅读全文