Engineering Blog • 网址：https://engineering.fb.com • 特点： • Facebook工程博客，分享Facebook各种大规模系统架构设计，如Messenger、WhatsApp、Instagram的扩展性架构。 • 涉及分布式存储、大规模网络架构、机器学习架构等。🚩 二、架构与系统设计学习类网站📌 6. System Design Primer • 网址：https://github.com/donnemartin/system-design-primer • 特点： • GitHub上最流行的系统设计教程之一。 • 包括基础架构设计原则、高性能网站设计示例、详细的拓扑架构图。📌 7. The Architecture Notes • 网址：https...阅读全文
师之前，应当先成为Java工程师。熟练使用各种框架，并知道它们实现的原理。jvm虚拟机原理、调优，懂得jvm能让你写出性能更好的代码；池技术，什么对象池，连接池，线程池……Java反射技术，写框架必备的技术，但是有严重的性能问题，替代方案java字节码技术；nio，没什么好说的，值得注意的是"直接内存"的特点，使用场景；java多线程同步异步；java各种集合对象的实现原理，了解这些可以让你在解决问题时选择合适的数据结构，高效的解决问题 成为Java架构师，需要掌握哪些技能呢？ 1.框架源码分析 设计模式：Singleton单例模式，Factory工厂模式，Proxy代理模式，Template模板模式，Prototype原型模式等Spring5：Spring提醒结构，IOC注入原理，AOP设...阅读全文
谷歌于 1 月下旬曾向 USPTO（美国专利及商标局）递交了名为 “Pigweed” 的新商标申请。根据申请内容来看，Pigweed 商标涵盖“计算机操作软件”。当时，人们猜测这是一款新的操作系统商标，但并未有任何相关信息提供。 昨日，谷歌毫无征兆地公布并开源了 Pigweed。与之前的猜想不同，这是一个嵌入式库（或模块）的集合。使用 Pigweed 模块可以在 32 位微控制器（ 即嵌入单电路芯片中的小型计算机 ）上实现更快、更可靠的开发。 Pigweed 提供的模块可满足嵌入式开发人员的广泛需求。从整个生命周期来看，Pigweed 从设置，到开发，再到代码提交，都能够有效提高嵌入式开发的效率。谷歌以上述开发过程为轴，围绕这几个方面分别介绍了 Pigweed 的一些模块。 嵌入式空间...阅读全文
一个待处理事件的列表，使用非阻塞 I/O 方式调用“事件处理器”来处理该请求。其处理方式称为“多路 IO 复用方法”，常见的包括以下三种：select 模型、poll 模型、epoll 模型。 针对上面的技术我特意整理了一下，有很多技术不是靠几句话能讲清楚，所以干脆找朋友录制了一些视频，很多问题其实答案很简单，但是背后的思考和逻辑不简单，要做到知其然还要知其所以然。如果想学习Java工程化、高性能及分布式、深入浅出。微服务、Spring，MyBatis，Netty源码分析的朋友可以加我的Java进阶群：433540541，群里有阿里大牛直播讲解技术，以及Java大型互联网技术的视频免费分享给大家。 四. Nginx 设计架构 Nginx 服务器使用 master/worker 多进程模式。多...阅读全文
Go 语言官博发文展示了 Go 2 计划，征询社区和用户的意见。 先简单回顾 Go 语言发展历程： 2007 年 9 月 25 日，Rob Pike、Robert Griesemer 和 Ken Thompson 讨论构建一种新的编程语言，Rob 建议命名为 “Go” 。 随后，Russ Cox 和 Lance Taylor 加入 Go 语言设计团队。2009 年 11 月 10 日，Go 语言开源。 在开源社区的帮助下，Go 做了一系列改进，于 2011 年 10 月 5 日正式提出 Go 1 计划。2012 年 3 月 28 日 Go 1.0 正式发布。 Go 语言从酝酿到发布经历了五年，Go 1.x 开发也已持续了五年，目前更新到了 1.9 版本（正式版计划 8 月发布），也是时候讨...阅读全文
体制造工艺，但却鲜有为英伟达、高通、德州仪器等 fabless 厂商做芯片代工。即便随着 PC 市场成为夕阳市场，全球 PC 市场的下滑使 Intel 在产能上出现过剩，工厂开工率不足，产能闲置，Intel 依旧鲜有为其他 IC 设计公司代工。 限制 Intel 代工业务的根源主要在于商业竞争 在半导体行业中，有三种运作模式： 一是从事能独立完成设计、制造、封装测试的公司，被称为 IDM(Integrated Design and Manufacture)，比如 Intel、以及曾经的 AMD 和 IBM； 二是只从事 IC 设计，但没有代工厂，这类公司被称为 Fabless，像现在的 AMD、ARM 等都属于 Fabless； 三是只做代工，不做设计，这类公司被称为 Foundry，最典型...阅读全文
由于人工智能 / 机器学习日益集成到应用和业务流程中，因此生产级机器学习模型需要更多可扩展的基础设施和计算能力，以用于训练和部署。 现代机器学习算法在大量数据上进行训练，并且需要数十亿次迭代才能使成本函数最小化。这类模型的垂直扩展会遇到操作系统级别的瓶颈，包括可提供的 CPU、GPU 和存储的数量，而且对于这种类型的模型，已经证明效率并不高。更为高效的并行处理算法，例如异步训练和 allreduce 式训练，需要一个分布式集群系统，由不同的 worker （工作器）以协调的方式同时学习。 可扩展性对于在生产环境中服务深度学习模型也非常重要。将单个 API 请求处理到模型预测端点可能会触发复杂的处理逻辑，这将花费大量时间。由于更多用户访问模型的端点，为了有效地处理客户端请求，需要更多服务实例...阅读全文
新年伊始，VNote发布小更新v1.11.1。顾名思义，这次更新将会很“小”，主要是修复已知问题。当然，这次更新也有值得大家浪费带宽下载的地方： 1. 更好的中文支持 这一次基本所有界面都已经支持中文了，强迫症表示幸福感来的有点突然。 2. 更好的复制粘贴 如果大家之前使用VNote来编辑，然后在阅读模式将HTML文本复制到其他应用（如OneNote或者邮件客户端）的话，那么这次绝对要更新了。现在VNote支持在阅读模式复制，基本格式无损地粘贴到其他富文本编辑器中，甚至支持文本图片混合复制哦！另外，还提供了无背景复制功能，让你的粘贴更酸爽！ 3. 更好的主题 改进了主题，特别是针对暗色主题，让大家用得更舒服！ 4. 外部程序支持快捷键 自定义外部程序现在支持快捷键了，从此可以一键打开喜欢的...阅读全文
-2016），产品化思维逐渐显现，数据中心被看做一个可拆卸、可拼装的微模块，并以它为载体，把配电单元、空调单元、IT单元以及监控单元拼装起来，成为一个小数据中心，成为一个产品。 到了第四代T-block技术，它已经能将IT、电力、空调等产品化，结合腾讯数据中心最佳模型及建设方法论“诺曼底模型”，按照搭积木的方式，实现全数据中心的模块化配置及快速建设，且建设的数据中心能耗更低。 这一套技术历时两年研发，经历腾讯数据中心上百次讨论、设计和修改。未来，腾讯将为用户提供更为安全和稳定的数据服务。...阅读全文
API 和服务生命周期管理平台 Kong 发布了 Insomnia 系列开发工具的一个重要扩展 —— Insomnia Designer。Insomnia Designer 提供一个编辑 GraphQL 和 REST API 的协作环境，让开发团队可以更方便地采用规范优先（spec-first）的方法用于软件设计。 Kong 于去年收购了开源 REST 客户端提供商 Insomnia，两者秉承着一致的目标在 Insomnia 的基础上推出了 Insomnia Designer，旨在帮助开发者创建 REST 和 GraphQL API。Kong 认为，软件正逐渐朝着松耦合的微服务模式运行，API 也已成为一等公民（first-class citizens）。在这种新的模式下，开发者需要工具来...阅读全文
在各个垂直领域中，涌现出许多具有代表性的大模型，它们在特定领域展现出强大的性能和潜力。以下是一些例子： 医疗领域： BioBERT: 这是一个专门为生物医学文本设计的BERT模型。它在生物医学命名实体识别、关系抽取等任务上表现出色，为医学研究和临床应用提供了有力支持。 PubMedBERT: 这是一个基于PubMed文献训练的BERT模型。它在医学文本理解和生成方面具有优势，可以用于医学问答、摘要生成等任务。 金融领域： FinBERT: 这是一个为金融领域设计的BERT模型。它在金融文本情感分析、风险评估等方面表现出色，为金融决策提供了参考。 BloombergGPT: 这是一个由彭博社训练的大型语言模型。它在金融新闻生成、市场预测等方面具有潜力，可以为金融从业者提供...阅读全文
改以及共享协作等。当然还包含对关闭通知、标记任务状态等滑动操作的支持。 作为原生应用，Github 移动版客户端采用了响应式设计，因此可以适配任意屏幕尺寸和分辨率，并且原生支持深色模式，具有不错的用户体验。 GitHub 移动端截图 至于大家比较关心的 Github iOS 和 Android 客户端是否会开源，暂未发现 Github 对此进行回应。 更多详情请查看：https://github.com/mobile...阅读全文
libgraph 的参照对象。因为 VPP 项目整体是一个非常全面的解决方案，从中剥离核心的设计框架为其它轻量级项目所用就变得很有意义。这也是 Libgraph 的产生背景。虽然它目前还是DPDK 中相对比较新的 lib，但是其优秀的设计思想还是值得学习参考。 下面将首先介绍 libgraph 架构的核心概念：标量和向量包处理（scalar vs vector packet processing）以及它们之间的区别。然后再介绍 libgraph 中的核心组件，以及它们之间的联系和交互方式。最后，我们将介绍 libgraph 的具体用例以及优缺点。 背景 DPDK libgraph 是一个向量包处理的框架。与传统的标量包处理模型（一系列函数负责处理一个数据包，重复直到所有数据包处理完毕）相比，向量数据包处理...阅读全文
Omi 5.0.5 已发布。Omi 是腾讯开源的下一代 Web 框架，去万物糟粕，合精华为一，让 JSX、Web Components、Proxy、Store、Path Updating 在一起。Github地址：https://github.com/Tencent/omi/ OMI 特性： 小巧的尺寸(gzip压缩后仅4kb) 真正的 MVVM, 拥有 mappingjs 强力支持 支持 TypeScript 响应式数据绑定 增强了 CSS, 支持 rpx 单位，基于 750 屏幕宽度 基于 Shadow Dom 设计 利用Chrome 开发工具扩展 轻松调试，从 Chrome 应用商店安装 符合浏览器的发展趋势以及API设计理念 Web Components + JSX 相互融合为一个...阅读全文
一、HAProxy简介 （1）HAProxy 是一款提供高可用性、负载均衡以及基于TCP（第四层）和HTTP（第七层）应用的代理软件，支持虚拟主机，它是免费、快速并且可靠的一种解决方案。 HAProxy特别适用于那些负载特大的web站点，这些站点通常又需要会话保持或七层处理。HAProxy运行在时下的硬件上，完全可以支持数以万计的 并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中， 同时可以保护你的web服务器不被暴露到网络上。 （2）HAProxy 实现了一种事件驱动、单一进程模型，此模型支持非常大的并发连接数。多进程或多线程模型受内存限制 、系统调度器限制以及无处不在的锁限制，很少能处理数千并发连接。事件驱动模型因为在有更好的资源和时间管理的用户端(User...阅读全文
热线、在线聊天支持。作为全球云服务的龙头企业，亚马逊云计算拥有最广泛的全球云计算基础设施，全球节点丰富，为网站的快速稳定访问提供基础设施保障。配合亚马逊全球CDN节点，能满足不同国家独立站访问速度需求。1.什么是云服务器？云计算服务器(也称云服务器或云主机)是云计算服务系统中的主机产品，有效解决了传统物理主机中管理难度大、业务扩展性弱的缺陷。在实际应用中，云主机具有三个方面的灵活性:主机服务配置和业务规模可根据用户需求配置，可灵活调整。用户申请的主机服务可以快速供应和部署(实时在线开通)，实现集群内灵活可扩展的收费模式，用户无需支付押金，有多种支付模式供用户选择。2.云服务器适合什么样的用户？关注主机服务性价比的用户；需要快速实现分布式部署的用户；需要灵活扩展业务的用户；对系统高可用性和快速...阅读全文
硬件黑客 NODE 开发了一款运行在树莓派零（Raspberry Pi Zero）上的模块化手持式 Linux PC，名为 "Zero Terminal 3"。其配有 WaveShare 5.5 英寸全高清触控 AMOLED 显示屏、全尺寸 USB 2.0 接口、micro SD 插座和 1200 mAh 的内置锂电池。 同时，Zero Terminal 3 还支持附加组件，包括键盘、游戏控制器、无线电收发器、网络接口、太阳能电池板或电视调谐器等。事实上，这并不是 NODE 开发的第一款手持计算机，不过与旧版本相比，Zero Terminal 3 拥有更大的显示屏和更多的功能。 Zero Terminal 3 Linux PC 的规格具体如下： USB 2.0 A 型端口微型 USB 端口...阅读全文
，支持基本包覆盖。 Cockpit 也更新到了最新版本。 Fedora Server Fedora Server 尚未正式发布，是由于正在进行模块化重组。这将允许 Fedora Server 用户体验更加模块化的操作系统，最终版本计划在一个月后发布。 Fedora Workstation 目录...阅读全文
本文作者从事数据库相关工作接近四十年，最近开始使用 MongoDB。在开始使用 MongoDB 之前，作者希望有些事情自己已经知道。根据一般经验，对于数据库是什么以及它们能干什么，人们会有先入为主的认识。为了给他人提供方便，本文列出了一些常见的错误。 本文要点 即使 MongoDB 没有强制要求，设计一个模式还是至关重要。 类似地，在设计模式及访问模式时设计好索引。 避免大对象，尤其是大数组。 谨慎对待 MongoDB 的设置，尤其是关乎安全和稳定性时。 MongoDB 没有查询优化器，因此，对于如何安排查询操作的顺序，你必须格外小心。 创建一个无需身份验证的 MongoDB 服务器 很遗憾，MongoDB 在安装时默认不启用身份验证。在只从本地访问的工作站上，这没什么不好。但是，由于...阅读全文
bmon 是类 Unix 系统中一个基于文本，简单但非常强大的 网络监视和调试工具，它能抓取网络相关统计信息并把它们以用户友好的格式展现出来。它是一个可靠高效的带宽监视和网速估测工具。 它能使用各种输入模块读取输入，并以各种输出模式显示输出，包括交互式文本用户界面和用于脚本编写的可编程文本输出。 在 Linux 上安装 bmon 带宽监视工具 几乎所有 Linux 发行版的默认仓库中都有 bmon 软件包，可以从默认包管理器中轻松安装，但可用的版本可能比较旧。 $ sudo yum install bmon [On RHEL/CentOS/Fedora] $ sudo dnf install bmon [On Fedora 22+] $ sudo apt-get install bmon...阅读全文
完全构建之前，您也可以从外部贡献者处获取有关信息。 这就是Django的力量。 该框架使您能够快速轻松地从应用模型生成管理站点。 代码设计 与大多数 Web 框架相反，Django 通过使用称为 app 的东西，更容易地将新功能添加到产品中。 因此，开发者可以感受到 Django 鼓励大家编写模块化的代码。 Django对ORM的完善支持 Django的对象关系映射 (ORM) 对数据库进行了完善的支持。所以，它用于查询数据库所需的数据时，没有处理结构化查询语言（SQL）的麻烦。 与许多通过SQL直接在数据库上工作的Python框架不同，Django开发人员有一个独特的选择来操纵相应的Python的Model对象。 Django对于PostgreSQL，MySQL，SQLite和Oracle...阅读全文
表示打开。 kernel panic是指计算机遇到了致命的错误，并且他不知道该怎么处理时的一种动作——可以类比windows的蓝屏。 我们当然不希望每次计算机在oom时就直接蓝屏。推荐设置为0vm.overcommit_kbytes:用于限制进程能够申请的最大内存，0表示不设置，如果设置其他数值，比如400，则进程能够申请到的最大内存为 swap+400kBytesvm.overcommit_ratio:定义了进程可以使用的最大内存（百分比模式），默认为50。表示配置50之后，进程不允许申请超过 swap + 50% * 物理内存总量 以上的内存vm.oom_kill_allocating_task (Linux 2.6.24+支持)这在内存不足的情况下启用或禁用杀死OOM触发任务。0表示禁...阅读全文
Linux基金会发布了其中一个开源项目ACRN的详细信息，这是一个专为物联网和嵌入式设备设计的管理程序。该项目得益于英特尔代码和工程的贡献，其目标是创建一个灵活小巧的虚拟机管理系统。通过基于Linux的服务操作系统，ACRN可以同时运行多个客户操作系统，使其成为许多场景的理想选。 Linux基金会表示，管理程序和设备模型是以“安全关键型工作负载”为基础构建的，并且设想ACRN将一些IoT工作负载整合到一个平台上。虽然该项目是作为强大而灵活的解决方案提供的，但嵌入式开发人员社区被邀请提供代码以进一步扩展和改进ACRN。 通过项目ACRN，嵌入式开发人员可以立即使用新的管理程序选项。 ACRN针对资源受限设备进行了优化，并将重点放在隔离安全关键型工作负载并给予他们优先考虑，使项目适用于许多物联...阅读全文
将芯片连接起来而形成的模型，在业内被称Chiplet（可译为芯粒、小芯片）模型。多年以来，AMD、英特尔、台积电、Marvell等芯片公司已经推出了一些类似于小芯片的设计，例如，英特尔采用了称之为Foveros的小芯片方法，推出了3D封装的CPU平台，该封装方式将1个10nm的处理器内核和4个22nm的处理器内核封装集成在一起；台积电也正在开发一种被称为集成芯片系统（SoIC）的技术。在这些技术中，裸片对裸片的互连至关重要，即需要将一个裸片与另一个裸片"黏合"在一起，每个裸片都包含一个带有物理接口的IP模块，公共接口能够让两个裸片形成互连。在Chiplet初期的探索中，许多公司开发了具有专有接口的互连，实现自家芯片模型间的互连。由于Chiplet的最终目标是在内部或多个芯片供应商中获得优质且...阅读全文
JavaFX 11 发布了，JavaFX 是一个强大的图形和多媒体处理工具包集合，它允许开发者来设计、创建、测试、调试和部署富客户端程序，并且和 Java 一样跨平台。由于 JavaFX 库被写成了 Java API，因此 JavaFX 应用程序代码可以调用各种 Java 库中的 API，例如 JavaFX 应用程序可以使用 Java API 库来访问本地系统功能并且连接到基于服务器中间件的应用程序。JavaFX 可以自定义程序外观，CSS 将外观和样式与业务逻辑实现进行了分离，因此开发人员可以专注于编码工作。值得注意的是，从 JDK 11 开始，JavaFX 模块与 JDK 分开提供 。 JavaFX 11 需要 JDK 10（必须是 OpenJDK 版本）或 JDK 11，建议使用...阅读全文
，也可以在一台不同的远程计算机上工作。 Chrony 和 NTPD 精度对比测试 我们可以从 Chrony 的官方网站上可以看到与 NTPD 各维度详细对比： 从其测试结果上看似乎是各维度性能都可以吊打 NTPD。因此 Chrony 的整体评价还是比较高的。 Chrony 相较于 NTPD 服务的优势 更快的同步只需要数分钟而非数小时时间，从而最大程度的减少时间和频率误差，这对于并非全天运行的台式计算机或系统而言非常有用。能够更好的响应时间频率的快速变化，这对于具备不稳定时钟的虚拟机或导致时钟频率反复变化的节能技术而言非常有用。在初始同步后，它并不会停止时钟，以防对需要系统时间保持单调的程序造成影响。在应对临时非对称延迟时，（例如：大规模下载造成连接饱和时）提供了更好的稳定性。无需对服务器进行...阅读全文
站）。一般来说包含客户端、服务端程序、数据库，服务端用 Java 开发完成，客户端用 JavaScript。 采用这种架构，服务端需要实现诸多系统逻辑，例如认证、页面导航、搜索、交易等都需要在服务端完成。如果采用 Serverless 架构来对该应用进行改造，则架构如图所示： Serverless 架构相比于传统面向客户端的三层应用架构，有以下几方面的差异： 删除认证逻辑，用第三方 BaaS 服务替代； 使用另外一个 BaaS，允许客户端直接访问架构与第三方（例如 AWS Dynamo）上面的数句子库。通过这种方式提供给客户更安全的访问数据库模式； 前两点中包含着很重要的第三点，也就是以前运行在服务端的逻辑转移到客户端中，例如跟踪用户访问。客户端则慢慢转化为单页面应用。 计算敏感或者需要访问...阅读全文
性能问题。四是 无 Sidecar 模式的服务网格可供选择。Istio 推出了 Ambient 部署模式，这是一种新的 Istio 数据平面模式，旨在简化操作、扩大应用兼容性并降低基础设施成本。用户可以选择将 Ambient Mesh 集成到其基础设施的网格数据平面，放弃 sidecar 代理，同时保持 Istio 的零信任安全、遥测和流量管理等核心功能。五是 WebAssembly 崛起。WebAssembly 正在发展成为云原生环境中跨平台、多语言的沙箱环境，甚至可以替代容器运行时，在 Kubernetes 中编排调度。 WasmEdge、KubeEdge、Istio 等项目可以从控制平面无缝编排 Wasm 工作负载。...阅读全文
去年7月，Go 语言官博就曾透露 Go 2 开发计划，并表示 Go 2 的目标就是解决 Go 1.x 在规模化方面做的还不够好的地方。随着时间的推进，开发团队已着手准备 2.0 版本的开发工作，并公布了设计草案，供社区讨论和反馈，以促进最终的语言设计。 设计草案包含三个方面，错误处理、错误值和泛型，并针对各个方面进行了详细的概述和改进草案。大致总结如下： 一、错误处理（Error handling） 为扩展至大型代码库，Go 程序必须是轻量级的，不会过度重复，且具备稳健性，能够优雅地处理出现的错误。 目前 Go 检查错误的代码太多，但处理这些错误的代码却严重不足。对于 Go 2，开发团队希望错误检查更加轻量级，减少用于错误检查的 Go 程序的文本量。此外，还能更加方便地编写错误处理程序，提...阅读全文
谷歌已宣布将其内部使用的 Tsunami 漏洞扫描程序进行开源，以帮助其他组织保护用户数据。Tsunami 将不会成为谷歌的正式品牌产品，而是由开源社区以类似于管理 Kubernetes（另一种谷歌内部工具）的方式来维护。 “我们已经向开源社区发布了 Tsunami 安全扫描引擎。我们希望该引擎可以帮助其他组织保护其用户数据。我们还希望促进协作，并鼓励安全界在 Tsunami 之上创建和共享新的探测器。” 与其他漏洞扫描程序不同的是，Tsunami 本就是秉承着以大型企业为使用对象的初衷而进行构建的，旨在查找包含数十万个设备的大型网络中的漏洞。谷歌方面表示，其设计的漏洞扫描程序具有极强的适应性，Tsunami 能够扫描多种设备类型，而无需为每种设备运行不同的扫描仪。 Tsunami 在扫描...阅读全文
Redis 6 是有史以来改变最大的 Redis版本，因此即使稳定，也要小心处理，并在投入生产之前对其进行测试，以进行工作量测试。到目前为止，我们从未发现重大问题，但请务必小心。在收集错误报告时，我们将准备尽快发布Redis 6.0.1。 变化如下：除了稳定性之外，RC1和今天之间还有什么变化？ 1. 在某些方面对客户端缓存进行了重新设计，尤其是放弃了缓存插槽方法，而只使用键名。在分析了替代方案之后，在其他Redis核心团队成员的帮助下，这种方法最终看起来更好。除此之外，尤其是“广播模式”，我相信它将成为该功能最流行的使用模式之一。 使用广播时，服务器不再尝试记住每个客户端请求的密钥。相反，客户端订阅密钥前缀：每当与该前缀匹配的密钥被修改时，它们就会收到通知。这意味着可广播更多消息（但仅适...阅读全文
/kitex-benchmark。 扩展性：Kitex 设计上做了模块划分，提供了较多的扩展接口以及默认的扩展实现，使用者也可以根据需要自行定制扩展。Kitex 未耦合 Netpoll，开发者可选择其他网络库扩展使用。 消息协议：RPC 消息协议默认支持 Thrift、Kitex Protobuf、gRPC。Thrift 支持 Buffered 和 Framed 二进制协议；Kitex Protobuf 是 Kitex 自定义的 Protobuf 消息协议，协议格式类似 Thrift；gRPC 是对 gRPC 消息协议的支持，可以与 gRPC 互通。除此之外，使用者也可以扩展自己的消息协议。 传输协议：传输协议封装消息协议进行 RPC 互通，传输协议可以额外透传元信息，用于服务治理，Kitex 支持的...阅读全文
以同时管理多个 Kubernetes 集群，更方便地管理多个集群。 丰富的权限管理 ：将资源抽象化为部门、项目级别，角色的权限可以更细化的控制，适用于多部门、多项目的统一集中管理。 多种登录模式 ：支持企业级 LDAP 登录、支持 OAuth2 登录，支持数据库登录多种模式。 完备的审计 ：所有操作都会有完整的审计功能，方便追踪操作历史。 开放平台 ：支持 APIKey 开放平台，用户可自主申请相关 APIKey 并管理自己的项目。 多层次监控 ：提供多级别的监控统计信息，实时关注集群的运行状态。 架构图 整体采用前后端分离的方案： 前端采用 Angular 框架进行数据交互和展示，使用 Ace 编辑器进行 Kubernetes 资源模版编辑。 后端采用 Beego 框架做数据接口处理，使用...阅读全文
服务监控系统 Prometheus 2.0 已发布，Prometheus 是一个 Go 语言开发的开源的服务监控系统和时间序列数据库。 Prometheus 2.0 有一个简单而强大的运营模式。然而，基础设施领域也没有停滞不前，像 Kubernetes 和 Mesos 这样的项目正在迅速改变软件的部署和管理方式。受监控的环境变得越来越活跃。 存储 Prometheus 2.0 有性能显着提高，几乎在所有方面都有所改进。查询延迟更加一致，特别是在高系列流失的情况下，它的规模更大。在不同的现实世界生产情景下测量的资源消耗也显着下降： 与 Prometheus1.8 相比，CPU 使用率 降低了 20％ – 40％ 与普 Prometheus1.8 相比， 磁盘空间使用率 降低了 33...阅读全文
MongoDB 4.2 正式发布了，MongoDB Server 4.2 提高了现代事务和分析数据平台的技术水平。 Mongodb-4.2 的主要改动包括： 分布式事务将 MongoDB 的多文档 ACID 从副本集扩展到共享集群，能够为更广泛的用例服务按需物化视图使用新的 $Merge 运算符，在集合中缓存大型聚合的输出是一种常见的模式，新的 $Merge 运算符将可以有效地更新这些结果，而不是完全重新计算它们通配符索引使建模像产品目录这样的高度异构的集合变得简单和自然，而不牺牲对索引的支持。只需定义一个过滤器，它将自动索引集合中所有匹配的字段、子文档和数组MongoDB 查询语言增强功能，如更有表现力的更新、新的数学运算符和扩展的 regex 支持。此版本的 update 和...阅读全文
。 TypeScript：TypeScript是JavaScript的超集，它可以增加类型检查、接口声明等特性，减少错误和提高可读性。 NestJS：NestJS是一种流行的Node.js框架，它采用面向对象的编程方式，提供了路由、中间件、模块化等丰富的功能。 GraphQL：GraphQL是一款优秀的数据查询和操作语言，它可以帮助我们快速构建API，并减少网络传输的数据量。 功能设计 我们将开发一个电商平台，包含以下主要功能： 用户管理：用户可以注册、登录、修改个人信息等，管理员可以查看用户列表并进行管理。 商品管理：管理员可以添加、修改、删除商品信息，包括商品名称、价格、库存、图片等。 购物车：用户可以将商品加入购物车，并在结算时进行支付。 订单管理：管理员可以查看订单列表、订单详情、订单状态等。 开发流程 下面是全栈开发的开发流...阅读全文
。 仪表板的发布在进行中，工程团队将Bugsnag的后端功能分解成称之为管道（pipeline）的微服务体系。将管道扩展到支持发布，意味着增加新的服务，并修改现有服务，也可预见到许多新的服务器和客户端的交互。为了处理上述架构的变化，需要采用一致性的方式来设计，实施和集成企业的服务。Bugsnag是一家多语言的公司，服务是用Java，Ruby，Go和Node.js等多语言编写，因此企业需要一种与平台无关的方法。 本文将介绍为什么我们最终选择了gRPC作为Pipeline的默认通信框架。 达到REST API设计的极限 现有系统传统上使用具有JSON有效载荷的REST API进行同步通信。这种选择是基于占压倒性比例的成熟度、熟悉度和工具的可用性做出的，但是随着跨洲际工程团队的增长，企业需要设计一致的...阅读全文
，即为计算 Pod 资源请求（Request）或者使用量（Usage）消耗的成本。根据不同类型的资源，按照 Pod 所在 Node 的 IaaS 计价方式作为基本参考，来计算 Pod 所使用的成本费用。 目前云厂商的 Node 计费模式一般是**包年包月（Month）**、**按量计费（Hour）**和**竞价实例**。当 Kubecost 计算 Pod 成本时，即使是相同请求量的 Container，在不同类型的 Node 上成本消耗也不一致。 上述三种计费模式中，由于用户购买的是一个整体实例，因此按照实例计费，不针对单独一个资源计费。而通过使用 Kubecost，可以参照模型分析资源类型分摊成本、每种资源分摊成本。 例如，一个云厂商提供的某种 Node（虚拟机、物理机），CPU 为1核(C...阅读全文
弱的密码盐安全问题。 SparkyLinux 5.0 还将 Icedove 替换为Mozilla Thunderbird 作为默认电子邮件和新闻客户端，并为 Wine Staging 添加了新的仓库。 还带来了一个新的 Sparky5 系统主题，以及一套新的壁纸。SparkyLinux LXQt 也有新的默认主题，新的默认壁纸，以及一个自动检查更新和在桌面上提供通知的新工具。 最后同样重要的是，所有 SparkyLinux 服务现在都使用 HTTPS 协议来提高安全性，包括软件仓库。 下载地址 SparkyLinux是轻量级的、快速的、简单的Linux发行，它被设计为既适合老旧的也适合新式的计算机，并以定制的Enlightenment和LXDE桌面为特色。它构建于Debian GNU...阅读全文
在引擎层面，API 层面和算子的执行层面上做到了真正的流与批用同一套机制运行。但是在任务具体的执行模式上会有 2 种不同的模式： 下图是不同的执行模式： 对于无限的数据流，统一采用了流的执行模式。流的执行模式指的是所有计算节点是通过 Pipeline 模式去连接的，Pipeline 是指上游和下游计算任务是同时运行的，随着上游不断产出数据，下游同时在不断消费数据。这种全 Pipeline 的执行方式可以： 通过 eventTime 表示数据是什么时候产生的； 通过 watermark 得知在哪个时间点，数据已经到达了； 通过 state 来维护计算中间状态； 通过 Checkpoint 做容错的处理。 这两种各有优劣，可以根据作业的具体场景来进行选择。 对于有限的数据集有 2 种执行模式，我...阅读全文
Plans) Terraform 有一个 plan 步骤，它生成一个执行计划。执行计划显示了当执行 apply 命令时 Terraform 将做什么。通过 plan 进行提前检查，可以使 Terraform 操作真正的基础结构时避免意外。 资源图(Resource Graph) Terraform 构建的所有资源的图表，它能够并行地创建和修改任何没有相互依赖的资源。因此，Terraform 可以高效地构建基础设施，操作人员也可以通过图表深入地解其基础设施中的依赖关系。 自动化变更(Change Automation) 把复杂的变更集应用到基础设施中，而无需人工交互。通过前面提到的执行计划和资源图，我们可以确切地知道 Terraform 将会改变什么，以什么顺序改变，从而避免许多可能的人为错误。 安装...阅读全文
QEMU 是一个纯软件实现的通用模拟器和虚拟机，它有三种模式，几乎可以模拟任何硬件设备：Full-system emulation 可在任何支持的硬件架构上运行任何操作系统，User-mode emulation 可用来运行另一个 Linux/BSD 程序，Virtualization 可以接近本机性能运行 KVM 和 Xen 虚拟机。 QEMU 5.0.0 已正式发布，官方的下载链接在此。本次更新的亮点主要包括： 支持通过 virtiofsd 将主机文件系统目录传递给访客支持对在 QEMU D-Bus 上运行的外部进程进行实时迁移支持针对 main/”built-in” guest RAM 使用 Memory Backend（虚拟内存的后端）block: 支持通过块设备作业压缩备份镜像...阅读全文
asset之后，我们会验证服务的健康。我们经常引入各种等待时间，以考虑诸如服务器在推送后稳定等因素。 健康检查可以包括验证运行状况，而不仅仅是更新的资产。在 Shakespeare 服务中，这可能意味着在更新数据库schema后验证前端job的运行状况。 我们在更新后监控数据来验证系统健康状态。有两种广泛使用的验证方法： 绝对值：把监控和配置的值做比较——比如，是否触发了警报，或者错误率是否高于2%。只要能确定baseline，这个方案是很稳健的。统计法：把监控和过去的值或者和受控的asset做比较。虽然这种方法往往更不精准，但它几乎不需要配置，并且可以跨许多指标工作。它还可以捕获超出服务维护者设想的故障模式的异常。 自动健康评估是一个广泛而复杂的主题，多年来我们学习和调整了许多微妙之处，这不在本文...阅读全文
虽然2016年内Linux在桌面领域并没什么大动作，但作为开源运动的绝对代表，它依然给我们带来一系列大新闻。本文列出了2016年Linux领域的十条大新闻，赶紧看看是不是你关注的。 虽然2016年内Linux在桌面领域并没什么大动作，但作为开源运动的绝对代表，它依然给我们带来一系列大新闻。下面一起来看。 1. Linux迎来25岁生日 岁月如梭，25年前Linus Torvalds向comp.os.minix Usenet小组宣称，他正在“为386(486)AT克隆机开发一款自由操作系统(只是种爱好，不会像GNU那种庞大且专业)。”自1991年开始，Linux的发展速度远远超出了Torvalds的想象。各类规模的企业都在使用Linux，而Linux也支撑着各类计算机、移动设备乃至联网硬件...阅读全文
今年，根据外媒报道显示，MIPS Technologies正在转变其商业模式，即该公司将不再设计 MIPS 芯片，而将开发基于 RISC-V 架构的处理器。发生在MIPS Technologies身上的变化，或许也预示着又一个处理器架构正在逐渐向命运低头。同样，作为最具有历史的处理器架构之一，MIPS见证了很多其他处理器架构的发生变化——他看着X86称霸PC市场，Arm在移动市场崛起，RISC—V又作为新星受到新兴市场的青睐；但同样他也看着SPARC，Alpha，PA-RISC和其他一些架构逐渐走向消亡。璀璨的二十世纪八十年代上个世纪八十年代，互联网已现雏形，PC受到了企业级市场的认可。在这个期间，IBM开始打算用开放生态与产业合作的方式完成PC生产。于是，英特尔借此机会成长了起来，由此也...阅读全文
WordPress 开发团队刚刚发布了 WordPress 4.8 正式版，现在已经可以下载了。该版本以爵士乐钢琴家和作曲家 William John “Bill” Evans 的名字命名。WordPress 4.8 的新功能，讲给你提供更多的方式，让你来在网上表达自我和展现品牌。 虽然 WordPress 4.8 都是一些小的改进，但这些改进都是用户们所关注的，由数以百计的开发者共同完成的。现在，我们来一起看看这些关注已久的新功能：链接功能改进；三个媒体挂件（小工具）包括：图片、音频、和视频；文本挂件（小工具）增加了可视化编辑功能；管理后台增加了新模块，显示附近即将举行的 WordPress 活动。 令人激动的挂件更新 图片挂件（小工具） 往挂件里添加图片，现在可以说是非常简单了...阅读全文
展，以允许应用类放置在共享存档中。 JEP 312: 线程局部管控。允许停止单个线程，而不是只能启用或停止所有线程。 JEP 313: 移除 Native-Header Generation Tool (javah) JEP 314: 额外的 Unicode 语言标签扩展。包括：cu (货币类型)、fw (每周第一天为星期几)、rg (区域覆盖)、tz (时区) 等。 JEP 316: 在备用内存设备上分配堆内存。允许 HotSpot 虚拟机在备用内存设备上分配 Java 对象堆。 JEP 317: 基于 Java 的 JIT 编译器（试验版本）。 JEP 319: 根证书。开源 Java SE Root CA 程序中的根证书。 JEP 322: 基于时间的版本发布模式。“Feature...阅读全文
它基于Synopsys广受好评的DesignWare IP PCIe 5.0方案，完整支持PCIe 6.0标准特性，包括64GT/s PAM-4信号调制、FLIT模式、L0p低功耗模式等等，可满足HPC高性能计算、AI、存储SoC等应用领域对于延迟、带宽、能效的各种需求。为了实现吞吐量的最大化、延迟的最小化，Synopsys PCIe 6.0控制器采用了“MultiStream”(多流)架构，性能可达单流架构的最高2倍，并且还有1024-bit宽度架构，可以在关闭1GHz时序的同时，达到64GT/s x16的高带宽，还优化了多数据源、多虚拟通道环境。此外，新方案使用了独特的自适应DSP算法，支持早期SoC开发，优化模拟和数字均衡，无论何种通道下都能获得最佳能效，并且基于专利诊断功能，可确保...阅读全文
Linus Torvalds 于28日宣布发布 Linux 4.15 内核系列，第一个完全针对 Meltdown 和 Spectre 安全漏洞进行修补的版本。 Linux Kernel 4.15 进行了为期八周的开发，内核开发者花费大量时间重新设计了内核，并针对本月早些时候公开披露的两个安全漏洞熔断（Meltdown）和幽灵（Spectre）进行了修补。 Linux kernel 4.15 是第一个针对 Meltdown 和 Spectre 安全漏洞进行完全修补的内核系列，但是仅适用于 x86 和 PowerPC（PPC）体系结构。 如果您使用的是带有英特尔或 AMD 处理器的 GNU / Linux 发行版，那么仍有可能会遇到Meltdown 和 Spectre 恶意攻击。 该版本提供对...阅读全文
