)。 其提供了一个简便的机制，通过插入自定义代码来扩展Scrapy功能。 数据流(Data flow) Scrapy中的数据流由执行引擎控制，其过程如下: 引擎打开一个网站(open a domain)，找到处理该网站的Spider并向该spider请求第一个要爬取的URL(s)。 引擎从Spider中获取到第一个要爬取的URL并在调度器(Scheduler)以Request调度。 引擎向调度器请求下一个要爬取的URL。 调度器返回下一个要爬取的URL给引擎，引擎将URL通过下载中间件(请求(request)方向)转发给下载器(Downloader)。 一旦页面下载完毕，下载器生成一个该页面的Response，并将其通过下载中间件(返回(response)方向)发送给引擎。 引擎从下载器中接收到...阅读全文
前不久组内又有一次我比较期待的分享：“Linux 的虚拟内存”。是某天晚上加班时，我们讨论虚拟内存的概念时，leader 发现几位同事对虚拟内存认识不清后，特意给这位同学挑选的主题。 我之前了解一些操作系统的概念，主要是毕业后对自己大学四年的荒废比较懊恼，觉得自己有些对不起计算机专业出身，于是在工作之余抽出时间看了哈工大在网易云课堂的操作系统公开课，自己也读了一本讲操作系统比较浅的书 《Linux内核设计与实现》，而且去年自己用 C 写简单的服务器时，也追根究底了解了更多的系统底层知识。多亏了这些知识，让我对应用层的知识更有掌控感，也在上次排查问题时（从应用到内核查接口超时）助了我一臂之力。 前几天另一位同事来问另一个虚拟内存相关的问题，我才发现对于虚拟内存，我的理解还不够深刻，一些概念还...阅读全文
访问：“云通信上云狂欢节”爆款产品低至7.2折，短信低至0.034元/条 与此同时，梁孟松的薪酬大幅增长，去年拿到了493万美元的收入，而其中有一栋价值2250万元的住宅，系公司赠予梁孟松用于居家生活。不算房子的话，梁孟松的收入依然是2019年的4.5倍之多。对于中芯国际花费近500万美元留下梁孟松，业界认为并不夸张，因为梁孟松在半导体工艺上是不可多得的人才。梁孟松毕业于美国加州大学伯克莱分校电机工程及电脑科学系并取得博士学位，在行业内有35年资深经验，1992年到2009年在台积电先后担任重要职务，最后是负责台积电先进工艺研发的资深研发处长。他个人发表了350多篇论文，拥有450多项专利，可以说是国宝级人才。此前的离职事件中，梁孟松表示，自2017年11月担任中芯国际联席CEO至今已有三...阅读全文
Ruby on Rails 是一个快速开发的Web框架，Web设计人员和开发人员利用它能实现动态的全功能Web应用程序。 本文使用 Phusion Passenger 或mod_rails 方法部署 Rails 应用程序。 Passenger 允许您直接在Apachen应用程序中嵌入 Rails 应用程序，而无需使用FastCGI或复杂的Web服务器代理。 安装Passenger和依赖关系 1.安装使用Ruby，构建Ruby模块和运行Rails应用程序所需的系统包 sudo apt-get install build-essential libapache2-mod-passenger apache2 ruby ruby-dev libruby zlib1g-dev libsqlite3...阅读全文
)。Terraform 生成一个执行计划，描述它将做什么来达到所需的状态，然后执行它来构建所描述的基础结构。随着配置的变化，Terraform 能够确定发生了什么变化，并创建可应用的增量执行计划。 Terraform 是用 Go 语言开发的开源项目，你可以在 github 上访问到它的源代码。 Terraform 核心功能 基础架构即代码(Infrastructure as Code)执行计划(Execution Plans)资源图(Resource Graph)自动化变更(Change Automation) 基础架构即代码(Infrastructure as Code) 使用高级配置语法来描述基础架构，这样就可以对数据中心的蓝图进行版本控制，就像对待其他代码一样对待它。 执行计划(Execution...阅读全文
，每一个节点上创建一个 Pod 已经有了一个更新特性，在1.7中添加了更加机智的回滚和历史回溯能力。 一个新的 StorageOS 卷插件能从本地的和连接的节点存储中提供高可用的、集群范围的持久性卷。 可扩展性： 运行时的 API 聚合是这次发布中最强大的特性，可以让高级用户向集群中添加预先构建的、第三方的或者用户自制的具有Kubernetes风格的API。 容器运行时接口（CRI）通过新的从运行时获取容器指标的 RPC 调用得到增强。CRI 的验证测试已经发布，和containerd 1.0的整合处于 alpha 状态，现在支持基本的 Pod 生命周期和镜像管理。可以阅读我们之前深入介绍 CRI 的文章。 其他特性： 引入了对于外部的准入控制器的支持，现在处于 alpha 状态，提供了两种选...阅读全文
Cradlepoint 的实际 5G升级路径。 AT＆T表示，这些路由器使用“模块化调制解调器设计”，让客户“轻松升级”到5G，并表示这些公司正在为此目的“合作开发5G解决方案”。 Cradlepoint发言人表示，Cradlepoint 5G Evolution路由器将仅在2019年3月之前在AT＆T和FirstNet网络上提供，硬件的定价尚未公布。...阅读全文
谷歌已宣布将其内部使用的 Tsunami 漏洞扫描程序进行开源，以帮助其他组织保护用户数据。Tsunami 将不会成为谷歌的正式品牌产品，而是由开源社区以类似于管理 Kubernetes（另一种谷歌内部工具）的方式来维护。 “我们已经向开源社区发布了 Tsunami 安全扫描引擎。我们希望该引擎可以帮助其他组织保护其用户数据。我们还希望促进协作，并鼓励安全界在 Tsunami 之上创建和共享新的探测器。” 与其他漏洞扫描程序不同的是，Tsunami 本就是秉承着以大型企业为使用对象的初衷而进行构建的，旨在查找包含数十万个设备的大型网络中的漏洞。谷歌方面表示，其设计的漏洞扫描程序具有极强的适应性，Tsunami 能够扫描多种设备类型，而无需为每种设备运行不同的扫描仪。 Tsunami 在扫描...阅读全文
Omi 5.0.5 已发布。Omi 是腾讯开源的下一代 Web 框架，去万物糟粕，合精华为一，让 JSX、Web Components、Proxy、Store、Path Updating 在一起。Github地址：https://github.com/Tencent/omi/ OMI 特性： 小巧的尺寸(gzip压缩后仅4kb) 真正的 MVVM, 拥有 mappingjs 强力支持 支持 TypeScript 响应式数据绑定 增强了 CSS, 支持 rpx 单位，基于 750 屏幕宽度 基于 Shadow Dom 设计 利用Chrome 开发工具扩展 轻松调试，从 Chrome 应用商店安装 符合浏览器的发展趋势以及API设计理念 Web Components + JSX 相互融合为一个...阅读全文
Debian 9 前两天发布了正式版，许多用户在准备下载体验新版本。不过据外媒报道，Debian 9 的所有镜像中似乎都存在一个 bug 。 当您尝试使用图形安装程序安装它时，将显示一条错误消息： “There was an error reading data from the CD-ROM. Please make sure it is in the drive… Failed to copy from CD-ROM, retry?” 调试后会发现，原因似乎是下面在日志文件中出现的错误消息。 安装程序找不到 libzlo2-2-udeb_2.08-1.2 + b2_amd64.udeb 包： cdrom-retriever: error: Unable to find `/w/work...阅读全文
Linux 内核维护者已经决定在即将发布的版本中放弃对旧 CPU 架构的支持。因此，Linux 4.17 内核将减少大约 50 万行代码，目前它包含大约 2030 万行代码。 Linux 内核维护者已经决定在即将发布的版本中放弃对旧 CPU 架构的支持。因此，Linux 4.17 内核将减少大约 50 万行代码，目前它包含大约 2030 万行代码。将被弃用的体系结构是 Blackfin，CRIS，FRV，M32R，Metag，MN10300，Score 和 Tile。虽然不被弃用，Unicore32 和 Hexagon 体系结构也处于风险之中，但他们的维护人员正在努力改善情况，以便继续支持。 内核开发人员 Arnd Bergmann 在 Linux 内核邮件列表中发帖称： “Linux...阅读全文
Linux Kernel开发者和维护总负责人 Greg Kroah-Hartman今天正式敲定，即将发布的4.19分支将会是长期支持版本。目前Linux Kernel 4.17已经结束生命周期，而4.18并不具备成为长期支持版本的必要因素，因此LTSI社区就此事和Greg Kroah-Hartman进行了商谈。 最终答案是，即将到来的Linux 4.19分支内核将会成为长期支持版本，意味着在正式发布之后将会持续支持数年时间。现阶段长期支持分支包括Linux 4.14, Linux 4.9, Linux 4.4以及Linux 3.16 and Linux 3.18。 Linux Kernel 4.19带来了诸多改进，包括升级驱动、改进图形和网络，架构更新，核心内核和网络改进，更新的文件系统...阅读全文
) FreeBSD的Ceph的第一个版本可用。通过常规FreeBSD端口和软件包发布系统,最新可用版本：net/ceph-devel。 在 Jewel（v10.2.z）版本上进行的重要修改 RADOS 现在默认为AsyncMessenger （ms type = async）的传统SimpleMessenger。最明显的区别是 我们现在使用固定大小的线程池进行网络连接(而不是使用SimpleMessenger,一个socket两个线程）。 优化OSD故障检测时间，而以前的心跳超时（默认为20秒）。 优化OSDMaps的代码量。 集群在进行重平衡/数据恢复时，OSD会停止Scrub。 RGW RGW现在支持S3多对象复制API。 现在可以离线重塑现有的分支。离线目前，桶重塑要求所有IO（特别是写入）到特定的桶...阅读全文
Sysdig 是 Sysdig Cloud 开发的主要基于Lua语言的一个开源系统分析工具。Sysdig 能从运行的系统中，获取系统状态和行为，做过滤分析，功能上超同类开源工具。Sysdig 可以看做是 strace + tcpdump + lsof + htop + iftop 以及其他系统分析工具的合集 。 此外 Sysdig 还能对容器（如docker、coreOS、LXC）进行监控。 Sysdig 也支持windows平台和mac平台。下面我们以 Linux系统为例，举例说明 Sysdig 的用法，你也可以参考官方原文。 网络 查看占用网络带宽最多的进程：sysdig -c topprocs_net显示主机192.168.0.1的网络传输数据 as binary：sysdig...阅读全文
广泛使用一个全局 metrics registry 来注册要公开的 metrics。通过实现 metrics registry，metrics 可以以更透明的方式注册。而在这之前，Kubernetes metrics 被排除在任何稳定性需求之外Volume Extension：新版本有大量和 Volume 及 Volume 修改相关的增强。CSI 规范中对 Volume 调整的支持正在转向 Beta 版，它允许任何 CSI spec Volume plugin 都可以调整大小 其他值得注意的功能更新： 拓扑管理器是一个新的 Kubelet 组件，旨在协调资源分配决策，以提供优化的资源分配IPv4/IPv6 双栈允许将 IPv4 和 IPv6 地址分配给 Pods 和服务API Server...阅读全文
, _ := f.ReadFile("helloworld/hello2.txt") fmt.Println(string(data2)) } 同时既然能够支持目录读取，也能支持贪婪模式的匹配： //go:embed helloworld/* var f embed.FS 可能会有小伙伴注意到，embed.FS 也能调各类文件系统的接口，其实本质是 embed.FS 实现了 io/fs 接口。 只读属性 在 embed 所提供的 FS 中，我们可以发现其都是打开和只读方法： type FS func (f FS) Open(name string) (fs.File, error) func (f FS) ReadDir(name string) ([]fs.DirEntry, error) func (f FS...阅读全文
TMS 是一个用 Java 语言开发的，类似 Slack、Barrychat 的团队协作沟通Web平台，同时也是一个支持博文wiki撰写，国际化翻译管理的 Web管理系统。近期，TMS 发布了新版本 v2.10.0。 新功能： #IHIS4: 博文最近编辑文章列表，方便找到最近编辑创建的文章， 待办事项管理（让繁多的待办事项有条不紊的备忘记录，然后逐步攻破，减少记忆负担，提高工作利率不是一丢丢） 频道组（聊天频道支持创建分组，方便一次性 @多人 ，减少@具体用户的数次（爽的不要不要的） 优化改进： #II5PA: 游客可见博文 分享链接 复制分享 博文过滤查找清除过滤条件，输入框获取输入焦点 #II9N9: 沟通频道，按标签检索过滤 #IINTK: 沟通内容页面当 window...阅读全文
。 它也使我们变慢，因为我们的 CI 系统将运行我们的测试套件两次，每个后端一次。 删除对 MySQL 的支持可缩短 CI 作业的时间，并降低成本。 这些成本最终变得相当可观。 总而言之，Gitlab 觉得同时支持 MySQL 和 PostgreSQL 两个数据库，让开发团队觉得烦不胜烦。 此外据 Gitlab 调查发现，使用 MySQL 的多是 11 版本之前的用户。 所以，如果你想升级到 Gitlab 12.1 版本的话，那么你老的 MySQL 数据库可能会让你比较痛苦，可以参考官方的 移植指南 迁移至 PostgreSQL 。...阅读全文
Cinnamon属于一套GNOME 3桌面fork，且希望实现GNOME桌面从未能实现的效果。除了对GNOME进行改进与扩展外，它还保留了独特且令人赞赏的特色。事实上，Cinnamon已经脱胎于GNOME 3并做得更好。 2011年，GNOME 3的发布激起了一系列积极与消极的反应。很多用户与开发者更喜爱原本的GNOME界面，因为它提供更多fork选项——而Cinnamon正是其中的杰出代表。 由于GNOME用户界面中的许多组件已经停止开发，Cinnamon及其他多种fork项目应运而生。而作为GNOME的使用方之一，Linux Mint项目也因此积极参与Cinnamon的开发工作。时至今日，Cinnamon已经成为一套完全独立的桌面环境，且继承了大量用户最为喜爱的GNOME特性。 默认的...阅读全文
Nginx 发布了 mainline version 1.13.0（即通常说的开发版）。更新内容如下： Change: SSL renegotiation is now allowed on backend connections. 后端连接现在允许 SSL 重新协商 Feature: 用于邮件代理和流模块的 “listen” 指令的 “rcvbuf” 和 “sndbuf” 参数 Feature: t 现在可以使用 “return” 和 “error_page” 指令返回 308 重定向 Feature: “ssl_protocols” 指令的 “TLSv1.3” 参数。 Feature: 当出现登录信号时，nginx 现在会记录发送信号的进程的 PID Bugfix: 内存分配错误...阅读全文
得益于传输距离更广（300 米）、功耗更低、速度更快（2Mbps）、可同时连接两个音频设备等特性，蓝牙 5.0（2016 年 6 月正式发布）正快速普及中。 本周，蓝牙 SIG 组织宣布， 蓝牙 5.1 已交付开发者，新变化中最值得一说的便是位置查找（ “direction finding” ）特性。蓝牙组织希望借助 5.1 标准，取代 Wi-Fi 的辅助定位角色，为需要 GPS 等位置服务的场景助力， 包括确定距离甚至精确位置 。 蓝牙 SIG 称，5.1 的定位精度可达厘米级（目前 1 到 10 米），在室内导航、快速找寻手环/遥控板等情景，将发挥重要作用。 其它特性还有优化的 GATT（通用属性配置文件），提高配对和通信速度；有助于避免数据包冲突的随机信道索引确保蓝牙广告抵达率等。...阅读全文
，OpenSSL 是在 OpenSSL 和 SSLeay 下获得许可的。从 OpenSSL 3.0 开始，已经过渡到了 Apache License 2.0。旧的 OpenSSL 和 SSLeay 许可证仍然适用于旧版本（1.1.1 和更早的版本）。Providers 和 FIPS 支持OpenSSL 1.1.1 的主要变化之一是引入了 Providers（提供者） 概念。Providers 聚集在一起并提供可用的算法实现。使用 OpenSSL 3.0，可以以编程方式或通过配置文件指定你希望用于任何给定应用程序的 Providers。OpenSSL 3.0 标配 5 个不同的 Providers。随着时间的推移，第三方可能会分发可以接入 OpenSSL 的其他 Providers。通过 Providers...阅读全文
LUA Script特性有严格的限制条件，事务和Script中操作的key必须位于同一个分片上，这就使得在开发时必须对相应场景下涉及的key进行额外的规划和规范要求。如果应用的场景中大量涉及事务和Script的使用，如何在保证这两个功能的正常运作前提下把数据平均分到多个数据分片中就会成为难点。 所以说，在主从复制和集群分片两个方案中做出选择时，应该从应用软件的功能特性、数据和访问量级、未来发展规划等方面综合考虑，只在确实有必要引入数据分片时再使用Redis Cluster。 下面是一些建议： 需要在Redis中存储的数据有多大？未来2年内可能发展为多大？这些数据是否都需要长期保存？是否可以使用LRU算法进行非热点数据的淘汰？综合考虑前面几个因素，评估出Redis需要使用的物理内存。 用于部署...阅读全文
./configure make && make install 安装Yearning 2.1 用pip3安装依赖包（txt文件在src目录中） pip3 install -r requirements.txt 2.2 创建数据库实例yearning 2.3 将该数据库实例的连接信息写入develop.conf。升级请注意：1.0.0发布后，该文件增加了两个属性：ldap_type=1和smtp_port=，如果是cp原有的配置文件覆盖新下载的，要加上这两个配置 2.4 初始化数据库 python3 manage.py makemigrations && python3 manage.py migrate 2.5 添加初始化用户 echo "from core.models import Account...阅读全文
今天我们发布了Docker CE 17.06，它包含了诸多新特性、优化和bug修复。我们在四月份的DockeCon上公布了Moby项目，Docker CE 17.06是第一个完全构建在它基础上的Docker版本。变更日志中能看到完整的更新列表，我们来看看它的一些新特性。 我们也为这篇文章制作了一个视频版本。 多阶段构建 17.06 CE最大的特性是它的多阶段构建（multi-stage builds），它最初在四月的DockerCon被公布，现在已经达到了稳定版本。多阶段构建能从一个Dockerfile中构建出更加简洁、体积更小的Docker镜像。 多阶段构建通过构建过渡镜像并产生输出。这样就能在一个过渡镜像中编译代码，在最终的镜像中只使用它的输出。例如，Java开发者通常使用Apache...阅读全文
服务监控系统 Prometheus 2.13.0-rc.0 发布了，Prometheus 是一个 Go 语言开发的开源的服务监控系统和时间序列数据库。该版本引入了一些新特性，比如记录其他组件、增强功能和修复 bug，这些都是为了提高可用性。 更新内容如下： [SECURITY/BUGFIX] UI：修复了一个 Stored DOM XSS 漏洞 CVE-2019-10215. #6098[CHANGE] Metrics：将 prometheus_sd_configs_failed_total 重命名为 prometheus_sd_failed_configs，并更改为仪表 #5254[ENHANCEMENT] 在构建中包含 tsdb 工具 #6089[ENHANCEMENT...阅读全文
AMD即将推出第二代Ryzen 2000系列处理器，各方面全面提升，从最近泄露的规格和性能看十分值得期待。Ryzen二代基于12nm新工艺和Zen+新架构，频率平均提升400MHz，并支持更高级的动态加速技术，超频空间也更大，同时改进了缓存、内存性能。 权威评测软件SiSoftware不小心泄露了一份Ryzen 7 2700X、Ryzen 5 2600的评测报告，虽然很快被撤下还是有网友保留了下来。这份评测都是考察SiSoftware的理论性能项目，没有实际应用和游戏测试，但是Ryzen二代的架构提升已经十分明显。 首先来看一下这两款新品的主要规格和 SiSoftware 的评价： 内存频率： 2400MHz提高到2933MHz，可以大大改进内存性能，就是现在高频内存太贵了。 核心线程...阅读全文
Apollo（阿波罗）是携程框架部门研发的分布式配置中心，能够集中化管理应用不同环境、不同集群的配置，配置修改后能够实时推送到应用端，并且具备规范的权限、流程治理等特性，适用于微服务配置管理场景。 本文简单从功能特点做介绍，更详细的说明请参考Apollo配置中心介绍。本地快速部署可以参考这里。线上的演示环境从这里可以访问到： 106.54.227.205 （账号/密码: apollo/admin） Apollo 配置中心产生背景 大多情况下程序随着功能的复杂，程序的配置也会增多：包括各种功能开关、参数配置、服务地址信息配置等，同时开发人员对程序配置的期望值也越来越高：配置修改后实时生效，灰度发布，分环境、分集群的管理配置、权限控制、审核机制等。 在这样的大环境下，传统的通过配置文件、数据库...阅读全文
对 Docker 的使用大部分都比较熟悉，但是说到 docker 的实现原理很多人还是一知半解。我把在团队内部做的一次 Docker 核心原理分享总结到文章里，以供参考。 Docker 的优势 Build once, Run anywhere 上面这句话很精辟的总结了 docker 的优点。我从下面几点具体描述 docker 带给开发者的能力 应用标准化 无论什么语言开发的应用，我们都能用 dockerfile 和构建脚本方便的进行应用构建打包，代码库 + 构建 + registry 统一了 CI/CD 流程，也提升了效率。 环境一致 由于应用和依赖全部构建成镜像，做到了一次构建多次交付，无论是开发，测试还是上线环境都是一致的。大大提高了开发效率 应用隔离 由于通过 docker 部署的应...阅读全文
config --global credential.helper store store为永久存储，当然也可以设置临时的： git config –global credential.helper cache 默认为15分钟，如果想设置保存时间的话，可以输入： git config credential.helper 'cache --timeout=3600' 这样就设置了一个小时的有效时间。 执行完后查看 %HOME% 目录下的 .gitconfig 文件，会多了一项： [credential]helper=store 重新开启git bash会发现git push时不用再输入用户名和密码。在 Debian 等 Linux 系统中方法一致，只需要在自己的 $HOME 下创建 .git...阅读全文
尚未发布的另一款 Radeon RX 6000 系列 GPU，对比当前的 Radeon RX 6800/6900「Sienna Cichlid」硬件，性能有所提高。 - 通过 Schedutil 获得更好的 AMD 性能，在本周修复了频率不变性性能回归之后，不仅回归问题得到了解决，而且对于许多工作负载来说，现在的情况比在 Linux 5.10 或更早版本上要好。 - 适用于 NVIDIA GA100 / GeForce RTX 3000 系列的 Nouveau KMS。这只是内核模式设置/显示支持，没有3D加速。因此，至少显示器能够亮起来，以使用户可以继续访问 NVIDIA 网站以安装专有驱动程序，直到开源 Nouveau 驱动程序在更高版本的内核中完全支持 Ampere。 - 新的 ARM...阅读全文
Linux Kernel 5.10 LTS 的第八个维护版本更新于今天正式发布，本次更新最值得关注的改进就是终于解决了 5.10 Btrfs 性能倒退的问题。在去年圣诞节的时候，Linux 5.10 就被反馈 Btrfs 出现了明显的性能倒退问题。例如简单解压一个 Linux 内核源码.tar.zst 文件，可能需要花费数倍的时间。 虽然修复 Btrfs 性能倒退的补丁在去年年底就已经推出，但直到今天才整合到 mainline 上。而且，在即将到来的 Linux 5.11 上还将会对 Btrfs 进行大量的改进。 总体来说，Linux 5.10.8 的情况应该不错。Btrfs 开发者 Josef Bacik 在该页面上评论道：“5.10+patch比普通的5.9快了很多，因为我的系列补丁更...阅读全文
在 2017 年的 Debian 项目领导人（DPL）选举中，现任 DPL Mehdi Dogguy 不敌挑战者 Chris Lamb。在选举中，Lamb 提出了四个具体措施 去改变 Debian 的形象 ，包括组织更多的线下会议，帮助增加出席者的人数和多元化，改进新用户和新开发者的“上岗”计划，拿出一些资金来提供硬件和资助项目。 成为 DPL 并不表示他具有某种仁慈独裁者的角色，实际上 DPL 更多是 Debian 社区的一个对外代表。Dogguy 已经发表声明对他的当选表示祝贺。 转自 http://www.solidot.org/story?sid=5207-lamb-debian...阅读全文
当我们还在体验 Linux 5.5 稳定发行版带来更好的硬件支持时，Linux 5.6 已经来了。说实话，Linux 5.6 比 5.5 更令人兴奋。即使即将发布的 Ubuntu 20.04 LTS 发行版将自带 Linux 5.5，你也需要切实了解一下 Linux 5.6 内核为我们提供了什么。 我将在本文中重点介绍 Linux 5.6 发布版中值得期待的关键更改和功能： Linux 5.6 功能亮点 当 Linux 5.6 有新消息时，我会努力更新这份功能列表。但现在让我们先看一下当前已知的内容： 1、支持 WireGuard WireGuard 将被添加到 Linux 5.6，出于各种原因的考虑它可能将取代 OpenVPN。如果你使用过它，那你可能已经知道它比 OpenVPN 更好的...阅读全文
本教程介绍如何在一个 U 盘上安装多个 Linux 发行版。这样，你可以在单个 U 盘上享受多个现场版live Linux 发行版了。 我喜欢通过 U 盘尝试不同的 Linux 发行版。它让我可以在真实的硬件上测试操作系统，而不是虚拟化的环境中。此外，我可以将 USB 插入任何系统(比如 Windows 系统)，做任何我想要的事情，以及享受相同的 Linux 体验。而且，如果我的系统出现问题，我可以使用 U 盘恢复! 创建单个可启动的现场版 Linux USB 很简单，你只需下载一个 ISO 文件并将其刻录到 U 盘。但是，如果你想尝试多个 Linux 发行版呢?你可以使用多个 U 盘，也可以覆盖同一个 U 盘以尝试其他 Linux 发行版。但这两种方法都不是很方便。 那么，有没有在单个...阅读全文
动画函数，然后以这个动画的方式来改变元素的css属性之的变化，动画可以被设置为永久循环演示。 和transition相比，animation设置动画效果更灵活更丰富，二者还有一个区别是：transition只能通过主动改变元素的css值才能触发动画效果，而animation一旦被应用，就开始执行动画。 8、雪碧图 sprite 对于大型站点，为了减少http请求的次数，一般会将常用的小图标排到一个大图中，页面加载时只需请求一次网络， 然后在css中通过设置background-position来控制显示所需要的小图标。 9、字体图标 iconfont 所谓字体图标就是将常用的图标转化为字体资源存在文件中，通过在CSS中引用该字体文件，然后可以直接通过控制字体的css属性来设置图标的样式...阅读全文
-bindata/go-bindata 这类第三方开源库来实现。 而从 Go1.16 起，通过 go:embed 就可以快速实现这个功能： import _ "embed" //go:embed hello.txt var s string print(s) 通过对变量 s 声明 go:embed 指令，使其在编译时读取当前目录下的 hello.txt 文件。 最终变量 s 就会输出 hello.txt 文件中的字符串内容。 新增 io/fs 的支持 新增了标准库 io/fs，正式将文件系统相关的基础接口抽象到了该标准库中。 以前的话大多是在 os 标准库中，这一步抽离更进一步的抽象了文件树的接口。在后续的版本中，大家可以优先考虑使用 io/fs 标准库。 调整切片扩容策略 Go1.16 以前的...阅读全文
本站为了长期发展的需要，使用了部分展示类的广告，在尽量不影响读者阅读的位置展示。这部分广告虽然收益微薄，但提供了一个可以研究广告平台的小窗口，也是件有意思的事情。我们后续会根据运营情况，决定是否移除广告。 本站的广告收入会补贴维持站点运行所需要的服务器、域名、带宽、CDN等费用。同时我们也接受广告投放、内容合作等合作方式。广告形式包括网站展示类广告、微博推广和 QQ群推广等方式，广告内容的主体需与 Debian中国 站点一致，为IT相关的话题，以不引起读者反感为准。 开源项目及技术相关的公益性项目，可联系我们评估，通过后会得到 Debian中国 的免费广告投放支持。 您可以通过电子邮件 ads@debian.cn 、或者通过QQ与站点管理人员联系，或者直接通过这里联系我们。 ...阅读全文
虽然人们一直在猜测Linux 5.9会是内核的下一个长期支持版本，但事实上Linux 5.10才是。Linux内核主要稳定维护者的Greg Kroah-Hartman在Linux基金会欧洲开源峰会上证实，Linux 5.10将是LTS版本。 Linux 5.10-rc1 昨天发布，预计会在 12月中旬 的稳定版发布后正式亮相。随后，这个内核将在Linux LTS计划下，在未来的几年中得到长时间的维护。 看到 Linux 5.10 成为LTS而不是 Linux 5.9 是一个可喜的消息，因为 Linux 5.10 有很多新的功能和改进，尤其是在新硬件支持方面。 另一方面，没有几家主要的 Linux发行版打算长期坚持运行在 Linux 5.9 内核，像 Ubuntu 20.10虽然是近期发布的...阅读全文
树莓派（Raspberry Pi）微型计算机是备受全球开发者和极客们欢迎的产品，树莓派基金会于去年6月发布了Raspberry Pi 4 Model B，换用了速度更快的CPU，并提供了4GB大内存版本，还引入了USB 3.0，支持双屏4K输出与H.265解码。 今年，树莓派即将迎来8岁生日，为了庆祝，树莓派基金会宣布，2GB内存版的树莓派4B降价，由原价45美元下调至35美元，同时原售价35美元的1GB版本停止发售。而4GB内存版价格保持不变，仍然是55美元。 根据去年底的统计数据，树莓派累计销量已超3000万件。树莓派4B算是一次较为重大的升级，核心处理器为博通BCM2711，采用四核Cortex A72架构，28nm工艺，主频1.5GHz。最高可选4GB LPDDR4内存，并提供千兆...阅读全文
1. Kafka介绍 1.1.1. Kafka是什么 kafka使用scala开发，支持多语言客户端（c++、java、python、go等） Kafka最先由LinkedIn公司开发，之后成为Apache的顶级项目。 Kafka是一个分布式的、分区化、可复制提交的日志服务 LinkedIn使用Kafka实现了公司不同应用程序之间的松耦和，那么作为一个可扩展、高可靠的消息系统 支持高Throughput的应用 scale out：无需停机即可扩展机器 持久化：通过将数据持久化到硬盘以及replication防止数据丢失 支持online和offline的场景 复制代码 1.1.2. Kafka的特点 Kafka是分布式的，其所有的构件borker(服务端集群)、producer(消息生产...阅读全文
，可支持服务器及其所有功能的直接配置。Cherokee 在 Linux，Mac OS X，BSD 和 Solaris 上本机运行，但不在 Windows 上运行。 Monkey HTTP 服务器 Monkey HTTP 是一个轻量级的服务器和开发堆栈，最初针对 Linux 进行了优化，但现在也与 Mac OS X 兼容。它专为嵌入式设备而设计，因此具有高度可扩展性，具有低内存和低 CPU 消耗。该项目于 2001 年开始，在 2008 年被改写为事件驱动系统时转向专业应用程序。 服务器通过混合机制运行，为每个线程提供数千个客户端的访问能力。它提供高性能的重负载服务器，易于安装，是嵌入式设备的理想选择。 除了这三种Web服务器，你还有其他开源项目推荐吗？...阅读全文
手册 官方 完全开发手册 已经更新至最新 2018-1-1 ThinkPHP 官方团队 5.1 的扩展也同步更新支持了（都支持 composer 安装），包括： topthink/think-testing topthink/think-mongo topthink/think-migration topthink/think-queue topthink/think-captcha topthink/think-image topthink/think-walkman topthink/think-swoole 以及大量的第三方类库包（不一一列举） 另外，官方已经把 5.1 版本的很多组件独立成 composer 包了（不再依赖 ThinkPHP 核心框架运行），包括但不限于...阅读全文
导语 | kafka3.0的版本已经试推行去zk的kafka架构了，如果去掉了zk，那么在kafka新的版本当中使用什么技术来代替了zk的位置呢，接下来我们一起来一探究竟，了解kafka的内置共识机制和raft算法。一、Kafka简介Kafka是一款开源的消息引擎系统。一个典型的Kafka体系架构包括若干Producer、若干Broker、若干Consumer，以及一个ZooKeeper集群，如上图所示。其中ZooKeeper是Kafka用来负责集群元数据的管理、控制器的选举等操作的。Producer将消息发送到Broker，Broker负责将收到的消息存储到磁盘中，而Consumer负责从Broker订阅并消费消息。（一）Kafka核心组件producer：消息生产者，就是向broker...阅读全文
新年假期，Linus Torvalds在邮件列表中发表的一篇火热的帖子引发技术社区关注，人们借此讨论ECC内存的重要性，Torvalds在文章中抨击了英特尔在这方面的"坏政策"，因为特定的市场细分使ECC内存不那么普及。Linus认为，纠错码(ECC)内存 "绝对重要"，但 "英特尔在扼杀整个ECC产业方面起到了重要作用。" Torvalds用它惯常的热辣语言评论了ECC的重要性以及行业领导者和下游厂商有意无意地偷工减料："因为它可怕的糟糕的市场细分政策......英特尔对整个行业和用户都是有害的，反对ECC的论点一直都是完全的不知所云......现在，即使是内存制造商也开始在内部做ECC，因为他们终于承认了一个事实，那就是他们绝对必须这样做。而内存制造商声称这是因为经济和低功率。而他们都...阅读全文
自从锐速发布以来，这款牛逼的单边加速神器的确为一些线路不太优秀的服务器带来了更优秀的体验。但是呢，过高的价格和不再低端售卖。导致了我们并无法实现一个免费好用的单边加速功能。 但是谷歌为我们带来了干货 新的 TCP 拥塞控制算法 BBR (Bottleneck Bandwidth and RTT)。 目前在 Linux Kernel 4.9 中加入了该算法，所以我们只要升级内核就可以爽一波了。难懂的技术说明，我们也不说了，TCP BBR 的目的就是要尽量跑满带宽，并且尽量不要有排队的情况。 注： 更新内核有一定风险，请注意备份。 开启 TCP BBR 只要 Linux 发行版的 Kernel 即内核版本大于等于 4.9 即可开启，开启方法是通用的，如何升级至 Kernel 将在下面介绍。 修...阅读全文
的9.2%的被动股份。这一披露促使这家社交媒体巨头的首席执行官帕拉格-阿格拉瓦(Parag Agrawal)向马斯克提供了一个Twitter董事会席位。然而，马斯克拒绝成为Twitter董事会的一员，因为该提议有一个条件，即阻止特斯拉CEO将其在Twitter的股份增加到15%以上，可以预见的是，这引起了人们的猜测，即马斯克正在对整个公司发起恶意收购。 就在这些戏剧性事件发生几天后，马斯克正式公布了他以每股54.2美元的价格将Twitter私有化的提议，相当于超过430亿美元的价格。马斯克还写了一封致Twitter董事会的公开信，指出。 "我投资Twitter是因为我相信它有可能成为全球自由言论的平台，我相信言论自由是一个正常的民主社会所必需的。然而，自从投资以来，我现在意识到...阅读全文
由 Red Hat 工程师牵头的团队，正在为 Linux/开源社区研究名为 NVFS 的文件系统。NVFS 的目标是成为像英特尔 Optane DCPMM 那样的高速文件系统。NVFS面向基于DAX的设备（直接访问），并将整个设备映射成一个线性地址空间，从而绕过 Linux 内核的块层（block layer）和缓冲区缓存。 在 NVFS 文件系统之前，开源社区有个用于持久性内存的 NOVA 文件系统，但该项目在去年意外结束了。在没有另一个面向高性能持久性内存设备的 Linux 文件系统的情况下，Red Hat 的 Mikulas Patocka 一直在领导 NVFS 的工作。 尽管 NVFS 是面向基于 DAX 的设备，但它采用了与 EXT4 类似的设计方法，并与 Linux 的 VFS...阅读全文
/hadoopDatas/dfs/nn/edits hdfs oev -i edits_0000000000000000112-0000000000000000113 -o myedit.xml -p XML 9.5 secondarynameNode如何辅助管理FSImage与Edits文件 secnonaryNN通知NameNode切换editlog。 secondaryNN从NameNode中获得FSImage和editlog(通过http方式)。 secondaryNN将FSImage载入内存，然后开始合并editlog，合并之后成为新的fsimage。 secondaryNN将新的fsimage发回给NameNode。 NameNode用新的fsimage替换旧的fsimage。 完成合并的是...阅读全文
此跨平台框架。如果想要添加新的关键字（通过 RF 测试库 API ），需要具备 Java / Python / C 语言的基础知识。 2. JUnit JUnit 是一款针对 Java 应用的单元测试框架，用于编写和运行可重复的测试。 优点： 纯 Java 编写。 支持测试驱动开发（TDD）。 允许创建自己的单元测试用例套件。 能很好地与其他工具（如 Maven ）和 IDE（如 IntelliJ ）集成。 长时间发展，有自己庞大的用户群体，可以很容易找到文档。 缺点： 如果需要 mocking 能力，则需要额外添加 Mockito（或其他模拟库）。 因 JUnit 中的方法名称受 Java 约定限制等原因，非技术人员很难读懂测试结果。 如果你正在为你的 Java 应用编写单元测试，那这可能...阅读全文
