Ray学习随笔(3)ray-streaming-state源码阅读

一、概述

Ray学习随笔(1)启动过程源码阅读对ray本身的启动流程进程了分析,Ray学习随笔(2)ray-streaming源码阅读对ray-streaming的启动过程进行了分析.由于ray-streaming-state并没有被实际使用,所以前文并没有进行深入阅读.本篇具体阅读学习相关代码和业务逻辑.
阅读全文
Ray学习随笔(2)ray-streaming源码阅读

一、概述

本文针对ray-streaming的源码进行分析,研究启动过程中涉及的操作。ray-streaming脱胎于flink,同时源码也是由蚂蚁方面的团队贡献的,目前ray的流计算处于一个比较粗浅的状态,只支持单一输入的操作,并且没有提供对时间窗口的支持,同时检查点逻辑也是最基本的内存实现和本地文件系统实现。

阅读全文
Ray学习随笔(1)启动过程源码阅读

一、概述

Ray 是一个高性能的分布式执行引擎,开源的人工智能框架,目标之一在于:让开发者可以用一个运行在笔记本电脑上的原型算法,仅需添加数行代码就能轻松转为适合于计算机集群运行的(或单个多核心计算机的)高性能分布式应用.这样的框架需要包含手动优化系统的性能优势,同时又不需要用户关心那些调度、数据传输和硬件错误等问题.(摘自oschina-Ray 分布式执行引擎

阅读全文
Windows终端美化

一、准备环境

终端:Windows Terminal

Windows 终端是一个面向命令行工具和 shell(如命令提示符、PowerShell 和适用于 Linux 的 Windows 子系统 (WSL))用户的新式终端应用程序。 它的主要功能包括多个选项卡、窗格、Unicode 和 UTF-8 字符支持、GPU 加速文本呈现引擎,你还可用它来创建你自己的主题并自定义文本、颜色、背景和快捷方式。

终端美化:oh-my-posh

Oh my Posh is a custom prompt engine for any shell that has the ability to adjust the prompt string with a function or variable.

终端字体:Cascadia Code PL

This is a fun, new monospaced font that includes programming ligatures and is designed to enhance the modern look and feel of the Windows Terminal.

阅读全文
Hyper-V安装Ubuntu

一、资源准备

Ubuntu镜像目前选择从国内的代理服务下载,我目前使用的是清华大学的开源镜像站.

阅读全文
Windows部署NodeJS

在wsl和windows之间反复横跳,wsl跨设备同步代码不方便,网站源码又不想丢到GitHub上,还是在windows上也搞一下开发环境.参考微软的官方文档,发现了可以和vscode跨平台集成的nvs,果断尝试一下.

一、准备环境

操作系统: Windows 10

开发环境: Visual Studio Code

版本管理工具:Node Version Switcher

阅读全文
CentOS配置开发环境
CentOS | Conda | JAVA | Maven | Bazel

一、起因

服务器环境需要进行一些项目资源的部署和开发,为了统一开发环境和控制权限,独立创建了非root权限用户并进行开发环境的统一配置。服务器版本为CentOS7。

阅读全文
hexo迁移云服务

一、前言

之前个人主页一直挂在coding上,好久没有看过了,结果发现必须要自有域名才能继续访问。趁着还云服务的学生服务器,和以前买来蹭免费邮件服务器的域名,准备迁移到云服务的ECS上。

阅读全文
Windows安装latex

一、 Latex介绍

LaTeX(LATEX,音译“拉泰赫”)是一种基于ΤΕΧ的排版系统,由美国计算机学家莱斯利·兰伯特(Leslie Lamport)在20世纪80年代初期开发,利用这种格式,即使使用者没有排版和程序设计的知识也可以充分发挥由TeX所提供的强大功能,能在几天、甚至几小时内生成很多具有书籍质量的印刷品。对于生成复杂表格和数学公式,这一点表现得尤为突出。因此它非常适用于生成高印刷质量的科技和数学类文档。这个系统同样适用于生成从简单的信件到完整书籍的所有其他种类的文档。

阅读全文
windows部署HBase

在本地开发测试中,单机的HBase更便于调试.

一、 准备环境

操作系统: Windows 10
Java: jdk-8u221-windows-x64 | 环境部署不再赘述
Hadoop与HBase版本关系适配表: Hadoop version support matrix
Hadoop: Hadoop-3.1.2 | 环境部署详见 Windows部署Hadoop
HBase: hbase-2.2.0

阅读全文
Algolia