KylinChen | Blog

TCP IP 网络协议入门

An Intro to TCP IP

[TOC] 基础知识 TPC IP 简介 TCP/IP（Transmission Control Protocol/Internet Protocol）是传输控制协议和网络协议的简称，它定义了电子设备如何连入因特网，以及数据如何在它们之间传输的标准。 TCP/IP 不是一个协议，而是一个协议族的统称，里面包括了 IP 协议、ICMP 协议、TCP 协议、以及 http、ftp、pop...

Posted by Kylin on April 1, 2023

All about Pyramid Vision Transformer

Pyramid Vision Transformer (PVT) 论文讲解

[TOC] Backgroud ViT drawbacks 显存占用 = 模型参数+FeatureMap参数 $\times$ 系数 (3, 因为FM是BP参数和优化器参数的上界) 模型中的参数 (卷积层, $\mathrm{fc}$ 层等) 模型每一...

Posted by Kylin on March 31, 2023

面向算法岗学习八股

Job-Oriented Learning

[TOC] Norm L1范数（稀疏规则算子, Lasso regularization）: 为x向量各个元素绝对值之和 L2范数: 为x向量各个元素平方和的1/2次方，L2范数又称Euclidean范数或Frobenius范数 Lp范数: 为x向量各个元素绝对值p次方和的1/p次方 Lasso regularization是一种用于线性回归模型的正则化方法，它通...

Posted by Kylin on March 29, 2023

All about Vision Transformer

Vision Transformer (ViT) 论文讲解

[TOC] Transformer in CV Transformer的优势：并行计算全局视野灵活的堆叠 ViT的研究价值展示了在计算机视觉中使用纯Transformer结构的可能图片—〉transformer—〉结果图片—〉backbone(CNN) —〉transformer—〉结果 ViT Network Dataflo...

Posted by Kylin on March 28, 2023

Macbook M1 安装 mujoco 和 mujoco-py

Mac OS 13 安装 mujoco 和 mujoco-py

[TOC] Macbook M1 安装 mujoco 和 mujoco-py 环境： Macbook M1 pro Mac OS 13.2 (22D49) 安装 homebrew 安装Mac OS最为著名的包管理器 homebrew： /bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Hom...

Posted by Kylin on March 22, 2023

All about Yolo V3

yolo V3 从论文到实现

[TOC] 目标检测技术 & yolo系列介绍目标检测技术概况目标检测技术分类 Anchor based：要在feature map上生成大量先验框，之后进行减框+精化 Two-stage：第一阶段提取region proposal，第二阶段精确定位+分类；RCNN，FPN One-stage：直接分类和回归；YOLO，SSD，Re...

Posted by Kylin on March 17, 2023

Ubuntu22.04+RX7900xtx 安装 AMD ROCm 4.5.2

安装先前版本的 ROCm 方案

[TOC] Ubuntu22.04+RX7900xtx 安装 AMD ROCm 4.5.2 Configuration： i9-13900K+RX7900xtx+Ubuntu 22.04+ROCm 4.5.2 amdgpu-install We going to use a terminal. So open one. Create a directory to work in: ...

Posted by Kylin on March 16, 2023

Linux基础操作

Linux Basics

[TOC] Linux学习路径简介 Unix族谱 HotKeys 命令行正则（ls *.txt）用户、文件权限 Linux 的用户管理和权限机制 = 不同的用户不能轻易地查看、修改彼此的文件。 who am i 查看伪终端序号 //终端用户 who am i //登陆用户 whoami # 或者 who mom likes ...

Posted by Kylin on March 16, 2023

zsh on Ubuntu

在ubuntu上安装zsh

zsh on Ubuntu 检查shell 事实证明，有时候漂亮的命令行确实不会提高生产力，but。。。热知识：ubuntu下sh命令指的是dash，而不是bash，所以要制定bash运行脚本必须用全称。 cat /etc/shells 安装zsh apt install zsh #安装zsh chsh -s /bin/zsh #将zsh设置成默认shell...

Posted by Kylin on March 15, 2023

Speedy Transformer Inference

Turbocharge NLP Inference at the Edge via Elastic Pipelining

[TOC] Abs 首先，on-device inference是好的： preserving user data privacy avoiding network roundtrips 但是，LLM太大了 => stresses both latency and memory, creating a tension between the two key reso...

Posted by Kylin on March 11, 2023

Kylin Page