文章

全部文章列表。

• SNN视频流任务调研

  发布于: 2024年7月22日

  923 字 · 约 4 分钟

  学习一下视频 stream 上任务的一些工作，大概计划一下后续的工作。

• SpikeZIP-TF: Conversion is All You Need for Transformer-based SNN

  发布于: 2024年7月8日

  1,344 字 · 约 6 分钟

  游康师兄的工作，ANN2SNN 的 Transformer。

• SpikingJelly: An open-source machine learning infrastructure platform for spike-based intelligence

  发布于: 2024年7月1日

  8,603 字 · 约 30 分钟

  北大惊蛰，非常有影响力的 SNN 框架，实现了从数据编码、数据集整合到训练、硬件部署的全流程，SNN 的 torch 级别的工作。发表在 Science Advanced 上。

• I-LLM: Efficient Integer-Only Inference for Fully-Quantized Low-Bit Large Language Models

  发布于: 2024年6月17日

  1,219 字 · 约 5 分钟

  LLM 的 Interger-Only PTQ 量化工作。

• 程序语言理论笔记

  发布于: 2024年6月1日

  980 字 · 约 4 分钟

  程序语言理论课程的复习笔记。

• The Minimum Equivalent DNF Problem and Shortest Implicants

  发布于: 2024年5月9日

  1,616 字 · 约 6 分钟

  证明 MIN-DNF 问题是完全的

• I-ViT: Integer-only Quantization for Efficient Vision Transformer Inference

  发布于: 2024年5月7日

  1,272 字 · 约 5 分钟

  对 ViT 的纯整型量化，W8A8，中科院 2023 ICCV

• Efficient and Effective Methods for Mixed Precision Neural Network Quantization for Faster, Energy-efficient Inference

  发布于: 2024年3月27日

  1,352 字 · 约 5 分钟

  EAGL，声称只要用 CPU 在 3 秒内就能完成对 ResNet 的量化，效率远高于 HAWQ 等其他传统的方法

• Towards spike-based machine intelligence with neuromorphic computing

  发布于: 2024年3月26日

  1,567 字 · 约 6 分钟

  Nature 上关于 SNN 的综述

• FlashAttention: Fast and Memory-Efficient Exact Attention with IO-Awareness

  发布于: 2024年3月7日

  2,032 字 · 约 8 分钟

  Flash Attention，利用硬件结构加速 Attention 计算速度、减少内存占用的算法。核心是 Tiling，Online Softmax 和 Kernel Fusion。