AI-research-tools

本仓库灵感来自 Kyon Huang 的Github仓库 AI-research-tools，在该仓库的基础上添加了一些本人觉得好用的科研工具，适用于计算机科学与技术、计算机技术、人工智能、软件工程、网络空间安全、网络与信息安全等专业涉及的研究领域。

标记【待尝试】的是我还未使用过但朋友推荐或收到issues反馈有用的工具，会尽快尝试并根据体验决定是否保留。

请通过 issues 等方式向我推荐您觉得好用的但不在此清单上的 AI 领域科研工具，感谢。

读博不易，且读且整理（最后更新时间：2024.01.28）

趋势关注

RSS 阅读器

irreader 阅读器：这是我现在在使用的 RSS 阅读器。一个非常大的优点是，对于一些没有提供 RSS 订阅源的网站，irreader 可以自定义 RSS 订阅源。另外，订阅的 RSS 更新时，有弹窗提醒。还有一个我暂时用不到的功能是，irreader 同时支持订阅播客和播放有声媒体。

论文查找

搜索引擎

Google scholar（谷歌学术）：搜索论文的首选，可以在这里查看论文统计和引用参考文献，还能通过关注作者或者论文获得新论文更新提醒，以及利用自动化推荐来提供一个基本库。
Semantic scholar：可以结合外部材料整合进行论文的语义分析。功能包括：展示引用和参考文献、度量论文影响力、展示论文图表、自动生成关键词（根据标题）、分析作者、在互联网寻找额外资源（例如，相关 youtube 视频），以及推荐论文。
dblp: computer science bibliography：专为 CS 设计的论文查询网站，收录比较顶级并可以被检索到的论文。可以根据会议、期刊等分类查询作者的论文，想搜一个计算机会议的所有文章时好用。【DBLP使用教程】
**知网海外服务：**知网多数文献只支持下载caj格式文献，而**知网海外版则支持PDF格式下载。
Connected Papers：用于查找特定领域学术论文的一款可视化工具。Connected Papers会把文献与文献之间的关系建立起来，以图表的形式呈现，方便科研人员梳理文献与文献之间的关系。

arXiv 相关

arXiv: 论文预印本收录网站（尚未正式投递到会议/期刊，先发个预印本占个坑位）。
arXiv-sanity：在功能上相比于 arXiv 有很大的改进，包括在浏览中显示摘要、评论和非常基本的社交、推荐、库功能。搜索也更好用。
Semantic Sanity: A Personalized Adaptive Feed：创建自己的个性化 arXiv 选读 Feed。创建每个 Feed 时，会让您先选择几篇论文，然后根据这几篇论文开始推荐，对于推荐结果可以点赞或者不喜欢来帮助调整推荐结果。
卖萌屋Arxiv服务: 只包含 arxiv 当日更新的论文。优点在于把作者机构也展示出来。仍在改进。
Paper Digest – AI for tracking and summarizing papers: 提供邮件订阅前一天出的论文的列表，附有每篇论文的一句话总结。对我更重要的是这个网站也会在每个顶会论文全部公布时进行整理。

论文阅读

查阅下载

SCI-Hub 科研论文全文下载可用网址

文献管理

Mendeley：支持 web、PC、Mac 和移动手机等多个平台，可以直接注释和高亮显示 PDF，有限额的免费云存储。另外有每周邮件推荐论文。
Zotero：文献管理助手，能够对文献数据库网页中的文献题录直接抓取，常与坚果云配合使用。
坚果云：配合Zotero使用，实现文献管理多端同步（支持MacOS、Windows、iPad、Linux、iOS）。

阅读工具

PDF Expert：快捷、轻巧、易用的PDF论文阅读工具。
CAJViewer：CAJ文献阅读器，常用于阅读知网下载的中文文献，尤其是国内的硕、博论文。

文献翻译

知云文献翻译：文献翻译工具+文献阅读器，科研小白时可以使用，后期建议纯英文阅读。
Deepl在线翻译：号称"全世界最准的翻译"。
网易有道词典：号称"史上最强大的「桌面」翻译软件"，个人喜欢它的划词翻译功能。
CopyTranslator：【代尝试】最大的优点在于有置顶、点按复制、监听剪贴板等功能，阅读文献配合使用时

笔记工具

我个人习惯使用印象笔记。

编码实验

开发工具

Papers With Code：自动把论文连接到实现代码的 GitHub 资源库和数据集，并根据 GitHub 的收藏量排序。
Anaconda-Navigator：Python的发行版，包含了Conda、Python等180多个科学包及其依赖项【Anaconda-Navigator使用教程】
AutoDL：人工智能的算力云市场，可提供GPU服务器租用服务。

参考文档

PyTorch Tutorials：PyTorch的官方指导手册。
《动手学深度学习》：深度学习教程，含PyTorch、NumPy/MXNet、TensorFlow和PaddlePaddle实现。

Pytorch 相关

功能配置封装

pytorch-lightning：将 PyTorch 开发中的各种通用配置（训练验证逻辑、超参搜索、分布式训练等）全部包装起来，以更高级的形式快速搭建模型。功能强大，有些复杂，正在摸索。机器之心写的简介

项目参考

the-incredible-pytorch：有关 PyTorch 的各种教程、项目、视频等资源。
computervision-recipes：微软出品，基于 PyTorch 的各种 CV 任务的教程。

项目管理

torchtracer：一个管理 PyTorch AI 实验项目的工具，主要用于保存各类训练数据（模型 checkpoints、超参数组合、日志、loss 变化曲线图像等）。

风格指南

pytorch-styleguide：一份 PyTorch 的非官方风格指南和最佳实践总结。

项目模板

Pytorch-Project-Template：一个可扩展的 PyTorch 项目模板，包括图像分割、目标分类、GANs 和强化学习等实例。
pytorch-template：另一份 PyTorch 项目模板。

神经网络分析器

torchinfo：打印 PyTorch 模型信息，包含模型每层的参数量、输出张量大小等。
flops-counter.pytorch：计算模型总共的 FLOPs（浮点运算数，理解为计算量，可以用来衡量算法/模型的复杂度）以及每层的占比。缺点是似乎不支持 RNN 相关层，另外打印下来的信息不是很方便看。

可视化

PyTorch 最新版本已经带有 tensorboard。官方 tutorial。
visdom：【待尝试】用于创建、组织和共享实时丰富数据可视化的灵活工具。
Convolution Visualizer：如果卷积层配置比较复杂，不方便计算输出大小时，可以利用这个可视化工具辅助。

实验记录

fitlog：【待尝试】架构无关的实验记录工具，可以看邱锡鹏老师在知乎写的介绍。

数据集查找

Google Dataset Search
Data Search | Bifrost：视觉数据集搜索。

数据集下载

gdown：用于解决在 Google Drive 上下载大型数据集常发生的失败现象。

特征工程

Featuretools：【待尝试】自动化特征工程库。

超参搜索

optuna：自动超参数优化框架。
microsoft/nni：【待尝试】用于神经模型搜索和超参数调优的开源自动机器学习（AutoML）的工具包，支持绝大多数主流框架和运行环境。
Hyperopt：【待尝试】分布式异步超参数优化。看到知乎上有人推荐，不过根据文档来看，目前支持的优化算法只有两种，且不包括贝叶斯优化。
BoTorch：【待尝试】基于 PyTorch 的贝叶斯优化库。
automl/Auto-PyTorch：【待尝试】基于 PyTorch 的自动结构搜素和超参数搜索。

Debug 工具

PySnooper：【待尝试】致力让用户抛弃print函数来 debug（然而，至少目前我还是习惯用 logging 模块，和print差不了多少）。机器之心写的简介

论文写作

LaTeX+Git

LaTeX是一种论文排版系统，可以让科研人专注于论文写作而非格式调整；Git是版本管理工具，可以记录版本内容、检查版本变化、追溯历史版本等；Github和Gitee分别是国外和国内流行的开源软件仓库。常用LaTeX撰写论文+Git版本控制+Github/Gitee仓库存储。

Overleaf：支持多人协作的在线LaTeX编辑工具。
texifier：LaTeX客户端编辑工具，支持MacOS、Windows和iOS。
Latexlive：LaTeX公式编辑器，支持图片转LaTeX。
LaTeX Templates：LaTeX模板【LaTeX使用教程】。
Git：开源的分布式版本管理系统，可以检查代码变化、追溯历史版本。
Sourcetree：Git客户端管理工具，可通过可视化的方式来管理Git仓库。
Github | Gitee：开源软件管理仓库。Github对公开仓库更友好，Gitee国内访问速度更快。
Templates from Overleaf

LaTeX Templates

LaTeX 编辑器

我个人习惯使用 VSCode 进行离线的 LaTeX 写作，配合 Github 私有库进行版本管理。
Overleaf：支持多人协作的在线 LaTeX 编辑器。但是对网络连接有一定要求。

语言表达

搭配查找

Linggle：搜索最常出现的英文词语搭配。不确定自己的表达方式是否正确时使用。
Corpus of Contemporary American English (COCA)：可以查词汇搭配的美式英语语料库，可以查看具体的用了这个词的句子。 British National Corpus (BYU-BNC)：英式英语的语料库，语料比美式的少一些
Thesaurus：将低端词汇转换为同义的高端词汇。
易搜搭ESODA：清华HCI Lab工作室出品的一款适合国人英语写作的词组搭配查询工具。可切换具体研究方向的论文语料库，展示相关的可替换用法，支持中英混搜。
Words and phrases: frequency, genres, collocates, concordances, synonyms, and WordNet：用不同颜色区分高中低频词，展现代表文章类型的词汇，并归类出相关可替换的词。虽然说是英文写作措辞辅助工具，感觉最大的用途是学习相关领域论文常用的词汇和搭配。

句式推荐

Academic Phrasebank：学术用语库，告诉你各个章节适合用哪些句式搭配。

写作检查

请注意在线检测工具的泄露风险，谨慎处理关键文字。

Grammarly：语法、句型、标点、选词检测修改，有浏览器插件。
Nounplus.net：免费的在线英文语法检测。
proofread：【待尝试】对科学文章草稿自动检查，寻找不符合英文科学写作标准的部分，并提出修改意见。作者写的介绍：分享一个自己做的英文科学写作检查器 - 知乎。

公式编辑

Mathpix：通过截取复杂数学方程式的截图将其转换为 LaTeX 代码。可以处理 PDF 的印刷体和照片中的手写公式等。
MyScript Webdemo：Math 模块可以将手写公式转为 LaTeX 代码；同时，Diagram 模块可以将手绘的框图转化为工整的框图。
Detexify LaTeX handwritten symbol recognition: 忘记某些字符用 LaTeX 怎么表示时，可以在这个网站上通过手写来查询。

截屏悬浮

写论文时经常会遇到需要参考多个文献或代码的情况，同时查看多个文件并频繁切换会非常麻烦。这里是别人推荐的两个能够将截图悬浮置顶的工具，并随时调整位置和大小，方便写作时参考。

Snipaste：【待尝试】有 Windows 和 Mac 版，暂时没有 Linux 版。
Snappy：【待尝试】有 Mac 和 iPhone & iPad 版，暂时没有 Windows 版。

表格转 LaTeX

Excel2LaTeX：用在 Excel 上的宏工具，能够将 Excel 表格转换为 LaTeX 代码，节省很多时间。能够满足大多数效果的转换，有些效果可能需要微调。

绘制示意图

绘图工具

PPT 通常是我的第一选择：入手快，种类多，自由度高，支持导出矢量图。
Inkscape with latex equation extensions：【待尝试】
http://Lucidchart.com：在线画矢量图，可以导出 png、pdf，也支持各种颜色，组合和图层等。

绘图参考

Paper-Picture-Writing-Code：基于 LaTex 的画图代码，包含折线图、柱状图、散点图、注意力可视化以及结构图。
academic-drawing：Matlab/Python 绘图，主要用于画时序数据。
awesome-latex-drawing：LaTeX 绘图，主要用于画贝叶斯网络、张量分解等。
PlotNeuralNet：Python 得到可用于 LaTeX 的图，主要画 CNN。

PPT 插件

IguanaTex：帮助插入 LaTeX 公式的 PPT 插件。将输入的 LaTeX 代码转换为高质量的 png 图片来插入。

图片转换

提供各种格式的图片的转换服务的网站很多。这里只是简单列举，你也可以通过搜索引擎来找到其他类似的网站。

Convert PNG/JPEG (Raster) to EPS/PDF (Vector) Format：将 jpg、png 格式的图片文件转换为 eps 文件。
EPS到PDF转换器：也可以将 eps 文件转换为别的格式的图片。

图片休整

Crop PDF files online - PDF Tools：裁剪 pdf 文件的白边。
在命令行中直接将 eps 转换为 pdf：epstopdf <file.eps>；自动裁剪 pdf 的白边：pdfcrop <file.pdf>。

美化工具

highlightcode：在线代码高亮着色工具。
Xmind：思维导图、头脑风暴工具，像大脑的瑞士军刀一般，助你理清思路，捕捉创意。
Processon：在线画图工具，可导出高清png图片。
Convertio | Office-Converter | online convert free：文件类型转化工具，常用于任意类型的图片文件（如：.png、.jpeg、.pdf、.jpg）转换成eps类型的高清图片（.eps）。

论文投递

会议期刊查找筛选

ccf-deadlines：可以根据研究方向和 CCF 等级来筛选本年度已经确定截稿日期的会议。对国内的同学比较友好。
wikicfp：记录了国际学术会议Call for papers。
CCF国际学术会议期刊目录：**计算机学会（CCF）推荐的国际学术期刊、会议列表。
AI Conference Deadlines：可以根据研究方向筛选会议。但是好像需要科学上网才能看到全部信息。
sec-deadlines：CCF安全与隐私领域会议截止日期查阅表。
Conference List：根据截稿时间排序，过期的会议不在首页出现。有一页可以看每个研究方向有哪些会议，但是没有办法根据研究方向筛选还没过期的会议。
Conference Partner (会伴)：【待尝试】计算机最新国际会议和期刊列表。可以注册以关注会议或期刊。比较全，但目前信息更新不及时。
Conference-Acceptance-Rate：【待尝试】主要会议近年录取率统计。
Letpub：期刊分区查询工具，搜索SCI期刊信息，查阅SCI期刊分区表。
Semanticscholar：一个免费的、人工智能驱动的科学文献研究工具，可提供学术关系查询。

匿名链接

出于论文盲审考虑，有时候文件（如源码）链接需要是匿名的。有些人会选择在 Github 上创建一个匿名用户，但为每一个会议的每一篇论文都创建一个之后再用不到的用户过于繁琐。我查到有一些工具支持匿名分享文件如下。

Dropbox：【待尝试】应该是最常用的。
Open Science Framework：【待尝试】
Figshare：【待尝试】

arXiv 提交

Arxiv 论文提交流程——看这篇就够了：【待尝试】文章，用于了解将论文提交至 arXiv 上的流程。
arxiv-latex-cleaner：【待尝试】将论文的 LaTeX 代码清理为提交至 arXiv 上的要求。一个亮点是能够自动清理掉论文中所有被注释掉的内容。
overleaf -> arxiv 丝滑提交过程：【待尝试】如果是使用 Overleaf（而不是在本地将 LaTeX 代码编译为论文），可以先参考本文下载合适的源码包，然后再考虑使用 arxiv-latex-cleaner。

代码开源

为已发表的论文提供清晰、可复现的代码能够有效推动领域发展。这里推荐一些对开源代码有帮助的工具。

ReproducibilityChecklist-v2.0：【待尝试】一份机器学习复现清单，列举了你应该提供哪些文件来增强你的论文的可复现性。
pigar：【待尝试】Python 项目 requirements 文件自动生成工具。

论文查重

TopEditSCI：论文查重工具。（注：一般会议论文重复率在10%~15%，期刊论文在30%以内）

其他

专利检索

Google Patents：【待尝试】免费检索和下载中英文专利。具体可见 Google Patents，免费检索和下载中英文专利的最佳工具！。

allenpandas / ai-research-tools Goto Github PK

ai-research-tools's Introduction