Skip to main content

黑洞资源笔记

  1. esProc:一款开源的数据分析引擎。拥有低代码、高性能、轻量级和全功能的特点,相较于传统 SQL 技术,使用 esProc SPL 可以显著降低整体应用成本。

    由于 SPL 面向结构化和半结构化数据,因此还可用作分析型数据库和数据计算中间件,应用于线下跑批和在线查询场景。

    其独创的 SPL 语法使编码更简单且运行效率更高。技术特性包括:算法引擎、存储引擎、多源混算、并行框架、敏捷语法、嵌入集成、数据固化和实时数据。

    SPL 支持多数据源混合计算,可无缝集成到应用中,具备良好的集成性和轻量级特性。在性能、开发效率、灵活性和资源节约等方面具有显著优势。
  2. 在使用 ChatGPT 或 Midjourney 时,经常要使用各种 Prompt(提示词)跟 AI 进行交互,于是有设计师做了一款Prompt编辑器。

    该工具可以把 AIGC 提示词可视化,并提供在线编辑功能,主要包含以下特性:

    显示英文提示词的中文翻译;
    翻译输入的中文提示词到英文(因为 Midjourney 仅支持英文提示词);
    为提示词进行分类(普通、样式、质量、命令);
    轻松的排序、隐藏提示词;
    把提示词可视化结果导出为图片;
    常用提示词词典;
    通过 Notion 管理提示词词典。

    OpenPromptStudio | github | #工具
  3. Midjourney 自带的 /describe 命令要是觉得难用,可以试试这个开源版本:Docker Prompt Generator

    如同 Midjourney 官方新推出的功能,支持一键从图片中解析出 Prompt 描述,并能够基于描述进行扩展,以便二次图片生成。

    它不仅能解析 Midjourney 和 Stable Diffusion 图像,还支持用中文进行原始 Prompt 描述,并将中文转换为模型生成效果更好的英文 Prompt。

    repo | #生成器
  4. 一个免费的音效下载网站,由日本著名音效设计师小森平制作并分享。

    网站提供丰富的音效素材,可供游戏开发、影视制作、音乐制作等多个领域使用。音效素材种类繁多,涵盖动物、机械、气氛、人物、自然等各种类型,可以根据需要自由选择和下载。

    小森平 | #音效
  5. Midjourney 中文教程:Midjourney 学习导航 | #教程

    作为目前最火的 AI 绘图工具,Midjourney 相对其他同类产品,更容易上手,学习成本更低,生成的图像内容也颇为丰富与逼真。

    Midjourney 的学习,主要划分为以下几部分:

    1、Midjourney 基础入门(熟悉工具使用);
    2、善用 Prompt 对图像进行调节;
    3、通过高阶参数对图像进行定制。

    为了能让不同水平的朋友快速了解和学会 Midjourney ,国内一位开发者制作了 Midjourney 学习导航这门教程,希望它能帮助你更好地学习。
  6. Jami:一款私密的自由聊天软件,消息端到端加密,注册不需要任何个人信息,消息没有经过服务器中转。
  7. LLMPruner:大语言模型裁剪工具。通过对大语言模型的冗余词表进行裁剪,减少模型参数量,降低显存占用,提升训练速度,并且能够保留预训练中学习到的知识。

    大语言模型(LLM, Large Language Model)犹如雨后春笋般,其虽然效果惊艳,但参数量巨大,让普通玩家望而却步。 如今的大语言模型大多为多语种大预言模型(Multilingual Large Language Model),如LLaMA、mT5、Bloom等,其词表规模巨大,占据非常大部分的模型参数,如Bloom具有25万词表。 在训练模型时,词表权重将会消耗非常大的显存,降低训练速度,产生OOM的现象。

    但在许多下游任务中,一般只会用到一两种语言,例如在中文场景中,一般只会用到中英文。 我们可以对大语言模型的词表进行裁剪,只留下所需的部分,这样不仅能够充分保留模型的预训练知识,并且能够使用更少的显卡进行下游任务的finetune,提升训练效率。 | #工具