AI零笔记 - 项目调研阶段的一些整活

前几天我科学上网学习鱼皮大佬 AI Vibe Coding 教程里的《微软官方 Generative AI for Beginners》时突发奇想:作为一个有严重阅读障碍、从小到大没记过笔记的 IT 从业人,为什么不直接用当下最火的 AI 技术,搞一个AI 辅助看视频做学习笔记的软件呢?
于是 “AI 零笔记” 就此诞生(命名方式也是向牢鱼学的 😄)。

说干就干,用 Cursor Vibe Coding 先把一个能扫描并保存音频文件的功能写了出来,作为 AI 零笔记的首个 Demo。接着就进入了语音转文本的 AI 大模型选型阶段,以及生成效果测试。之后再调用通用大语言模型,根据识别出的文本生成最终的笔记内容。

很快,我找到了这个项目里第一个最大的乐子——AI 语音实时翻译产出的笑点过于密集。举个例子,AI 视频翻译腔的真实实力如下:

"想象一下,你想例如部署一个的 winch,或者可能是 chat ubt 三个半涡轮。"

而原义可能是 “部署一个 Whisper,或者 ChatGPT 3.5 Turbo”。太秀了,简直是南辕北辙!

但转念一想:我们可以用 AI 来消除 AI 视频翻译的 debuff 啊!
直接在提示词里注明:先修正 AI 视频翻译文本中的常见错误,再基于修正后的内容生成笔记。这样准确率不就上来了吗?

以下是根据视频录音(AI 翻译)修正错误后整理的学习笔记,已对常见的翻译偏差进行勘正并保持原意。
大家来感受一下,在优化过 Prompting 的加持下,AI 是怎么成为AI 视频翻译腔最严厉的父亲的吧。 (原来AI视频翻译腔文本识别的内容我PO在最下面做为对比)


📘 生成文本应用构建 - 学习笔记

课程来源:Building Text Generation Applications [Pt 6] | Generative AI for Beginners
讲师:Chris Noring(微软高级云技术布道师)


🔧 翻译关键修正说明

  • 库/工具名称:
    • open ai → openai(Python库)
    • E和V / dot emv / dmv文件 → dotenv(用于加载 .env 环境变量)
    • action门户 → Azure 门户
    • action open ai → Azure OpenAI
  • 术语错误:
    • 实力化客户端 → 实例化客户端
    • 终点 → 端点(endpoint)
    • winch → Whisper 模型
    • chat ubt三个半涡轮 → ChatGPT 3.5 Turbo
    • 嵌入代码 → embeddings 模型
    • 第十八型 → 部署(deployment)
    • 网。罗故事 → 很棒的故事
    • 两个五个以此类推 → 想想看 / 例如
    • 理斯通 → 列表(list) / 响应
    • 阿贝林肯 → 亚伯拉罕·林肯
  • 其他口语化错译均已在笔记正文中修正为通顺表达。

📚 学习内容总结

1. 环境准备与安全实践

  • 必须安装的库:openai 和 python-dotenv。
  • 安全性原则:
    • 绝不在代码中硬编码密钥(API key)、端点等机密信息。
    • 使用 .env 文件存储敏感配置,再通过 dotenv 加载为环境变量。
    • 示例 .env 内容:
      ▼
      text
      复制代码
      AZURE_OPENAI_ENDPOINT=https://你的资源.openai.azure.com/ AZURE_OPENAI_KEY=你的密钥
  • 加载方式(代码):
    ▼
    python
    复制代码
    from dotenv import load_dotenv load_dotenv()

2. 初始化 Azure OpenAI 客户端

需要提供三要素:

  • 端点(endpoint):在 Azure 门户中创建资源后获得。
  • API 密钥(api_key):用作身份验证的唯一凭据。
  • API 版本(api_version):会随时间更新,必须查阅微软官方文档以使用正确版本,以确保功能兼容。
▼
python
复制代码
import openai openai.api_type = "azure" openai.api_base = os.getenv("AZURE_OPENAI_ENDPOINT") openai.api_key = os.getenv("AZURE_OPENAI_KEY") openai.api_version = "2023-05-15" # 示例,请以官方最新为准

3. 理解“部署”

  • 同一个 Azure 资源下可部署多个模型,每个部署对应一个模型类型。
  • 不同任务需调用不同部署:
    • 文本生成/聊天:gpt-35-turbo 部署
    • 嵌入向量:text-embedding-ada-002 部署
    • 语音转文字:whisper 部署
  • 调用时需指定部署名称(deployment),也就是你所使用的模型实例。

4. 提示与消息结构

核心:提示(prompt)是指令,消息(messages)是对话上下文。

  • 示例提示(故事生成):
    ▼
    text
    复制代码
    完成以下故事:从前,有一个……
  • 消息(messages)格式:
    一个消息列表,每个元素包含 role 和 content:
    • system:设定 AI 的角色与行为。
    • user:用户输入。
    • assistant:历史回复(用于多轮对话)。

角色扮演技巧:

  • 普通助手:{ "role": "system", "content": "你是一名博物馆策展人。" }
  • 名人模仿:{ "role": "system", "content": "你是亚伯拉罕·林肯,请以自己的口吻讲故事。" }
    这能让 AI 行为产生巨大变化,适应不同场景。

5. 调用生成API并获取回复

▼
python
复制代码
response = openai.ChatCompletion.create( engine="你的部署名", messages=[ {"role": "system", "content": "你是一个乐于助人的助手。"}, {"role": "user", "content": "从前,有一座神秘的城堡……"} ] ) # 提取生成的文本 print(response.choices[0].message.content)
  • 首次运行会建立连接,耗时稍长。
  • 可通过修改 system 或 user 提示来获得不同风格的内容(如童话、科幻等)。

6. 动手演示:生成故事

  • 运行简单提示,得到一个随机生成的故事。
  • 修改提示为科幻风格,再次运行,故事变为太空冒险。
  • 示例生成内容:

    女孩 Nova 出生在宇宙飞船上,她对星星和发现新行星充满向往……

应用场景:家长或长辈可借此为孩子生成个性化睡前故事,成为“总讲精彩故事的亲人”。


7. 进阶示例:食谱生成器

  • 用户输入:冰箱/橱柜中现有的食材(如鸡肉、土豆、胡萝卜)。
  • 安全过滤:添加“花生过敏”等限制,避免生成有害食谱。
  • 构建带模板的提示:
    ▼
    text
    复制代码
    请根据以下食材给出一个简单食谱:{食材列表} 要求:不含花生,适合初学者。
  • 调用 API,获取结构化的食谱清单。

价值:展示了生成式 AI 在日常生活中的实用帮助,且能包容特殊需求。


💡 关键要点

  • 始终将机密与环境变量分离,防止泄露。
  • 客户端初始化需正确指定 endpoint、key、api-version、deployment。
  • 通过 system 消息精准调控 AI 的行为与语气。
  • 同一套代码可通过更换提示和消息轻松适配故事创作、食谱生成等不同场景。
  • 生成文本应用的核心流程:准备环境 → 配置客户端 → 设计消息 → 调用模型 → 处理响应。

AI笑点.png

看到这里的朋友是不是感受到了AI的魅力,直接化腐朽为神奇,上面输出的视频笔记已经初见端倪了也是比较理想的一种输出结果还是顶着AI视频翻译腔debuff的前提下。 以上就是我关于AI零笔记的第一次整活,希望大家都能度过一个不错的五一假期。

0个评论
点击登录,快来和大家讨论吧~
表情
图片
暂无评论
耄耋之王园区形态
作者分享
Day 91 ✅ 今天做了: 1. 继续深挖底层原理 --- 回归《AI》作为基石常看常新 2. 挖一些外网的AI热点和资料 --- 重点在Hermes 3. 重新透彻的了解Hermes底层原理 「小步跑,小突破,慢慢集气汇聚成必杀」 ⏰ 下周计划: 1. 上班继续清技术债 2. 之前Hermes代码编排器虽然成了,但只知其然不知其所以然继续深挖 3. LangGraph和飞书卡片结合项目搞完 --- 目前个人最亮点项目 「工作和之前的玩具结合起来,双向奔赴双向赋能」 📚 今日感悟: 8月了重拾学习计划,将目前自身Skills和对AI理解深度继续扩展。时刻保持警惕,持续学习且只抓重点。
3
不知不觉加入编程导航一年了,从原始人到造航母。一年前来的时候是想重拾编程信心,吭哧瘪肚的学项目。现在这时候已经进入AI行业天天Vibe Coding,Crazy我只能说!
3
Day 90 三个多月AI学习终于迎来新篇章,我管这叫大AI时代和大航海一个意思 ✅ 今天做了: 1. 继续深挖底层原理 --- 回归《AI》作为基石常看常新 2. 挖一些外网的AI热点和资料 --- 拓展思维 3. 继续Vibe Coding尝试 --- Loop自动编码器持续优化,和“一键素材成文”开放MCP(未来给公司营销用的,只需投素材再回答几个问题,然后AI炼化多agent配合多端发文) 「小步跑,小突破,慢慢集气汇聚成必杀」 ⏰ 下周计划: 1. 上班继续清技术债 2. 用AI突破5个定向场景和虚拟场景定制AI自动工作流 3. 修之前AI项目的漏洞 4. 继续丰富MCP,SKILL,CLI市场 5. 优化现有的需求场景进一步从能用到好用跨越 「工作和之前的玩具结合起来,双向奔赴双向赋能」 📚 今日感悟: 纪念一下三个月的AI学习,可能是人生中最有意义的三个多月之一。有种工具火耕刀时代跃进到信息时代的感觉,我个人开始大范围用AI也是今年的事,然后就干AI了。话到这里反倒没有太多感慨,只能说AI时代太神奇了,一学一个不吱声就完事了。
2
Day 89 ✅ 今天做了: 1. 继续琢磨更多MCP工具,公司里搭了个超级智能体飞书打通了,剩下的就是优化完善 2. 继续看AI底层原理,这个对智能体的优化太重要了,模式思维LangGraph都能给业务赋能的 3. 研究一些AI服务的优化,尤其是挂Hermes的云主机怎么节省token 4. 补一些之前鱼皮的项目,主要是架构设计更好的指挥AI ⏰ 明天计划: 1. 优化自动LOOP编码器,实测发现了几个空烧token的场景 2. 研究下之前玩具Vibe Coding项目的一些底层亮点 3. 看AI基础知识 📚 今日感悟: 入职快一个月了也搞了很多东西,也搞了一些业务那边的AI自动化需求,总体很满意的。总算能用的上了,下面就是往好用稳定性高上突破。现在公司运维大佬和我一个组,安排的太好了,资源调配吱一声就有了。剩下的就是合理运用现有公司资源,搞一些Agentic AI的尝试,底层我再好好摸摸大模型原理。
4
Day 88 ✅ 今天做了: 1. 旧项目完成 MCP 协议封装,工具调用接口已通,Agent 可调本地能力了 2. KIMI3 上手实测,长上下文压缩确实有东西,推理速度比预期快,99元裆走起 3. Token Plan 实机压测跑完,长文本场景下不同策略的消耗和精度损失有了量化对比,数据到手。 ⏰ 明天计划: 1. 把今天 Token Plan 的测试结果整理成可复用的小工具,纳入 LOOP 编排器。 2. 啃一下 MoE(混合专家)路由逻辑,搞懂 KIMI3 这类模型怎么做条件计算。 3. 用 MCP 搭一个最简单的 Agent 链,把扫码采集 → 本地编排 → 模型推理串起来跑一遍。 📚 今日感悟: 实测才是照妖镜,纸上参数和实机表现经常两码事。MCP 包完那刻才真切感受到——能力必须可被调用,才有资格谈“被 Agent 使用”
3
下载 APP