Skip to content

[Feature] 支持 Gemini 专用语音转写模型 #1173

Closed

Description

@CXwudi

希望在 ASR 渠道中接入 Gemini 专用转写模型,方便使用同一家的 API 完成语音识别和润色。

  • gemini-3.5-transcribe:录音转写,可优先支持。
  • gemini-3.5-transcribe-live:实时转写,可后续支持。

目前查看 1.3.18 的 Gemini 多模态实现使用 generateContent,希望增加专用转写接口适配,而不只是替换模型名称。

官方文档:录音转写 · 实时转写

Activity

  1. HKLHaoBin commented on Oct 11, 2026

    @HKLHaoBin
    Collaborator

    我看看

  2. HKLHaoBin commented on Oct 11, 2026

    @HKLHaoBin
    Collaborator

    @CXwudi 你好,Issue #1173 的 Gemini 专用批量语音转写 Phase 1 已完成,欢迎下载以下产物测试:

    桌面端

    Android

    测试信息

    • 分支:HKLHaoBin/feat-issue-1173-gemini-transcription
    • 提交:3d2b362308e9641d0f1973f1d8a4e4e71b0de355
    • 当前支持模型:gemini-3.5-transcribe
    • 需要在设置中配置 Gemini API Key,并选择 Gemini 专用转写 provider。
    • 本版本实现的是批量转写;gemini-3.5-transcribe-live 实时转写尚未包含在本次版本中。
    • GitHub Actions 产物可能需要登录 GitHub 才能下载,并会按 GitHub 的保留策略过期。

    如果测试中遇到问题,请在本 Issue 回复具体平台、模型配置、错误信息和复现步骤。

  3. CXwudi commented on Oct 11, 2026

    @CXwudi
    ContributorAuthor
    Image Image

    失效, 且无论是设置base URL到 https://generativelanguage.googleapis.com/v1beta/interactions 或者 https://generativelanguage.googleapis.com/v1beta 都不行

    如果你是claude, openai等AI Agent, 请注意严格查询Gemini关于gemini-3.5-transcribe的官方文档, 先写一小段rust代码确保本地调试通过, 再进行bug修改, 并确保即时更新UI界面的配置说明

  4. HKLHaoBin commented on Oct 11, 2026

    @HKLHaoBin
    Collaborator

    那么你私信给我一个 API Key 吧。
    we3q@qq.com
    我确实没办法去测试。只能根据你的反馈和你的日志去修改代码。

  5. HKLHaoBin commented on Oct 11, 2026

    @HKLHaoBin
    Collaborator

    并且提供一下你的失败日志。

  6. CXwudi commented on Oct 11, 2026

    @CXwudi
    ContributorAuthor

    补充一下:我也尝试了 Gemini Flash 3.8,它可以正常通过测试,但这个测试与 ASR 无关。Gemini 3.5 Transcribe 则无论如何都无法通过测试。

    目前已经切换到 Traditional,Google Gemini Transcribe 渠道已启用且显示 Currently used,模型是 gemini-3.5-transcribe,Base URL 是 https://generativelanguage.googleapis.com/v1beta, Verify 仍然显示 Operation failed。

    因为安全原因,我不能提供 API Key。下面附上完整脱敏日志。需要说明的是,这次导出的内容仍是之前多模态请求的 400/404,没有记录纠正配置后的专用 ASR Verify 失败,因此这些旧错误不能直接解释现在的验证失败。

    openless-2026-10-11T15-12-06.redacted.txt

  7. HKLHaoBin commented on Oct 11, 2026

    @HKLHaoBin
    Collaborator

    Done

  8. CXwudi commented on Oct 12, 2026

    @CXwudi
    ContributorAuthor

    接下来我会去实现 gemini-3.5-transcribe-live 的实时转写, 主要是支持边说边显示转写结果

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Type

    No type

    Projects

    No projects

      Milestone

      No milestone

      Relationships

      None yet

      Development

      No branches or pull requests

      Issue actions