主题
技能库 - 系统技能
系统技能是平台内置、开箱即用的能力集合。应用可在「技能配置」中按需启用（启用方式详见 技能配置）。部分技能依赖设备侧能力，需配合设备开发才能生效；个别特殊技能需申请白名单权限。
如需接入您自己的后台服务（会员系统、售后系统、设备接口…），请参见并列的 自定义技能。
1. 系统技能清单
| 技能 | 说明 | 是否需要设备开发 | 备注 |
|---|---|---|---|
| 查天气 | 用于查询天气 | ||
| 方言 | TTS 支持方言输出，当前支持 9 种方言 | ||
| 查时间 | 查询时间、日期、节假日 | ||
| AIoT 指令控制 | 语音指令控制硬件设备 | ||
| 歌曲点播 | 整合多源音频内容，实现精准点播、智能推荐的点播能力。支持的资源方：默认无版权 6k 首（包含白噪音、戏曲、儿歌、流行音乐等） | 是 | 接入详见 有声书接入 |
| 有声书点播 | 支持京东图书 280 本 3k 集资源进行检索、推荐、点播，将优质内容转化为高价值的互动伴学体验 | 是 | 接入详见 有声书接入 |
| 联网搜索 | 搜索实时信息、最新动态等 | ||
| 知识问答 | 关联知识库进行回答 | ||
| 音色切换 | 切换设备当前说话音色 | ||
| 闲聊 | 兜底技能 | ||
| 视觉问答 | 识别当前图像内容 | 是 | 特殊技能，使用此功能需向 JoyInside 团队 zhaoyingxue11 沟通，可请对接人帮忙联系，配置白名单权限 |
| 健康问答 | 接入京东健康模型,支持:问诊咨询、指标解读、用药咨询、健康科普、心理咨询 | 是 | 特殊技能,使用此功能需向 JoyInside 团队 zhaoyingxue11 沟通,可请对接人帮忙联系,配置白名单权限 |
| 网易云音乐 | 接入网易云正版音乐曲库,弥补默认曲库覆盖不足;点播能力与 歌曲点播 一致,端侧复用 AUDIO_BOOK_* 协议 | 是 | 特殊技能,使用此功能需向 JoyInside 团队 zhaoyingxue11 沟通,可请对接人帮忙联系,配置白名单权限;与 歌曲点播 互斥,同一应用二选一;授权 License 一次性买断 6 元 / 台(C 端使用时生效),支持 C 端自主绑定网易云账号,未登录听非 VIP、登录后听 VIP;建议品牌 App / 小程序侧配合定制开发(等待技术说明书更新) |
| 闹钟 | 通过自然语言设置/查询/删除闹钟,支持普通闹钟(单次/每天/按周)与当天间隔提醒;云端解析并下发结构化指令,端侧本地存储、计时与响铃 | 是 | 需端侧实现存储、RTC 计时、响铃与打断(唤醒词/按键/触摸,至少一种);闹钟个数上限、时间范围、关机响铃、是否支持间隔提醒均由端侧自行决定并直接回复用户;走 AIoT 同一事件通道;协议接入详见 §6.5 闹钟设置接入 |
| TTS 读拼音 | 让 TTS 遇到拼音时按拼音发音朗读,而不是按英文字母逐个念出(默认状态下拼音全部读成英文字母) | 否 | 特殊技能,默认关闭、不支持控制台自助开启,需向 JoyInside 团队 zhaoyingxue11 沟通授权配置;仅 4 开头的 5 位数编码音色(zeroshot 音库)支持,音色编码暂未在运营平台对外展示(能力开放中),启用前可联系对接人确认;整体准确率约 90%,剩余约 10% 仍可能读成字母;不开放参数与提示词编辑 |
| 声音小百科 | 支持查询动物/自然/乐器等 129 种声音并播放对应声音音频,辅助儿童认识不同的声音;命中清单则「TTS 话术 + 播放声音」,未命中则降级为纯 TTS 闲聊 | 否 | 音频由云端直接转成 Opus、通过 TTS 通道下发,端侧无需实现新协议,与 歌曲点播/有声书点播 完全独立;不开放参数与提示词编辑 |
| LLM 讲故事 | 不调取有声书资源,完全由大模型即兴生成故事并经 TTS 朗读;区分「经典故事讲解」(狼和小羊、渔夫和金鱼、格林童话等)与「虚拟故事构建」(海绵宝宝和喜羊羊一起玩、我和孙悟空去冒险);对故事主题做历史管理以避免重复 | 否 | 与 有声书点播 互斥,同一应用二选一(启用有声书点播时已自带 LLM 讲故事做兜底);历史记忆有有效期 + 条数上限(三位数以上),有效期内触发讲故事会刷新全部历史有效期,超上限先入先出淘汰 |
| TTS 唱歌 | 由 TTS 以演唱方式把歌曲唱出来(非播放原唱音频),支持固定歌单范围约 320 首,以儿歌 / 童谣为主(约 290 首),另有少量流行乐与民歌 / 国风 | 否 | 存在版权风险,使用前必须先与 JoyInside 签署风险协议,不支持控制台自助开通;走 TTS 通道下发、无需单独接入,但受 TTS 参数(音色/语速/音量)配置影响;完整歌单明细不对外提供,需联系 JoyInside 获取;与 歌曲点播 可同时启用:「听 XX 歌」优先点播、「唱 XX 歌」优先唱歌,超出歌单范围时转为歌曲点播检索资源(命中则播放、未命中同样不播放,且歌曲点播需端侧对接专门协议),未配置歌曲点播则回复「我还不会唱」 |
2. 需设备开发的技能
以下技能「是否需要设备开发 = 是」，即除了在平台侧启用外，还需设备侧配合开发对应能力才能完整生效：
- 歌曲点播:需设备侧对接音频播放能力
- 有声书点播:需设备侧对接音频播放能力
- 网易云音乐:与歌曲点播、有声书点播复用同一套
AUDIO_BOOK_*协议,若已接入 有声书点播 则无需重复开发;与默认 歌曲点播 互斥,启用时需关闭默认歌曲点播 - 视觉问答:需设备侧具备图像采集/上传能力
- 健康问答:需设备侧配合相应交互链路
- 闹钟:需设备侧实现本地存储、RTC 计时、响铃与打断能力(唤醒词/按键/触摸,品牌方至少选一种)
无需设备开发但需留意的一类:声音小百科 播放声音音频时,是由云端把音频转成 Opus 后走 TTS 通道下发,端侧按常规 TTS 播放即可,不需要新协议。
3. 互斥技能组合 ⚠
以下技能两两互斥,同一应用只能二选一,在技能配置中启用一方时需关闭另一方:
| 互斥组合 | 怎么选 | 启用「资源方」时的兜底 |
|---|---|---|
| 网易云音乐 × 歌曲点播 | 需要正版 VIP 曲库、可接受付费授权 → 网易云音乐;够用免费 6k 首无版权曲库 → 歌曲点播 | 两者点播能力一致,端侧复用同一套 AUDIO_BOOK_* 协议 |
| LLM 讲故事 × 有声书点播 | 需要优质版权内容 / 伴学 → 有声书点播;只要内容无限生成、不受资源库限制 → LLM 讲故事 | 启用有声书点播时已自带 LLM 讲故事做兜底:资源库覆盖不到的长尾诉求由模型即兴生成,不会出现「没有这个故事」 |
注意区分:TTS 唱歌 与 歌曲点播 不是互斥关系,可同时启用。两者按用户说法路由:「听 XX 歌」优先走歌曲点播,「给我唱 / 唱 XX 歌」优先走 TTS 唱歌;命中 TTS 唱歌但歌曲超出歌单范围时,转为歌曲点播检索资源库:命中资源则播放音频、未命中同样不播放(注意歌曲点播需端侧对接专门的播放协议),若未配置歌曲点播则回复用户「我还不会唱」。因此建议两者同时启用。
4. 特殊技能(需申请白名单)
视觉问答、健康问答、网易云音乐、TTS 读拼音、TTS 唱歌 为特殊技能,除需设备开发外(TTS 读拼音、TTS 唱歌无需设备开发),还需申请白名单权限:
- 使用前需向 JoyInside 团队 zhaoyingxue11 沟通
- 可请对接人帮忙联系,由其协助配置白名单权限
- 白名单开通后,方可在技能配置中启用
- 网易云音乐额外需注意:该技能为付费技能,授权 License 一次性买断 6 元 / 台,在 C 端用户使用时生效;支持 C 端用户自主绑定网易云账号,未登录状态可收听非 VIP 曲库,登录后可收听 VIP 曲库;授权是准入前提,费用与授权白名单同步开通;与默认 歌曲点播 互斥,同一应用只能二选一;此外建议品牌方 / 合作方在自有 App / 小程序侧配合做定制化开发(如网易云账号绑定入口、VIP 权益引导等),具体接入方式请等待技术说明书后续版本更新
- TTS 唱歌额外需注意:该技能实际存在版权风险,使用前必须先与 JoyInside 签署风险协议后才可开启,不支持控制台自助开通,协议签署请联系 JoyInside 团队或你的对接人(非上述白名单联系人);完整歌单明细不对外提供(可向对接人索取歌单清单),当前支持约 320 首,以儿歌 / 童谣为主(约 290 首),另有少量流行乐(约 25 首)与民歌 / 传统 / 国风(约 5 首);音频走 TTS 通道下发、端侧无需单独接入,但演唱效果受 TTS 参数(音色 / 语速 / 音量)配置影响,建议上线前用实际音色试听确认;与 歌曲点播 可同时启用,超出歌单范围时转为歌曲点播检索资源(命中则播放、未命中同样不播放,且歌曲点播需端侧对接专门协议),详见 TTS 唱歌
- TTS 读拼音额外需注意:该技能默认关闭且不支持控制台自助开启,由 JoyInside 侧授权配置;当前仅 4 开头的 5 位数编码音色(zeroshot 音库)支持,其他音色暂不支持(算法侧新版本上线后可全部支持);音色编码暂未在运营平台对外展示(能力开放中),启用前可联系对接人确认所选音色是否为 4 开头的 5 位数编码,若音色非 4 开头建议暂不开通;整体准确率约 90%,剩余约 10% 仍可能读成字母,需知悉并接受该预期;技能本身不开放参数与提示词编辑,对应用方只有「有/无」两种状态
5. Q&A
Q1：系统技能和自定义技能有什么区别？ 系统技能是平台内置、开箱即用的能力；自定义技能则由应用方自行配置并挂接第三方服务。系统技能中如「查天气」「查时间」等无需额外开发即可使用。
Q2：为什么启用了歌曲点播/有声书点播，设备上却没有声音？ 这两项技能「是否需要设备开发 = 是」，除平台侧启用外，还需设备侧对接音频播放能力后才能完整生效。
Q3：视觉问答/健康问答怎么开通？ 这两项为特殊技能，需先向 JoyInside 团队 zhaoyingxue11 申请白名单权限，开通后再在技能配置中启用，同时需设备侧配合开发。
Q4：方言支持哪些？ TTS 当前支持 9 种方言输出。
Q5:网易云音乐和默认歌曲点播能同时启用吗?费用怎么算?两者互斥,不能同时启用,同一应用只能二选一。默认歌曲点播是平台内置的 6k 首无版权曲库,免费;网易云音乐是付费系统技能,授权 License 一次性买断 6 元 / 台,在 C 端用户使用时生效;支持 C 端用户自主绑定网易云账号,未登录状态可收听非 VIP 曲库,登录网易云账号后可收听 VIP 曲库。启用前需向 JoyInside 团队 zhaoyingxue11 申请白名单授权;建议品牌方 / 合作方在自有 App / 小程序侧配合做定制化开发。详见 网易云音乐。
Q6:声音小百科需要设备端配合开发吗?能播多少种声音? 不需要设备开发。该技能的声音音频由云端直接转成 Opus,通过 TTS 通道下发,端侧正常播放 TTS 音频即可,不需要像歌曲点播那样实现 AUDIO_BOOK_* 协议与播放状态机。目前支持 129 种声音(动物/自然/乐器等);查询清单外的对象不会报错,会降级为纯 TTS 闲聊话术,不播放音频。详见 声音小百科。
Q7:TTS 读拼音怎么开通?为什么有时候拼音还是读成字母? 该技能默认关闭、不支持控制台自助开启,需向 JoyInside 团队 zhaoyingxue11 沟通授权配置。启用有三个前提:确有拼音朗读诉求、可接受约 90% 的准确率、使用 4 开头的 5 位数编码音色(zeroshot 音库);音色编码暂未在运营平台对外展示(能力开放中),启用前可联系对接人确认所选音色是否为 4 开头的 5 位数编码,非 4 开头音色建议暂不开通。「XX 的拼音怎么读」这类明确问拼音的 query 命中率较高,其他随机拼音类 query(如「声母有哪些」)是否按正确拼音读概率不确定,剩余约 10% 仍可能读成字母。无需设备端配合开发。详见 TTS 读拼音。
Q8:LLM 讲故事和有声书点播能同时启用吗?讲故事会重复吗?两者互斥,同一应用只能二选一。启用有声书点播时已自带 LLM 讲故事做兜底:点播诉求走京东图书真实资源,资源覆盖不到的长尾诉求(如「海绵宝宝和喜羊羊一起玩的故事」)由模型即兴生成,不会出现「没有这个故事」。单独启用 LLM 讲故事时不调取任何有声书资源,故事全部由大模型生成后经 TTS 朗读,无需设备开发。为避免重复,该技能对故事主题做了历史管理:历史记忆有有效期与条数上限(三位数以上量级),超过有效期的历史不再生效;有效期内每次触发讲故事会刷新全部历史信息的有效期,超过条数上限时先入先出淘汰最早的记录。因此长期不用或讲得特别多时,仍可能出现重复主题。详见 LLM 讲故事。
Q9:TTS 唱歌怎么开通?能唱哪些歌?和歌曲点播冲突吗? 该技能实际存在版权风险,使用前必须先与 JoyInside 签署风险协议后才可开启,不支持控制台自助开通,请联系 JoyInside 团队或你的对接人协助。技能走 TTS 通道下发,端侧无需单独接入,但演唱效果受 TTS 参数(音色 / 语速 / 音量)配置影响,建议上线前用实际音色试听确认。歌曲只能在固定歌单范围内演唱,当前约 320 首:儿歌 / 童谣为主(约 290 首,覆盖经典儿歌、早教启蒙、好习惯养成、动画主题曲 / 片尾曲)、流行乐约 25 首、民歌 / 传统歌曲 / 国风约 5 首,全部中文、以儿童适听为主;完整歌单明细不对外提供,如需确认某首歌是否在范围内请联系 JoyInside 获取清单。与 歌曲点播 不互斥、可同时启用:「听 XX 歌」优先走歌曲点播,「给我唱 / 唱 XX 歌」优先走 TTS 唱歌;命中 TTS 唱歌但歌曲超出歌单范围时,转为歌曲点播检索资源库:命中资源则播放音频,未命中同样不播放(注意歌曲点播需设备端对接专门的播放协议才能生效);若未配置歌曲点播则回复用户「我还不会唱」,因此建议两者同时启用。详见 TTS 唱歌。