退款诉求和负面情绪同时出现时,主标签如何确定?
用户:你们处理太慢了,我现在就要退款,不想再等客服来回确认。
任务说明要求主标签用于业务意图,辅助维度用于情绪记录。请选择当前样本的标注策略。
question bank
题库不是文章目录,而是一组已经完成本地复核、能被搜索、筛选、复盘和继续练习的原创模拟题。
用户:你们处理太慢了,我现在就要退款,不想再等客服来回确认。
任务说明要求主标签用于业务意图,辅助维度用于情绪记录。请选择当前样本的标注策略。
用户提到“星河 X2 春季换新计划 4 月报名入口打不开”。
任务要求分别标注产品、活动和时间。请判断是否需要把相邻片段拆开。
图片中一辆自行车被路牌遮挡,前轮和车把只有一部分可见。
图像框选任务要求标注可见目标边界。请选择处理方式。
A 回答完整但冗长;B 回答覆盖关键步骤,结构清楚,并提示风险边界。
两个回答都没有事实错误,但表达方式不同。请选择更合适的评估依据。
客服和用户同时说话 2 秒,用户后半句可辨识为“我明天下午再联系”。
音频任务要求区分说话人、记录可辨识文本,并标注无法听清的片段。请选择处理方式。
画面中叉车从静止启动,经过货架后停在指定区域,前后各有等待动作。
视频任务要求标注“物体开始移动到完全停止”的事件区间。请选择合理标注策略。
同一任务批次抽检 40 条,其中 9 条出现售后咨询和普通咨询混用。
一批文本分类样本中,多个标注员把售后咨询错标为普通咨询。请选择质检复盘方式。
回答给出了操作步骤,但没有提示需要核对数据来源和敏感信息处理限制。
评测任务要求同时看帮助性、真实性和安全边界。请选择更稳妥的评价方式。
文本:支持(星河 Watch 5)离线播放。候选标注把“(星河 Watch 5)”标为设备。
质检一条实体标注结果时,模型把核心实体连同外围括号一起标出。请选择判断方式。
文本:星河 Pro Max 支持高速传输。候选标注将“星河 Pro”和“Max”分成两个产品。
候选标注把同一个产品表达拆成两个实体。请选择更稳妥的质检结论。
用户问设备续航。回答写“18 小时”,参考资料显示“12 小时”。
评估一个回答时,发现回答中的参数与给定参考资料不一致。请选择事实维度判断。
回答称某配件支持一种未列出的颜色版本,资料中没有相关说明。
回答提到一个细节,但给定参考和可查来源都无法确认或否认。请选择判断方式。
文本:星河 17e 后置摄像头支持 5 倍数码变焦。
候选标注把“后置摄像头”只标成“摄像头”。请选择质检判断。
用户问充电速度。回答介绍充电速度,但把具体瓦数写错。
用户问 A,回答确实在讲 A,但其中一个参数错了。请选择意图维度判断。
用户问屏幕刷新率,回答却介绍电池容量。
回答内容本身可能正确,但没有回答用户问题。请选择意图维度判断。
文本:星河 17 Pro and Pro Max 支持同一接口速度。
候选标注把并列表达整体标为一个产品实体。请选择判断。
文本:What features does the main camera support?
问题中出现泛称能力词,但并没有指向具体功能名称。请选择 NER 判断。
文本:星河 Pad Air(第 5 代)支持哪些摄像头功能?
候选标注只覆盖产品名,漏掉括号里的代际信息。请选择判断。
候选属性:续航时间、传输速度、内存带宽、是否支持无线充电、外观颜色。
请选择适合归入“预期数值回答”类的属性。此题为多选。
文本:当前星河 TV 标准存储容量和支持的音频格式是什么?
候选标注覆盖存储容量、音频格式、当前版本和设备名称。请选择质检结论。
文本:星河音箱二代是否支持空间音频?
候选标注把空间音频归入声音能力相关标签,而不是泛功能标签。请选择判断。
文本:星河 OS 18.2 支持哪些新的隐私设置?
候选标注只标系统名,没有包含版本号。请选择判断。
用户问耳机降噪;回答介绍平板屏幕参数,且参数也不准确。
用户问一个设备功能,回答给出另一个设备的错误参数。请选择事实和意图维度。
用户问设备重量;回答正确介绍设备颜色。
回答内容可核验为正确,但主题偏离用户问题。请选择事实和意图维度。
用户问售价;回答确实给出售价,但数字与参考资料不同。
回答回应了用户问题,但给出的关键事实与资料冲突。请选择事实和意图维度。
文本:星河 Phone 9 的价格和首发优惠是什么?
候选标注把“价格”和“优惠”都标成产品功能。请选择质检结论。
文本:星河 Watch 5 港版是否支持蜂窝网络?
候选标注漏掉了地区限定词。请选择判断。
来源 A 写 8GB,来源 B 写 12GB;回答写 12GB。
一个回答引用了来源 A,但来源 B 给出不同规格,任务要求写出依据。请选择备注方式。
文本:星河耳机支持自适应通透模式。
候选实体既像功能名,又像声音能力名。请选择标签优先策略。
资料只说明支持快充,回答额外写“30 分钟充到 80%”。
回答补充了参考资料中没有出现的参数。请选择评测处理方式。
文本:星河 Phone 9 和星河 Phone 9 Pro 的屏幕差异是什么?
用户在同一句中比较两个设备,候选标注只标了第一个。请选择判断。
音频:用户说“助手,九点提醒我”,随后提示音响起,助手回答“已设置”。
用户唤醒语音助手后发出命令,随后有提示音和助手回答。请选择分段方式。
音频:用户说“助手,播放爵士乐”,随后和旁人聊爵士歌单,又说“换成轻柔一点”。
用户发出音乐请求后,与旁人短暂讨论同一主题,再补充相关请求。请选择分段方式。
音频:用户说“助手,帮我查一下”,中间出现提示音,随后继续说“明天的天气”。
用户命令过程中出现助手提示音。请选择标注方式。
音频:用户说“助手,中午提醒我打电话”,旁人说“中午有会”,用户说“那改到一点”。
用户先设置提醒,旁人提醒后又修改同一个提醒。请选择交互类型。
场景:片段起止都正确,但整体在时间轴上向右偏移了 0.5 秒。
标注时发现一个已完成片段整体位置偏移。请选择操作方式。
音频:用户说“助手,打开灯”。助手回答时,用户又说“助手,播放新闻”。
同一音频里用户再次说出唤醒词,并提出不同请求。请选择分段策略。
音频:用户看着设备说“把客厅灯调暗一点”,随后助手执行。
用户没有说唤醒词,但语义明确是在向语音助手发命令。请选择处理方式。
音频:用户说“助手,明天天气怎样?”助手回答后,用户说“顺便打开厨房灯”。
用户先问天气,随后提出与前一任务无关的新助手请求。请选择分段方式。
音频:用户说“助手,计时 5 分钟”,旁人说“快一点”,助手回答“计时开始”。
用户命令和助手回应之间,有旁人在背景中说了一句话。请选择标注方式。
音频:用户说“助手,提醒我买菜”,停顿两秒后补充“还有牛奶”。
同一交互中用户停顿片刻,并补充同一任务相关细节。请选择判断。
音频:助手还在回答天气,用户又说“助手,设置十分钟计时”。
新的助手请求开始时,上一轮助手回应尚未完全结束。请选择处理方式。
街景图右上角有一个清晰的限速牌,尺寸很小但可辨认。
图像任务要求标出所有可见交通标志。请选择处理方式。
图像中目标有踏板和把手,没有车座和脚踏。
候选标注把电动滑板车标为自行车。请选择质检备注。
上周“售后咨询”占 18%,本周同任务升到 52%。
质检发现某一类标签在新批次中占比异常升高。请选择复盘动作。
回答给出数据导出步骤,却没有提示脱敏和权限检查。
回答解决了用户问题,但忽略了敏感数据处理限制。请选择评估方式。
用户说“请把会议改到[噪声]点”,时间词听不清。
音频中一个关键词被噪声覆盖,任务要求标记不可辨识片段。请选择处理方式。
人物先拿起杯子放下,三秒后再次拿起杯子。
视频任务要求标注每次独立拿起物品的动作。请选择分段方式。
文本:上海星河研究院发布新数据集。
任务允许标注组织和地点两类实体。请选择嵌套实体处理方式。
样本把“会员退款”标成“普通咨询”。
质检发现标注错误,需要写返修备注。请选择最可执行的写法。
任务要求既要步骤清楚,也要提示风险边界。
A 更完整但啰嗦,B 更简洁但漏掉风险提醒。请选择偏好理由写法。
一片叶子形状不规则,外接矩形包含大量背景。
图像任务要求沿目标轮廓做多边形分割。请选择处理方式。
用户:不给我退款我就去平台差评,你们服务太差了。
样本同时包含投诉、退款和威胁差评,任务允许主标签和辅助标签。请选择策略。
画面前 1 秒严重运动模糊,随后能看到目标已经在移动。
视频开头模糊,无法确认动作是否已经开始。请选择处理方式。
A 先问价格,B 回答后,A 又追问发货时间。
音频转写任务要求区分说话人。请选择处理方式。
用户说“星河手机最近的折叠屏型号有没有现货”。
任务只标注品牌和具体产品,不标注泛品类。请选择处理方式。
请问杭州滨江星湾广场体验店今天几点关门?
任务要求标注地区和门店名称,不标注泛化位置词。
这款耳机支持 48kHz 采样率和 24bit 音频吗?
任务要求标注可比较的硬件规格。请选择标注策略。
星河 X2 到货了吗?它支持无线充电吗?
任务只标注文本中明确出现的产品名。请选择判断。
X2 Pro 的夜拍比 X2 强多少?
任务要求标注原文 span,标准名只在规范化字段填写。请选择处理。
我不要星河 X2,也不需要无线充电功能。
任务要求标注出现的产品和功能,不要求判断用户态度。请选择策略。
星河 OS 4.2 在 4 月底推送吗?
任务要求标注版本号和活动时间。请选择当前样本的拆分方式。
X2、X2 Pro 和 X2 Ultra 哪个适合拍视频?
任务要求标注所有明确产品名。请选择正确策略。
用户:X2 Pro 多少钱,什么时候开售?回答:起售价 3999 元。
用户问了价格和上市时间,回答只说明价格。请选择评估方式。
音频:助手,明天早上叫我……七点半。
用户发出一个请求,中间短暂停顿后补充条件。请选择分段方式。
音频:提醒我下午三点开会,不对,改成四点。
用户在同一句中修正时间。请选择标注策略。
用户问天气,助手播报一段后,用户追问“那需要带伞吗?”
助手回应较长,用户追问仍围绕同一主题。请选择策略。
音频:用户设置计时器,背景音乐音量变大,助手回应计时开始。
用户和助手交互期间背景音乐发生变化。请选择处理方式。
用户说“开始导航”,设备提示音响起,助手回答“正在规划路线”。
提示音不是用户语音,但发生在同一交互内。请选择策略。
A:导航到星湾广场。B:地下停车场入口。
两个说话人接力说出同一个导航目的地。请选择分段方式。
多个标注员对“智能助手”是产品还是功能产生分歧。
同一类样本在规范中没有明确边界。请选择质检动作。
金标把泛称词标为实体,但新规则要求排除泛称。
抽检时发现金标示例与最新版规则不一致。请选择处理方式。
50 条中只有 4 条错,但都把版本号标成时间。
抽检中某类错误数量不多,但全部来自同一字段。请选择策略。
格式备注缺少句号 12 条,主标签错误 5 条。
一批样本同时存在格式小错和标签错。请选择优先级。
样本:这个功能支持离线吗?标注员把“功能”标为实体。
标注员错把泛称词标成实体。请选择最合适的备注。
回答称“官方说明支持离线模式”,但引用段落只写“支持低网速缓存”。
回答看起来有引用,但引用内容和结论不一致。请选择判断。
用户要求把公开表格按城市排序,回答拒绝处理任何数据。
用户提出普通数据整理需求,模型误以为不安全而拒答。请选择评分。
A 有表格但漏权限检查;B 是段落但包含权限、脱敏和导出步骤。
两个回答一个结构清楚但漏步骤,一个结构普通但步骤完整。请选择偏好依据。
用户问普通账号能否导出,回答说“只有企业版可以”,但参考材料未说明。
回答声称某功能仅企业版可用,但样本没有证据支持。请选择评估。
回答提供操作步骤,并包含一个未经证实的限制和一个敏感字段导出建议。
任务要求评估回答是否适合直接给用户。请选择必须检查的维度。
图片中快递箱一半在画面外,只能看到左侧和上边。
任务要求标注可见目标边界。请选择处理方式。
前车挡住后车车头,但后车车身仍清晰可见。
图片中两辆车部分重叠,任务要求分别标注每辆车。请选择策略。
工人先看向物体,两秒后伸手拿起并放入箱子。
任务要求标注“拿起物体并放入箱子”的事件。请选择边界。
叉车进入货架后被遮挡,数秒后空车驶出。
目标动作结束瞬间被遮挡,任务允许备注不确定边界。请选择策略。
远处有一个疑似交通锥,高度约 6 像素。
任务说明要求低于 10 像素的目标不标注。请选择处理方式。