笔者于2016年9月24日分别百度知道、Yahoo Answers、知乎、Quora投放上表中的个问题,同时也在全国图书馆参考咨询联盟网站(www.ucdrs.net)上提出咨询请求。实验后3天、15天、45天对有关情况进行查看。截止2016年11月,实验结果
平台名称 | 全国图书馆参考咨询联盟 | 百度知道 | Yahoo Answers | 知乎 | Quora |
事实性问题 | A1 | 1\1\100% | 0\0\0 | 5\3\60% | 1\1\100% | 1\1\100% |
A2 | 1\1\100% | 1\1\100% | 5\5\100% | 1\0\0 | 2\2\100% |
解释性问题 | B1 | 1\1\100% | 0\0\0 | 0\0\0 | 0\0\0 | 2\2\100% |
B2 | 1\1\100% | 0\0\0 | 3\2\67% | 1\1\100% | 4\4\100%a |
偏好性问题 | C1 | 1\1\100% | 0\0\0 | 0\0\0 | 0\0\0 | 5\5\100% |
C2 | 1\1\100% | 4\3\75% | 1\1\100% | 1\1\100% | 0\0\0 |
评价性问题 | D1 | 1\1\100% | 1\0\0 | 0\0\0 | 17\16\94% | 1\1\100% |
D2 | 1\1\100% | 0\0\0 | 31\29\94% | 26\21\81% | 0\0\0 |
探索性问题 | E1 | 1\1\100% | 1\1\100% | 1\1\100% | 19\18\95% | 2\2\100% |
E2 | 1\1\100% | 1\1\100% | 2\2\100% | 1\1\100% | 1\1\100% |
汇总 | 10\10\100% | 8\6\83% | 48\43\89% | 67\59\88% | 18\18\100% |
在数据回收时,不考虑答案对错,把明显与主题无关的答案视为无效答案。从回答数量来看,只有图书馆虚拟参考咨询系统回答了所有问题,而且均给出了有效答案。在社会化平台方面,知乎和Yahoo Answers回答数量最多,有效答案最多;其次是Quora,共收到18个有效回答,百度知道收到8个回答,其中6个有效。从答题分布来看,百度知道回答集中于偏好性问题;Yahoo Answers集中于事实性问题和评价性问题;知乎集中于评价性问题和探索性问题;Quora集中于解释性问题、偏好性问题和探索性问题。
从有效率来看,Quora的所有答案均为有效答案,有效率达到100%,百度知道为83%,知乎和Yahoo Answers均超过了85%。可见图书馆参考咨询基本上是有必答,而在开放的社会化问答平台上则受多种因素的影响。如在Yahoo Answers提问的“如何看待2016年9月24日Jeremy Corbyn重选为英国工党领袖?”,这一问题由于其时效性和其文化背景到大量回复评论。而在社会化问答平台内部来看,第一阶段的问答平台在事实、偏好、评价方面回答量较多,这也符合其草根化和搜索引擎基础的特点;而第二阶段的问答平台在解释、探索、评价方面的回答较多,也较符合其平台深度知识分享的特点。
平台名称 | 全国图书馆参考咨询联盟 | 百度知道 | Yahoo Answers | 知乎 | Quora |
事实性问题 | A1 | 6小时9分钟 | - | 小于1天 | 3天 | 小于1天 |
A2 | 6小时11分钟 | 11分钟 | 小于1天 | 21分钟 | 小于2天 |
解释性问题 | B1 | 6小时47分钟 | - | - | - | 小于1天 |
B2 | 6小时44分钟 | - | 小于1天 | 2天 | 小于2天 |
偏好性问题 | C1 | 6小时40分钟 | - | - | - | 小于1天 |
C2 | 6小时28分钟 | 1小时4分钟 | 小于1天 | 42天 | - |
评价性问题 | D1 | 6小时25分钟 | 1分钟 | - | 12小时15分钟 | 25天 |
D2 | 6小时20分钟 | - | 小于1天 | 37小时28分钟 | - |
探索性问题 | E1 | 6小时17分钟 | 23小时49分钟 | 小于2天 | 27小时39分钟 | 小于1天 |
E2 | 6小时12分钟 | 4小时59分钟 | 小于1天 | 3分钟 | 小于1天 |
答案的长度虽然不能直接反应问题答案,但是可以间接显示回答者回答的认真程度和答案的详细程度。根据表9数据可知,图书馆参考咨询联盟给出的答案基本上字数过百,给出的答案较为详尽。而社会化问答平台情况不一,百度知道和Yahoo Answers的答案基本较短,除了百度知道有用户直接粘贴大段网络信息之外基本都处于30字(词)到50字(词)之间,知乎与Quora的回答情况则普遍较长。值得注意的是在探索类和评价类问题上,社交问答平台有无可比拟的优势。总体看来,图书馆虚拟参考咨询平台馆员的工作较为认真尽责,而社会化问答平台,尤其是第一代网络问答平台用户的答案则较为随性。
平台名称 | 全国图书馆参考咨询联盟 | 百度知道 | Yahoo Answers | 知乎 | Quora |
事实性问题 | A1 | 300字 | - | 21词 | 95字 | 18词 |
A2 | 254字 | 1378字 | 63词 | 12字 | 182词 |
解释性问题 | B1 | 41字 | - | - | - | 91词 |
B2 | 323字 | - | 26词 | 15字 | 209词 |
偏好性问题 | C1 | 384字 | - | - | - | 104词 |
C2 | 701字 | 27字 | 3词 | 10字 | - |
评价性问题 | D1 | 392字 | 23字 | - | 1516字 | 21词 |
D2 | 42字 | - | 147词 | 4948字 | - |
探索性问题 | E1 | 38字 | 23字 | 27词 | 2821字 | 97词 |
E2 | 68字 | 38字 | 41词 | 77字 | 34词 |
对问题的浏览量和关注人数可以看出各个平台的开放程度和交互情况。全国图书馆参考咨询联盟由于平台封闭,为一对一的问答互动,因此没有知识传播、知识分享的条件。而在社会化问答平台方面,尤其是第二代社交问答平台上,阅读量、问题关注人数较多,知乎和Quora上每个问题基本都有数百的浏览量,与时事相关的问题甚至达到3万余次的浏览量、250余人的关注人数(见表10)。这充分显示了社会化问答平台在信息交互传播上的优势。
平台名称 | 全国图书馆参考咨询联盟 | 百度知道 | Yahoo Answers | 知乎 | Quora |
事实性问题 | A1 | 封闭不开放 | 8\- | -\0 | 166\3 | 150\1 |
A2 | 23\- | -\0 | 26\3 | 1660\2 |
解释性问题 | B1 | 7\- | -\0 | 18\1 | 1175\3 |
B2 | 7\- | -\0 | 52\2 | 1822\9 |
偏好性问题 | C1 | 9\- | -\0 | 11\2 | 600\2 |
C2 | 23\- | -\0 | 36\2 | 1361\4 |
评价性问题 | D1 | 38\- | -\0 | 4165\33 | 156\2 |
D2 | 12\- | -\2 | 15254\251 | 315\1 |
探索性问题 | E1 | 41\- | -\0 | 34720\136 | 546\1 |
E2 | 26\- | -\0 | 21\2 | 584\1 |
对实验问题的浏览量和关注人数进行调查可以从侧面反映回答质量情况,采用群体决策的方式,一个回答得到的赞同数量越多,说明这个回答被更多人认可,可以通过这样的机制进行答案展示的排序和质量控制。在图书馆虚拟参考系统里没有设置该功能,自然也就无法通过非提问者和非回答者等第三方进行答案质量检验。在社会化问答平台上,被实验对象问题最高赞同数达到了512个(见表11),这说明该答案得到了大多数人认可,充分体现了其相对的正确性、普适性和客观性,能为提问者提供针对问题的最优解。
平台名称 | 全国图书馆参考咨询联盟 | 百度知道 | Yahoo Answers | 知乎 | Quora |
事实性问题 | A1 | 不设置支持赞同选项 | - | 2 | 3 | 0 |
A2 | 0 | 0 | 0 | 18 |
解释性问题 | B1 | - | 0 | - | 0 |
B2 | - | 1 | 0 | 3 |
偏好性问题 | C1 | - | - | - | 0 |
C2 | 0 | 1 | 1 | - |
评价性问题 | D1 | - | 0 | 4 | 0 |
D2 | - | 6 | 512 | - |
探索性问题 | E1 | - | 0 | 106 | 0 |
E2 | 0 | 0 | 0 | 0 |
汇总 | - | 0 | 10 | 626 | 21 |
对每个问题在个平台上的回答时间进行统计,将每个问题下的回答,按在天内、、天进行归类,选出每个问题的主要回答时间阶段,图2。
根据对各问题在不同平台的回答时间分布进行统计,可以看出每个问题回答的连续性和持续性。就图书馆参考咨询系统而言,其大部分回答都是在3天之内的回答,也没有后续的补充或回答,整个问题的生命周期在天左右。社会化问答平台中的第一代网络问答平台如百度知道和Yahoo Answers情况也大致相同。但是在社交问答平台上情况有所不同,知乎和Quora部分问题的回答大部分出现在4-15天及16-45天阶段,可见该问题受到持续关注,整个问题的生命周期得到延长,问题在长时间内被回答、讨论、交互,从而使得整体的回答质量得以进一步提高。
对实验结果的质量进行评判,根据有关文献对信息质量评价的研究,从以下几个方面对最佳答案进行主观性的质量评判,选出每个问题的最佳答案。标准为:内容(正确性、专业性、完整性、语言表达)、认知(可理解性、启发性、合理性)、效用(实用性、可用性)、信息源(职业性、外部链接)、社会情感(情感支持、态度、经验、认同、其他)
[25]。
平台名称 | 全国图书馆参考咨询联盟 | 百度知道 | Yahoo Answers | 知乎 | Quora |
事实性问题 | A1 | | | | | √ |
A2 | √ | | | | |
解释性问题 | B1 | | | | | √ |
B2 | | | | | √ |
偏好性问题 | C1 | | | | | √ |
C2 | √ | | | | |
评价性问题 | D1 | | | | √ | |
D2 | | | | √ | |
探索性问题 | E1 | | | | √ | |
E2 | | | | √ | |
总计 | 2 | 0 | 0 | 4 | 4 |
由表12可知,从回答的质量来看全国图书馆参考咨询联盟给出的事实性、解释性和偏好性答案较好,这与图书馆员自身使用专业技能查找文献或网络资源有关。以Quora和知乎为代表的社交问答平台的答案质量较高,尤其是知乎在主观性较强的评价性问题和探索性问题上的答案质量远超过其他平台。而Quora在解决生活经验类的偏好性问题解释性问题上也有较好表现。此外,在答案确定的事实性问题A1上,个平台的答案都不相同,只有Quora用户给出的答案时效性最强且附上了文献来源,可见对于答案确定的问题,其质量也会由于用户素质而有差别。总来说,图书馆数字化参考咨询服务给出的答案质量较为平均,但是对于开放性、生活化、主观性较强的问题回答质量稍有欠缺;而社会化问答平台对于主观性强、探索性的、综合性问题的解决能力较强。