人工答疑APP测评:准确率哪家强?
2014年,各类答疑软件兴起,无非分为三种形式:一是拍照答疑(机器识别),二是人工答疑,三是机器与人工混合答疑。此前,多知网对拍照答疑软件进行了评测。
本次,选择了三款人工答疑软件进行评测,分别是作业帮、作业神器、爱考拉。
人工答疑测评方式为:在同一时间,选择同样题目的情况下,比较三款软件的答疑时间和答疑准确率。
评测对象:
评测环境:
在上述环境下,多知网选择了20道题目,包括选择题,填空题,综合题。在同一时间,相同的题目,评测三款软件的答疑时间和答疑准确率。
在测评过程中,爱考拉出现突发状况。此次测评,原本定于12月18日开始,12月19日结束。爱考拉在12月18日晚上22点左右无法正常运行,持续时间为2天。为了达到同时测试三款软件的目的,测评不得不推迟进行。如下图:
为了避免因为网络问题导致软件无法正常运行,多知网随后关掉WiFi后,打开个人网络,爱考拉仍然不能够正常运转。
在测评期间,三款软件都发布了最新的升级版本。但是,升级后的爱考拉还是出现了软件无法正常运转的情况。相比于前次的2天时间,更新版本后的爱考拉无法正常运转时间大大缩短,第二天早上打开软件时已经可以正常运转了。
因为评测期间各款软件都进行了升级。因此,12月18日的测试结果是三款软件上一个版本的结果。12月29日的测试结果是三款软件更新版本的测试结果。
12月18日的测评题目为2012—2013学年度第二学期期末初二年级数学练习题,12月29日的测评题目为衡水中学2014年高考压轴卷二数学试卷(理)。
在此次测评中,多知网将准确率定义为选择题、填空题有正确的答案,综合题有解题过程和正确的最终结果。通过对此次20道题目的测评,爱考拉准确率最高,作业帮准确率最低。
作业帮—55%
在20道的测试题目中,作业帮回答13道题,7道无人回答。回答的13道题目中,11道答案准确,2道错误,准确率为55%。
作业神器—65%
作业神器回答了20道题目中的17道题,其中13道答案准确,2道提供解题思路,没有最终答案;1道答案不完整;1道答非所问。准确率为65%。注:解题思路只有一句话,对于解题无实际帮助,算作错误。
爱考拉—80%
爱考拉回答了20道题目中的19道题,16道准确,2道答非所问,1道回答错误。准确率为80%。但是,爱考拉的软件稳定性相对在三款软件中最差,这一点为爱考拉降分不少。
上图依次为作业帮、爱考拉、作业神器对部分选择题的答题情况。
上图依次为作业帮、爱考拉、作业神器对部分填空题的回答情况。
上图依次为作业帮、爱考拉、作业神器对部分综合题的回答情况。
以下为各款软件具体的答疑时间如下表:
此外,作业帮题目提交成功后,会出现如下界面,显示计时为13:54。此外,作业帮有免费提问的次数限制。多知网的测试版本,免费的提问次数为10次。隔1天后,可以再次提问。
在作业神器上,问题提交后,下一道题的提交需要间隔30-40秒。否则,会出现如下场景。如果题目在12个小时内无人认领,将会自动关闭。