Default evaluation uses 'valid' datatype
@@ -24,6 +24,7 @@ def main():
parser = ParlaiParser(True, True)
parser.add_argument('-n', '--num-examples', default=100000000)
parser.add_argument('-d', '--display-examples', type='bool', default=False)
+ parser.set_defaults(datatype='valid')
opt = parser.parse_args()
# Create model and assign it to the specified task
agent = create_agent(opt)
