约定借款用途的借款人不可以不按约定使用借款，借款人如果没有按照约定使用借款的，属于违约行为，需要承担相应的违约责任，出借人可以停止发放贷款、提前收回借款或者解除合同。
法律依据:
《民法典》第六百七十三条
借款人未按照约定的借款用途使用借款的，贷款人可以停止发放借款、提前收回借款或者解除合同。
第六百六十九条
订立借款合同，借款人应当按照贷款人的要求提供与借款有关的业务活动和财务状况的真实情况。
第六百七十二条
贷款人按照约定可以检查、监督借款的使用情况。借款人应当按照约定向贷款人定期提供有关财务会计报表或者其他资料。
