只有孩子不能被认定为男人的犯罪。重婚罪要求该男子以夫妻的名义与第三人长期同居。为了追究该男子的重婚责任,需要提供证据证明该男子和其母亲以夫妻的名义生活的邻居证词。
《刑法》第二百五十八条有配偶而重婚的,或者明知他人有配偶而与之结婚的,处二年以下有期徒刑或者拘役。