(s,a,s1,s2) 0:(1,0,0,0) 1:(1,0,0,1) 2:(1,0,1,0) 3:(1,0,1,1) 4:(1,1,1,0) 5:(1,1,1,1) 6:(2,0,0,0) 7:(2,0,0,1) 8:(2,0,1,0) 9:(2,0,1,1) 10:(2,1,0,1) 11:(2,1,1,1)