funcsAstValidator.go 11 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370
  1. package xsql
  2. import (
  3. "fmt"
  4. "github.com/emqx/kuiper/pkg/ast"
  5. "strings"
  6. )
  7. type AllowTypes struct {
  8. types []ast.Literal
  9. }
  10. func validateFuncs(funcName string, args []ast.Expr) error {
  11. lowerName := strings.ToLower(funcName)
  12. switch ast.FuncFinderSingleton().FuncType(lowerName) {
  13. case ast.NotFoundFunc:
  14. nf, _, err := parserFuncRuntime.Get(funcName)
  15. if err != nil {
  16. return fmt.Errorf("error getting function %s: %v", funcName, err)
  17. }
  18. var targs []interface{}
  19. for _, arg := range args {
  20. targs = append(targs, arg)
  21. }
  22. return nf.Validate(targs)
  23. case ast.AggFunc:
  24. return validateAggFunc(lowerName, args)
  25. case ast.MathFunc:
  26. return validateMathFunc(lowerName, args)
  27. case ast.ConvFunc:
  28. return validateConvFunc(lowerName, args)
  29. case ast.StrFunc:
  30. return validateStrFunc(lowerName, args)
  31. case ast.HashFunc:
  32. return validateHashFunc(lowerName, args)
  33. case ast.JsonFunc:
  34. return validateJsonFunc(lowerName, args)
  35. case ast.OtherFunc:
  36. return validateOtherFunc(lowerName, args)
  37. default:
  38. return fmt.Errorf("unkndow function %s", lowerName)
  39. }
  40. }
  41. func validateMathFunc(name string, args []ast.Expr) error {
  42. len := len(args)
  43. switch name {
  44. case "abs", "acos", "asin", "atan", "ceil", "cos", "cosh", "exp", "ln", "log", "round", "sign", "sin", "sinh",
  45. "sqrt", "tan", "tanh":
  46. if err := ast.ValidateLen(name, 1, len); err != nil {
  47. return err
  48. }
  49. if ast.IsStringArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  50. return ast.ProduceErrInfo(name, 0, "number - float or int")
  51. }
  52. case "bitand", "bitor", "bitxor":
  53. if err := ast.ValidateLen(name, 2, len); err != nil {
  54. return err
  55. }
  56. if ast.IsFloatArg(args[0]) || ast.IsStringArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  57. return ast.ProduceErrInfo(name, 0, "int")
  58. }
  59. if ast.IsFloatArg(args[1]) || ast.IsStringArg(args[1]) || ast.IsTimeArg(args[1]) || ast.IsBooleanArg(args[1]) {
  60. return ast.ProduceErrInfo(name, 1, "int")
  61. }
  62. case "bitnot":
  63. if err := ast.ValidateLen(name, 1, len); err != nil {
  64. return err
  65. }
  66. if ast.IsFloatArg(args[0]) || ast.IsStringArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  67. return ast.ProduceErrInfo(name, 0, "int")
  68. }
  69. case "atan2", "mod", "power":
  70. if err := ast.ValidateLen(name, 2, len); err != nil {
  71. return err
  72. }
  73. if ast.IsStringArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  74. return ast.ProduceErrInfo(name, 0, "number - float or int")
  75. }
  76. if ast.IsStringArg(args[1]) || ast.IsTimeArg(args[1]) || ast.IsBooleanArg(args[1]) {
  77. return ast.ProduceErrInfo(name, 1, "number - float or int")
  78. }
  79. case "rand":
  80. if err := ast.ValidateLen(name, 0, len); err != nil {
  81. return err
  82. }
  83. }
  84. return nil
  85. }
  86. func validateStrFunc(name string, args []ast.Expr) error {
  87. len := len(args)
  88. switch name {
  89. case "concat":
  90. if len == 0 {
  91. return fmt.Errorf("The arguments for %s should be at least one.\n", name)
  92. }
  93. for i, a := range args {
  94. if ast.IsNumericArg(a) || ast.IsTimeArg(a) || ast.IsBooleanArg(a) {
  95. return ast.ProduceErrInfo(name, i, "string")
  96. }
  97. }
  98. case "endswith", "indexof", "regexp_matches", "startswith":
  99. if err := ast.ValidateLen(name, 2, len); err != nil {
  100. return err
  101. }
  102. for i := 0; i < 2; i++ {
  103. if ast.IsNumericArg(args[i]) || ast.IsTimeArg(args[i]) || ast.IsBooleanArg(args[i]) {
  104. return ast.ProduceErrInfo(name, i, "string")
  105. }
  106. }
  107. case "format_time":
  108. if err := ast.ValidateLen(name, 2, len); err != nil {
  109. return err
  110. }
  111. if ast.IsNumericArg(args[0]) || ast.IsStringArg(args[0]) || ast.IsBooleanArg(args[0]) {
  112. return ast.ProduceErrInfo(name, 0, "datetime")
  113. }
  114. if ast.IsNumericArg(args[1]) || ast.IsTimeArg(args[1]) || ast.IsBooleanArg(args[1]) {
  115. return ast.ProduceErrInfo(name, 1, "string")
  116. }
  117. case "regexp_replace":
  118. if err := ast.ValidateLen(name, 3, len); err != nil {
  119. return err
  120. }
  121. for i := 0; i < 3; i++ {
  122. if ast.IsNumericArg(args[i]) || ast.IsTimeArg(args[i]) || ast.IsBooleanArg(args[i]) {
  123. return ast.ProduceErrInfo(name, i, "string")
  124. }
  125. }
  126. case "length", "lower", "ltrim", "numbytes", "rtrim", "trim", "upper":
  127. if err := ast.ValidateLen(name, 1, len); err != nil {
  128. return err
  129. }
  130. if ast.IsNumericArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  131. return ast.ProduceErrInfo(name, 0, "string")
  132. }
  133. case "lpad", "rpad":
  134. if err := ast.ValidateLen(name, 2, len); err != nil {
  135. return err
  136. }
  137. if ast.IsNumericArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  138. return ast.ProduceErrInfo(name, 0, "string")
  139. }
  140. if ast.IsFloatArg(args[1]) || ast.IsTimeArg(args[1]) || ast.IsBooleanArg(args[1]) || ast.IsStringArg(args[1]) {
  141. return ast.ProduceErrInfo(name, 1, "int")
  142. }
  143. case "substring":
  144. if len != 2 && len != 3 {
  145. return fmt.Errorf("the arguments for substring should be 2 or 3")
  146. }
  147. if ast.IsNumericArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  148. return ast.ProduceErrInfo(name, 0, "string")
  149. }
  150. for i := 1; i < len; i++ {
  151. if ast.IsFloatArg(args[i]) || ast.IsTimeArg(args[i]) || ast.IsBooleanArg(args[i]) || ast.IsStringArg(args[i]) {
  152. return ast.ProduceErrInfo(name, i, "int")
  153. }
  154. }
  155. if s, ok := args[1].(*ast.IntegerLiteral); ok {
  156. sv := s.Val
  157. if sv < 0 {
  158. return fmt.Errorf("The start index should not be a nagtive integer.")
  159. }
  160. if len == 3 {
  161. if e, ok1 := args[2].(*ast.IntegerLiteral); ok1 {
  162. ev := e.Val
  163. if ev < sv {
  164. return fmt.Errorf("The end index should be larger than start index.")
  165. }
  166. }
  167. }
  168. }
  169. case "split_value":
  170. if len != 3 {
  171. return fmt.Errorf("the arguments for split_value should be 3")
  172. }
  173. if ast.IsNumericArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  174. return ast.ProduceErrInfo(name, 0, "string")
  175. }
  176. if ast.IsNumericArg(args[1]) || ast.IsTimeArg(args[1]) || ast.IsBooleanArg(args[1]) {
  177. return ast.ProduceErrInfo(name, 1, "string")
  178. }
  179. if ast.IsFloatArg(args[2]) || ast.IsTimeArg(args[2]) || ast.IsBooleanArg(args[2]) || ast.IsStringArg(args[2]) {
  180. return ast.ProduceErrInfo(name, 2, "int")
  181. }
  182. if s, ok := args[2].(*ast.IntegerLiteral); ok {
  183. if s.Val < 0 {
  184. return fmt.Errorf("The index should not be a nagtive integer.")
  185. }
  186. }
  187. }
  188. return nil
  189. }
  190. func validateConvFunc(name string, args []ast.Expr) error {
  191. len := len(args)
  192. switch name {
  193. case "cast":
  194. if err := ast.ValidateLen(name, 2, len); err != nil {
  195. return err
  196. }
  197. a := args[1]
  198. if !ast.IsStringArg(a) {
  199. return ast.ProduceErrInfo(name, 1, "string")
  200. }
  201. if av, ok := a.(*ast.StringLiteral); ok {
  202. if !(av.Val == "bigint" || av.Val == "float" || av.Val == "string" || av.Val == "boolean" || av.Val == "datetime") {
  203. return fmt.Errorf("Expect one of following value for the 2nd parameter: bigint, float, string, boolean, datetime.")
  204. }
  205. }
  206. case "chr":
  207. if err := ast.ValidateLen(name, 1, len); err != nil {
  208. return err
  209. }
  210. if ast.IsFloatArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  211. return ast.ProduceErrInfo(name, 0, "int")
  212. }
  213. case "encode":
  214. if err := ast.ValidateLen(name, 2, len); err != nil {
  215. return err
  216. }
  217. if ast.IsNumericArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  218. return ast.ProduceErrInfo(name, 0, "string")
  219. }
  220. a := args[1]
  221. if !ast.IsStringArg(a) {
  222. return ast.ProduceErrInfo(name, 1, "string")
  223. }
  224. if av, ok := a.(*ast.StringLiteral); ok {
  225. if av.Val != "base64" {
  226. return fmt.Errorf("Only base64 is supported for the 2nd parameter.")
  227. }
  228. }
  229. case "trunc":
  230. if err := ast.ValidateLen(name, 2, len); err != nil {
  231. return err
  232. }
  233. if ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) || ast.IsStringArg(args[0]) {
  234. return ast.ProduceErrInfo(name, 0, "number - float or int")
  235. }
  236. if ast.IsFloatArg(args[1]) || ast.IsTimeArg(args[1]) || ast.IsBooleanArg(args[1]) || ast.IsStringArg(args[1]) {
  237. return ast.ProduceErrInfo(name, 1, "int")
  238. }
  239. }
  240. return nil
  241. }
  242. func validateHashFunc(name string, args []ast.Expr) error {
  243. len := len(args)
  244. switch name {
  245. case "md5", "sha1", "sha224", "sha256", "sha384", "sha512":
  246. if err := ast.ValidateLen(name, 1, len); err != nil {
  247. return err
  248. }
  249. if ast.IsNumericArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  250. return ast.ProduceErrInfo(name, 0, "string")
  251. }
  252. }
  253. return nil
  254. }
  255. func validateOtherFunc(name string, args []ast.Expr) error {
  256. len := len(args)
  257. switch name {
  258. case "isNull":
  259. if err := ast.ValidateLen(name, 1, len); err != nil {
  260. return err
  261. }
  262. case "cardinality":
  263. if err := ast.ValidateLen(name, 1, len); err != nil {
  264. return err
  265. }
  266. case "nanvl":
  267. if err := ast.ValidateLen(name, 2, len); err != nil {
  268. return err
  269. }
  270. if ast.IsIntegerArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) || ast.IsStringArg(args[0]) {
  271. return ast.ProduceErrInfo(name, 1, "float")
  272. }
  273. case "newuuid":
  274. if err := ast.ValidateLen(name, 0, len); err != nil {
  275. return err
  276. }
  277. case "mqtt":
  278. if err := ast.ValidateLen(name, 1, len); err != nil {
  279. return err
  280. }
  281. if ast.IsIntegerArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) || ast.IsStringArg(args[0]) || ast.IsFloatArg(args[0]) {
  282. return ast.ProduceErrInfo(name, 0, "meta reference")
  283. }
  284. if p, ok := args[0].(*ast.MetaRef); ok {
  285. name := strings.ToLower(p.Name)
  286. if name != "topic" && name != "messageid" {
  287. return fmt.Errorf("Parameter of mqtt function can be only topic or messageid.")
  288. }
  289. }
  290. case "meta":
  291. if err := ast.ValidateLen(name, 1, len); err != nil {
  292. return err
  293. }
  294. if _, ok := args[0].(*ast.MetaRef); ok {
  295. return nil
  296. }
  297. expr := args[0]
  298. for {
  299. if be, ok := expr.(*ast.BinaryExpr); ok {
  300. if _, ok := be.LHS.(*ast.MetaRef); ok && be.OP == ast.ARROW {
  301. return nil
  302. }
  303. expr = be.LHS
  304. } else {
  305. break
  306. }
  307. }
  308. return ast.ProduceErrInfo(name, 0, "meta reference")
  309. }
  310. return nil
  311. }
  312. func validateJsonFunc(name string, args []ast.Expr) error {
  313. len := len(args)
  314. if err := ast.ValidateLen(name, 2, len); err != nil {
  315. return err
  316. }
  317. if !ast.IsStringArg(args[1]) {
  318. return ast.ProduceErrInfo(name, 1, "string")
  319. }
  320. return nil
  321. }
  322. func validateAggFunc(name string, args []ast.Expr) error {
  323. len := len(args)
  324. switch name {
  325. case "avg", "max", "min", "sum":
  326. if err := ast.ValidateLen(name, 1, len); err != nil {
  327. return err
  328. }
  329. if ast.IsStringArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  330. return ast.ProduceErrInfo(name, 0, "number - float or int")
  331. }
  332. case "count":
  333. if err := ast.ValidateLen(name, 1, len); err != nil {
  334. return err
  335. }
  336. case "collect":
  337. if err := ast.ValidateLen(name, 1, len); err != nil {
  338. return err
  339. }
  340. case "deduplicate":
  341. if err := ast.ValidateLen(name, 2, len); err != nil {
  342. return err
  343. }
  344. if !ast.IsBooleanArg(args[1]) {
  345. return ast.ProduceErrInfo(name, 1, "bool")
  346. }
  347. }
  348. return nil
  349. }