funcs_ast_validator.go 11 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374
  1. // Copyright 2021 EMQ Technologies Co., Ltd.
  2. //
  3. // Licensed under the Apache License, Version 2.0 (the "License");
  4. // you may not use this file except in compliance with the License.
  5. // You may obtain a copy of the License at
  6. //
  7. // http://www.apache.org/licenses/LICENSE-2.0
  8. //
  9. // Unless required by applicable law or agreed to in writing, software
  10. // distributed under the License is distributed on an "AS IS" BASIS,
  11. // WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  12. // See the License for the specific language governing permissions and
  13. // limitations under the License.
  14. package function
  15. import (
  16. "fmt"
  17. "github.com/lf-edge/ekuiper/pkg/ast"
  18. "strings"
  19. )
  20. type AllowTypes struct {
  21. types []ast.Literal
  22. }
  23. func validateFuncs(funcName string, args []ast.Expr) error {
  24. switch getFuncType(funcName) {
  25. case AggFunc:
  26. return validateAggFunc(funcName, args)
  27. case MathFunc:
  28. return validateMathFunc(funcName, args)
  29. case ConvFunc:
  30. return validateConvFunc(funcName, args)
  31. case StrFunc:
  32. return validateStrFunc(funcName, args)
  33. case HashFunc:
  34. return validateHashFunc(funcName, args)
  35. case JsonFunc:
  36. return validateJsonFunc(funcName, args)
  37. case OtherFunc:
  38. return validateOtherFunc(funcName, args)
  39. default:
  40. // should not happen
  41. return fmt.Errorf("unkndow function %s", funcName)
  42. }
  43. }
  44. func validateMathFunc(name string, args []ast.Expr) error {
  45. l := len(args)
  46. switch name {
  47. case "abs", "acos", "asin", "atan", "ceil", "cos", "cosh", "exp", "ln", "log", "round", "sign", "sin", "sinh",
  48. "sqrt", "tan", "tanh":
  49. if err := ast.ValidateLen(name, 1, l); err != nil {
  50. return err
  51. }
  52. if ast.IsStringArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  53. return ast.ProduceErrInfo(name, 0, "number - float or int")
  54. }
  55. case "bitand", "bitor", "bitxor":
  56. if err := ast.ValidateLen(name, 2, l); err != nil {
  57. return err
  58. }
  59. if ast.IsFloatArg(args[0]) || ast.IsStringArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  60. return ast.ProduceErrInfo(name, 0, "int")
  61. }
  62. if ast.IsFloatArg(args[1]) || ast.IsStringArg(args[1]) || ast.IsTimeArg(args[1]) || ast.IsBooleanArg(args[1]) {
  63. return ast.ProduceErrInfo(name, 1, "int")
  64. }
  65. case "bitnot":
  66. if err := ast.ValidateLen(name, 1, l); err != nil {
  67. return err
  68. }
  69. if ast.IsFloatArg(args[0]) || ast.IsStringArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  70. return ast.ProduceErrInfo(name, 0, "int")
  71. }
  72. case "atan2", "mod", "power":
  73. if err := ast.ValidateLen(name, 2, l); err != nil {
  74. return err
  75. }
  76. if ast.IsStringArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  77. return ast.ProduceErrInfo(name, 0, "number - float or int")
  78. }
  79. if ast.IsStringArg(args[1]) || ast.IsTimeArg(args[1]) || ast.IsBooleanArg(args[1]) {
  80. return ast.ProduceErrInfo(name, 1, "number - float or int")
  81. }
  82. case "rand":
  83. if err := ast.ValidateLen(name, 0, l); err != nil {
  84. return err
  85. }
  86. }
  87. return nil
  88. }
  89. func validateStrFunc(name string, args []ast.Expr) error {
  90. l := len(args)
  91. switch name {
  92. case "concat":
  93. if l == 0 {
  94. return fmt.Errorf("The arguments for %s should be at least one.\n", name)
  95. }
  96. for i, a := range args {
  97. if ast.IsNumericArg(a) || ast.IsTimeArg(a) || ast.IsBooleanArg(a) {
  98. return ast.ProduceErrInfo(name, i, "string")
  99. }
  100. }
  101. case "endswith", "indexof", "regexp_matches", "startswith":
  102. if err := ast.ValidateLen(name, 2, l); err != nil {
  103. return err
  104. }
  105. for i := 0; i < 2; i++ {
  106. if ast.IsNumericArg(args[i]) || ast.IsTimeArg(args[i]) || ast.IsBooleanArg(args[i]) {
  107. return ast.ProduceErrInfo(name, i, "string")
  108. }
  109. }
  110. case "format_time":
  111. if err := ast.ValidateLen(name, 2, l); err != nil {
  112. return err
  113. }
  114. if ast.IsNumericArg(args[0]) || ast.IsStringArg(args[0]) || ast.IsBooleanArg(args[0]) {
  115. return ast.ProduceErrInfo(name, 0, "datetime")
  116. }
  117. if ast.IsNumericArg(args[1]) || ast.IsTimeArg(args[1]) || ast.IsBooleanArg(args[1]) {
  118. return ast.ProduceErrInfo(name, 1, "string")
  119. }
  120. case "regexp_replace":
  121. if err := ast.ValidateLen(name, 3, l); err != nil {
  122. return err
  123. }
  124. for i := 0; i < 3; i++ {
  125. if ast.IsNumericArg(args[i]) || ast.IsTimeArg(args[i]) || ast.IsBooleanArg(args[i]) {
  126. return ast.ProduceErrInfo(name, i, "string")
  127. }
  128. }
  129. case "length", "lower", "ltrim", "numbytes", "rtrim", "trim", "upper":
  130. if err := ast.ValidateLen(name, 1, l); err != nil {
  131. return err
  132. }
  133. if ast.IsNumericArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  134. return ast.ProduceErrInfo(name, 0, "string")
  135. }
  136. case "lpad", "rpad":
  137. if err := ast.ValidateLen(name, 2, l); err != nil {
  138. return err
  139. }
  140. if ast.IsNumericArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  141. return ast.ProduceErrInfo(name, 0, "string")
  142. }
  143. if ast.IsFloatArg(args[1]) || ast.IsTimeArg(args[1]) || ast.IsBooleanArg(args[1]) || ast.IsStringArg(args[1]) {
  144. return ast.ProduceErrInfo(name, 1, "int")
  145. }
  146. case "substring":
  147. if l != 2 && l != 3 {
  148. return fmt.Errorf("the arguments for substring should be 2 or 3")
  149. }
  150. if ast.IsNumericArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  151. return ast.ProduceErrInfo(name, 0, "string")
  152. }
  153. for i := 1; i < l; i++ {
  154. if ast.IsFloatArg(args[i]) || ast.IsTimeArg(args[i]) || ast.IsBooleanArg(args[i]) || ast.IsStringArg(args[i]) {
  155. return ast.ProduceErrInfo(name, i, "int")
  156. }
  157. }
  158. if s, ok := args[1].(*ast.IntegerLiteral); ok {
  159. sv := s.Val
  160. if sv < 0 {
  161. return fmt.Errorf("The start index should not be a nagtive integer.")
  162. }
  163. if l == 3 {
  164. if e, ok1 := args[2].(*ast.IntegerLiteral); ok1 {
  165. ev := e.Val
  166. if ev < sv {
  167. return fmt.Errorf("The end index should be larger than start index.")
  168. }
  169. }
  170. }
  171. }
  172. case "split_value":
  173. if l != 3 {
  174. return fmt.Errorf("the arguments for split_value should be 3")
  175. }
  176. if ast.IsNumericArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  177. return ast.ProduceErrInfo(name, 0, "string")
  178. }
  179. if ast.IsNumericArg(args[1]) || ast.IsTimeArg(args[1]) || ast.IsBooleanArg(args[1]) {
  180. return ast.ProduceErrInfo(name, 1, "string")
  181. }
  182. if ast.IsFloatArg(args[2]) || ast.IsTimeArg(args[2]) || ast.IsBooleanArg(args[2]) || ast.IsStringArg(args[2]) {
  183. return ast.ProduceErrInfo(name, 2, "int")
  184. }
  185. if s, ok := args[2].(*ast.IntegerLiteral); ok {
  186. if s.Val < 0 {
  187. return fmt.Errorf("The index should not be a nagtive integer.")
  188. }
  189. }
  190. }
  191. return nil
  192. }
  193. func validateConvFunc(name string, args []ast.Expr) error {
  194. l := len(args)
  195. switch name {
  196. case "cast":
  197. if err := ast.ValidateLen(name, 2, l); err != nil {
  198. return err
  199. }
  200. a := args[1]
  201. if !ast.IsStringArg(a) {
  202. return ast.ProduceErrInfo(name, 1, "string")
  203. }
  204. if av, ok := a.(*ast.StringLiteral); ok {
  205. if !(av.Val == "bigint" || av.Val == "float" || av.Val == "string" || av.Val == "boolean" || av.Val == "datetime") {
  206. return fmt.Errorf("Expect one of following value for the 2nd parameter: bigint, float, string, boolean, datetime.")
  207. }
  208. }
  209. case "chr":
  210. if err := ast.ValidateLen(name, 1, l); err != nil {
  211. return err
  212. }
  213. if ast.IsFloatArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  214. return ast.ProduceErrInfo(name, 0, "int")
  215. }
  216. case "encode":
  217. if err := ast.ValidateLen(name, 2, l); err != nil {
  218. return err
  219. }
  220. if ast.IsNumericArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  221. return ast.ProduceErrInfo(name, 0, "string")
  222. }
  223. a := args[1]
  224. if !ast.IsStringArg(a) {
  225. return ast.ProduceErrInfo(name, 1, "string")
  226. }
  227. if av, ok := a.(*ast.StringLiteral); ok {
  228. if av.Val != "base64" {
  229. return fmt.Errorf("Only base64 is supported for the 2nd parameter.")
  230. }
  231. }
  232. case "trunc":
  233. if err := ast.ValidateLen(name, 2, l); err != nil {
  234. return err
  235. }
  236. if ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) || ast.IsStringArg(args[0]) {
  237. return ast.ProduceErrInfo(name, 0, "number - float or int")
  238. }
  239. if ast.IsFloatArg(args[1]) || ast.IsTimeArg(args[1]) || ast.IsBooleanArg(args[1]) || ast.IsStringArg(args[1]) {
  240. return ast.ProduceErrInfo(name, 1, "int")
  241. }
  242. }
  243. return nil
  244. }
  245. func validateHashFunc(name string, args []ast.Expr) error {
  246. l := len(args)
  247. switch name {
  248. case "md5", "sha1", "sha224", "sha256", "sha384", "sha512":
  249. if err := ast.ValidateLen(name, 1, l); err != nil {
  250. return err
  251. }
  252. if ast.IsNumericArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  253. return ast.ProduceErrInfo(name, 0, "string")
  254. }
  255. }
  256. return nil
  257. }
  258. func validateOtherFunc(name string, args []ast.Expr) error {
  259. l := len(args)
  260. switch name {
  261. case "isNull":
  262. if err := ast.ValidateLen(name, 1, l); err != nil {
  263. return err
  264. }
  265. case "cardinality":
  266. if err := ast.ValidateLen(name, 1, l); err != nil {
  267. return err
  268. }
  269. case "nanvl":
  270. if err := ast.ValidateLen(name, 2, l); err != nil {
  271. return err
  272. }
  273. if ast.IsIntegerArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) || ast.IsStringArg(args[0]) {
  274. return ast.ProduceErrInfo(name, 1, "float")
  275. }
  276. case "newuuid":
  277. if err := ast.ValidateLen(name, 0, l); err != nil {
  278. return err
  279. }
  280. case "mqtt":
  281. if err := ast.ValidateLen(name, 1, l); err != nil {
  282. return err
  283. }
  284. if ast.IsIntegerArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) || ast.IsStringArg(args[0]) || ast.IsFloatArg(args[0]) {
  285. return ast.ProduceErrInfo(name, 0, "meta reference")
  286. }
  287. if p, ok := args[0].(*ast.MetaRef); ok {
  288. name := strings.ToLower(p.Name)
  289. if name != "topic" && name != "messageid" {
  290. return fmt.Errorf("Parameter of mqtt function can be only topic or messageid.")
  291. }
  292. }
  293. case "meta":
  294. if err := ast.ValidateLen(name, 1, l); err != nil {
  295. return err
  296. }
  297. if _, ok := args[0].(*ast.MetaRef); ok {
  298. return nil
  299. }
  300. expr := args[0]
  301. for {
  302. if be, ok := expr.(*ast.BinaryExpr); ok {
  303. if _, ok := be.LHS.(*ast.MetaRef); ok && be.OP == ast.ARROW {
  304. return nil
  305. }
  306. expr = be.LHS
  307. } else {
  308. break
  309. }
  310. }
  311. return ast.ProduceErrInfo(name, 0, "meta reference")
  312. }
  313. return nil
  314. }
  315. func validateJsonFunc(name string, args []ast.Expr) error {
  316. l := len(args)
  317. if err := ast.ValidateLen(name, 2, l); err != nil {
  318. return err
  319. }
  320. if !ast.IsStringArg(args[1]) {
  321. return ast.ProduceErrInfo(name, 1, "string")
  322. }
  323. return nil
  324. }
  325. func validateAggFunc(name string, args []ast.Expr) error {
  326. l := len(args)
  327. switch name {
  328. case "avg", "max", "min", "sum":
  329. if err := ast.ValidateLen(name, 1, l); err != nil {
  330. return err
  331. }
  332. if ast.IsStringArg(args[0]) || ast.IsTimeArg(args[0]) || ast.IsBooleanArg(args[0]) {
  333. return ast.ProduceErrInfo(name, 0, "number - float or int")
  334. }
  335. case "count":
  336. if err := ast.ValidateLen(name, 1, l); err != nil {
  337. return err
  338. }
  339. case "collect":
  340. if err := ast.ValidateLen(name, 1, l); err != nil {
  341. return err
  342. }
  343. case "deduplicate":
  344. if err := ast.ValidateLen(name, 2, l); err != nil {
  345. return err
  346. }
  347. if !ast.IsBooleanArg(args[1]) {
  348. return ast.ProduceErrInfo(name, 1, "bool")
  349. }
  350. }
  351. return nil
  352. }