You can not select more than 25 topics Topics must start with a chinese character,a letter or number, can include dashes ('-') and can be up to 35 characters long.

serder.go 6.7 kB

1 year ago
10 months ago
123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286
  1. package serder
  2. import (
  3. "bytes"
  4. "encoding/json"
  5. "fmt"
  6. "io"
  7. "reflect"
  8. "strings"
  9. jsoniter "github.com/json-iterator/go"
  10. "github.com/mitchellh/mapstructure"
  11. )
  12. var unionHandler = UnionHandler{
  13. internallyTagged: make(map[reflect.Type]*anyTypeUnionInternallyTagged),
  14. externallyTagged: make(map[reflect.Type]*anyTypeUnionExternallyTagged),
  15. }
  16. var defaultAPI = func() jsoniter.API {
  17. api := jsoniter.Config{
  18. EscapeHTML: true,
  19. }.Froze()
  20. api.RegisterExtension(&unionHandler)
  21. return api
  22. }()
  23. // 将对象转为JSON字符串。支持TypeUnion。
  24. func ObjectToJSONEx[T any](obj T) ([]byte, error) {
  25. buf := new(bytes.Buffer)
  26. enc := defaultAPI.NewEncoder(buf)
  27. // 这里使用&obj而直接不使用obj的原因是,Encode的形参类型为any,
  28. // 如果T是一个interface类型,将obj传递进去后,内部拿到的类型将会是obj的实际类型,
  29. // 使用&obj,那么内部拿到的将会是*T类型,通过一层一层解引用查找Encoder时,能找到T对应的TypeUnion
  30. err := enc.Encode(&obj)
  31. if err != nil {
  32. return nil, err
  33. }
  34. return buf.Bytes(), nil
  35. }
  36. // 将JSON字符串转为对象。支持TypeUnion。
  37. func JSONToObjectEx[T any](data []byte) (T, error) {
  38. var ret T
  39. dec := defaultAPI.NewDecoder(bytes.NewReader(data))
  40. err := dec.Decode(&ret)
  41. if err != nil {
  42. return ret, err
  43. }
  44. return ret, nil
  45. }
  46. // 将JSON字符串转为对象。支持TypeUnion。
  47. func JSONToObjectExRaw(data []byte, ret any) error {
  48. dec := defaultAPI.NewDecoder(bytes.NewReader(data))
  49. err := dec.Decode(&ret)
  50. if err != nil {
  51. return err
  52. }
  53. return nil
  54. }
  55. // 将JSON字符串转为对象。支持TypeUnion。
  56. //
  57. // 如果发现反序列化后的结果不对,但没有返回错误,可以考虑是JSON字符串有问题,
  58. // 尤其是在反序列化嵌套的TypeUnion时,如果内部的TypeUnion反序列化失败,错误是不会传递出来的(库的缺陷)
  59. func JSONToObjectStreamEx[T any](stream io.Reader) (T, error) {
  60. var ret T
  61. dec := defaultAPI.NewDecoder(stream)
  62. err := dec.Decode(&ret)
  63. if err != nil {
  64. return ret, err
  65. }
  66. return ret, nil
  67. }
  68. func JSONToObjectStreamExRaw(stream io.Reader, ret any) error {
  69. dec := defaultAPI.NewDecoder(stream)
  70. err := dec.Decode(ret)
  71. if err != nil {
  72. return err
  73. }
  74. return nil
  75. }
  76. // 将对象转为JSON字符串。如果需要支持解析TypeUnion类型,则使用"Ex"结尾的同名函数。
  77. //
  78. // 注:[]byte会被base64编码,如果要JSON内容要给外部解析,那么应该避免使用[]byte。
  79. func ObjectToJSON(obj any) ([]byte, error) {
  80. return json.Marshal(obj)
  81. }
  82. func ObjectToJSONString(obj any) string {
  83. marshal, err := json.Marshal(obj)
  84. if err != nil {
  85. return err.Error()
  86. }
  87. return string(marshal)
  88. }
  89. // 将对象转为JSON字符串。如果需要支持解析TypeUnion类型,则使用"Ex"结尾的同名函数。
  90. func ObjectToJSONStream(obj any) io.ReadCloser {
  91. pr, pw := io.Pipe()
  92. enc := json.NewEncoder(pw)
  93. go func() {
  94. err := enc.Encode(obj)
  95. if err != nil && err != io.EOF {
  96. pw.CloseWithError(err)
  97. } else {
  98. pw.Close()
  99. }
  100. }()
  101. return pr
  102. }
  103. // 将JSON字符串转为对象。如果需要支持解析TypeUnion类型,则使用"Ex"结尾的同名函数。
  104. func JSONToObject(data []byte, obj any) error {
  105. return json.Unmarshal(data, obj)
  106. }
  107. // 将JSON字符串转为对象。如果需要支持解析TypeUnion类型,则使用"Ex"结尾的同名函数。
  108. func JSONToObjectStream(str io.Reader, obj any) error {
  109. dec := json.NewDecoder(str)
  110. err := dec.Decode(obj)
  111. if err != io.EOF {
  112. return err
  113. }
  114. return nil
  115. }
  116. type TypeResolver interface {
  117. TypeToString(typ reflect.Type) (string, error)
  118. StringToType(typeStr string) (reflect.Type, error)
  119. }
  120. type MapToObjectOption struct {
  121. NoRegisteredUnionTypes bool // 是否不使用全局注册的UnionType
  122. }
  123. // TODO 使用这个函数来处理TypeUnion的地方都可以直接使用Ex系列的函数
  124. func MapToObject(m map[string]any, obj any, opt ...MapToObjectOption) error {
  125. var op MapToObjectOption
  126. if len(opt) > 0 {
  127. op = opt[0]
  128. }
  129. unionTypeMapping := make(map[reflect.Type]*anyTypeUnionInternallyTagged)
  130. if !op.NoRegisteredUnionTypes {
  131. for _, u := range unionHandler.internallyTagged {
  132. unionTypeMapping[u.Union.UnionType] = u
  133. }
  134. }
  135. convs := []Converter{
  136. func(from reflect.Value, to reflect.Value) (interface{}, error) {
  137. toType := to.Type()
  138. info, ok := unionTypeMapping[toType]
  139. if !ok {
  140. return from.Interface(), nil
  141. }
  142. mp := from.Interface().(map[string]any)
  143. tag, ok := mp[info.TagField]
  144. if !ok {
  145. return nil, fmt.Errorf("converting to %v: no tag field %s in map", toType, info.TagField)
  146. }
  147. tagStr, ok := tag.(string)
  148. if !ok {
  149. return nil, fmt.Errorf("converting to %v: tag field %s value is %v, which is not a string", toType, info.TagField, tag)
  150. }
  151. eleType, ok := info.TagToType[tagStr]
  152. if !ok {
  153. return nil, fmt.Errorf("converting to %v: unknow type tag %s", toType, tagStr)
  154. }
  155. to.Set(reflect.New(eleType).Elem())
  156. return from.Interface(), nil
  157. },
  158. }
  159. return AnyToAny(m, obj, AnyToAnyOption{
  160. Converters: convs,
  161. })
  162. }
  163. func ObjectToMap(obj any) (map[string]any, error) {
  164. mp := make(map[string]any)
  165. dec, err := mapstructure.NewDecoder(&mapstructure.DecoderConfig{
  166. TagName: "json",
  167. Result: &mp,
  168. })
  169. if err != nil {
  170. return nil, err
  171. }
  172. return mp, dec.Decode(obj)
  173. }
  174. // 1. 尝试解开所有引用
  175. //
  176. // 2. nil值将会是空字符串
  177. func ObjectToMapString(obj any) (map[string]string, error) {
  178. if obj == nil {
  179. return make(map[string]string), nil
  180. }
  181. v := reflect.ValueOf(obj)
  182. for v.Kind() == reflect.Ptr {
  183. v = v.Elem()
  184. }
  185. if !v.IsValid() {
  186. return make(map[string]string), nil
  187. }
  188. if v.Kind() != reflect.Struct {
  189. return nil, fmt.Errorf("type %v is not a struct", v.Type())
  190. }
  191. mp := make(map[string]string)
  192. objectToMapString(v, mp)
  193. return mp, nil
  194. }
  195. func objectToMapString(val reflect.Value, mp map[string]string) {
  196. typ := val.Type()
  197. for i := 0; i < val.NumField(); i++ {
  198. vf := val.Field(i)
  199. tf := typ.Field(i)
  200. if tf.Anonymous {
  201. objectToMapString(vf, mp)
  202. continue
  203. }
  204. fieldName := tf.Name
  205. omitEmpty := false
  206. jsonTag := tf.Tag.Get("json")
  207. if jsonTag != "" {
  208. tagParts := strings.Split(jsonTag, ",")
  209. fieldName = strings.TrimSpace(tagParts[0])
  210. if len(tagParts) > 1 {
  211. for _, tagPart := range tagParts[1:] {
  212. tagPart = strings.TrimSpace(tagPart)
  213. if tagPart == "omitempty" {
  214. omitEmpty = true
  215. }
  216. }
  217. }
  218. }
  219. for vf.Kind() == reflect.Ptr {
  220. vf = vf.Elem()
  221. }
  222. if !vf.IsValid() {
  223. if omitEmpty {
  224. continue
  225. }
  226. mp[fieldName] = ""
  227. continue
  228. }
  229. if vf.IsZero() && omitEmpty {
  230. continue
  231. }
  232. if vf.Kind() == reflect.Array {
  233. }
  234. mp[fieldName] = fmt.Sprintf("%v", vf)
  235. }
  236. }