You can not select more than 25 topics Topics must start with a chinese character,a letter or number, can include dashes ('-') and can be up to 35 characters long.

serder.go 6.6 kB

1 year ago
10 months ago
123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278
  1. package serder
  2. import (
  3. "bytes"
  4. "encoding/json"
  5. "fmt"
  6. "io"
  7. "reflect"
  8. "strings"
  9. jsoniter "github.com/json-iterator/go"
  10. "github.com/mitchellh/mapstructure"
  11. )
  12. var unionHandler = UnionHandler{
  13. internallyTagged: make(map[reflect.Type]*anyTypeUnionInternallyTagged),
  14. externallyTagged: make(map[reflect.Type]*anyTypeUnionExternallyTagged),
  15. }
  16. var defaultAPI = func() jsoniter.API {
  17. api := jsoniter.Config{
  18. EscapeHTML: true,
  19. }.Froze()
  20. api.RegisterExtension(&unionHandler)
  21. return api
  22. }()
  23. // 将对象转为JSON字符串。支持TypeUnion。
  24. func ObjectToJSONEx[T any](obj T) ([]byte, error) {
  25. buf := new(bytes.Buffer)
  26. enc := defaultAPI.NewEncoder(buf)
  27. // 这里使用&obj而直接不使用obj的原因是,Encode的形参类型为any,
  28. // 如果T是一个interface类型,将obj传递进去后,内部拿到的类型将会是obj的实际类型,
  29. // 使用&obj,那么内部拿到的将会是*T类型,通过一层一层解引用查找Encoder时,能找到T对应的TypeUnion
  30. err := enc.Encode(&obj)
  31. if err != nil {
  32. return nil, err
  33. }
  34. return buf.Bytes(), nil
  35. }
  36. // 将JSON字符串转为对象。支持TypeUnion。
  37. func JSONToObjectEx[T any](data []byte) (T, error) {
  38. var ret T
  39. dec := defaultAPI.NewDecoder(bytes.NewReader(data))
  40. err := dec.Decode(&ret)
  41. if err != nil {
  42. return ret, err
  43. }
  44. return ret, nil
  45. }
  46. // 将JSON字符串转为对象。支持TypeUnion。
  47. func JSONToObjectExRaw(data []byte, ret any) error {
  48. dec := defaultAPI.NewDecoder(bytes.NewReader(data))
  49. err := dec.Decode(&ret)
  50. if err != nil {
  51. return err
  52. }
  53. return nil
  54. }
  55. // 将JSON字符串转为对象。支持TypeUnion。
  56. //
  57. // 如果发现反序列化后的结果不对,但没有返回错误,可以考虑是JSON字符串有问题,
  58. // 尤其是在反序列化嵌套的TypeUnion时,如果内部的TypeUnion反序列化失败,错误是不会传递出来的(库的缺陷)
  59. func JSONToObjectStreamEx[T any](stream io.Reader) (T, error) {
  60. var ret T
  61. dec := defaultAPI.NewDecoder(stream)
  62. err := dec.Decode(&ret)
  63. if err != nil {
  64. return ret, err
  65. }
  66. return ret, nil
  67. }
  68. func JSONToObjectStreamExRaw(stream io.Reader, ret any) error {
  69. dec := defaultAPI.NewDecoder(stream)
  70. err := dec.Decode(ret)
  71. if err != nil {
  72. return err
  73. }
  74. return nil
  75. }
  76. // 将对象转为JSON字符串。如果需要支持解析TypeUnion类型,则使用"Ex"结尾的同名函数。
  77. //
  78. // 注:[]byte会被base64编码,如果要JSON内容要给外部解析,那么应该避免使用[]byte。
  79. func ObjectToJSON(obj any) ([]byte, error) {
  80. return json.Marshal(obj)
  81. }
  82. // 将对象转为JSON字符串。如果需要支持解析TypeUnion类型,则使用"Ex"结尾的同名函数。
  83. func ObjectToJSONStream(obj any) io.ReadCloser {
  84. pr, pw := io.Pipe()
  85. enc := json.NewEncoder(pw)
  86. go func() {
  87. err := enc.Encode(obj)
  88. if err != nil && err != io.EOF {
  89. pw.CloseWithError(err)
  90. } else {
  91. pw.Close()
  92. }
  93. }()
  94. return pr
  95. }
  96. // 将JSON字符串转为对象。如果需要支持解析TypeUnion类型,则使用"Ex"结尾的同名函数。
  97. func JSONToObject(data []byte, obj any) error {
  98. return json.Unmarshal(data, obj)
  99. }
  100. // 将JSON字符串转为对象。如果需要支持解析TypeUnion类型,则使用"Ex"结尾的同名函数。
  101. func JSONToObjectStream(str io.Reader, obj any) error {
  102. dec := json.NewDecoder(str)
  103. err := dec.Decode(obj)
  104. if err != io.EOF {
  105. return err
  106. }
  107. return nil
  108. }
  109. type TypeResolver interface {
  110. TypeToString(typ reflect.Type) (string, error)
  111. StringToType(typeStr string) (reflect.Type, error)
  112. }
  113. type MapToObjectOption struct {
  114. NoRegisteredUnionTypes bool // 是否不使用全局注册的UnionType
  115. }
  116. // TODO 使用这个函数来处理TypeUnion的地方都可以直接使用Ex系列的函数
  117. func MapToObject(m map[string]any, obj any, opt ...MapToObjectOption) error {
  118. var op MapToObjectOption
  119. if len(opt) > 0 {
  120. op = opt[0]
  121. }
  122. unionTypeMapping := make(map[reflect.Type]*anyTypeUnionInternallyTagged)
  123. if !op.NoRegisteredUnionTypes {
  124. for _, u := range unionHandler.internallyTagged {
  125. unionTypeMapping[u.Union.UnionType] = u
  126. }
  127. }
  128. convs := []Converter{
  129. func(from reflect.Value, to reflect.Value) (interface{}, error) {
  130. toType := to.Type()
  131. info, ok := unionTypeMapping[toType]
  132. if !ok {
  133. return from.Interface(), nil
  134. }
  135. mp := from.Interface().(map[string]any)
  136. tag, ok := mp[info.TagField]
  137. if !ok {
  138. return nil, fmt.Errorf("converting to %v: no tag field %s in map", toType, info.TagField)
  139. }
  140. tagStr, ok := tag.(string)
  141. if !ok {
  142. return nil, fmt.Errorf("converting to %v: tag field %s value is %v, which is not a string", toType, info.TagField, tag)
  143. }
  144. eleType, ok := info.TagToType[tagStr]
  145. if !ok {
  146. return nil, fmt.Errorf("converting to %v: unknow type tag %s", toType, tagStr)
  147. }
  148. to.Set(reflect.New(eleType).Elem())
  149. return from.Interface(), nil
  150. },
  151. }
  152. return AnyToAny(m, obj, AnyToAnyOption{
  153. Converters: convs,
  154. })
  155. }
  156. func ObjectToMap(obj any) (map[string]any, error) {
  157. mp := make(map[string]any)
  158. dec, err := mapstructure.NewDecoder(&mapstructure.DecoderConfig{
  159. TagName: "json",
  160. Result: &mp,
  161. })
  162. if err != nil {
  163. return nil, err
  164. }
  165. return mp, dec.Decode(obj)
  166. }
  167. // 1. 尝试解开所有引用
  168. //
  169. // 2. nil值将会是空字符串
  170. func ObjectToMapString(obj any) (map[string]string, error) {
  171. if obj == nil {
  172. return make(map[string]string), nil
  173. }
  174. v := reflect.ValueOf(obj)
  175. for v.Kind() == reflect.Ptr {
  176. v = v.Elem()
  177. }
  178. if !v.IsValid() {
  179. return make(map[string]string), nil
  180. }
  181. if v.Kind() != reflect.Struct {
  182. return nil, fmt.Errorf("type %v is not a struct", v.Type())
  183. }
  184. mp := make(map[string]string)
  185. objectToMapString(v, mp)
  186. return mp, nil
  187. }
  188. func objectToMapString(val reflect.Value, mp map[string]string) {
  189. typ := val.Type()
  190. for i := 0; i < val.NumField(); i++ {
  191. vf := val.Field(i)
  192. tf := typ.Field(i)
  193. if tf.Anonymous {
  194. objectToMapString(vf, mp)
  195. continue
  196. }
  197. fieldName := tf.Name
  198. omitEmpty := false
  199. jsonTag := tf.Tag.Get("json")
  200. if jsonTag != "" {
  201. tagParts := strings.Split(jsonTag, ",")
  202. fieldName = strings.TrimSpace(tagParts[0])
  203. if len(tagParts) > 1 {
  204. for _, tagPart := range tagParts[1:] {
  205. tagPart = strings.TrimSpace(tagPart)
  206. if tagPart == "omitempty" {
  207. omitEmpty = true
  208. }
  209. }
  210. }
  211. }
  212. for vf.Kind() == reflect.Ptr {
  213. vf = vf.Elem()
  214. }
  215. if !vf.IsValid() {
  216. if omitEmpty {
  217. continue
  218. }
  219. mp[fieldName] = ""
  220. continue
  221. }
  222. if vf.IsZero() && omitEmpty {
  223. continue
  224. }
  225. if vf.Kind() == reflect.Array {
  226. }
  227. mp[fieldName] = fmt.Sprintf("%v", vf)
  228. }
  229. }