You can not select more than 25 topics Topics must start with a chinese character,a letter or number, can include dashes ('-') and can be up to 35 characters long.

segment.go 2.6 kB

1234567891011121314151617181920212223242526272829303132333435363738394041424344454647484950515253545556575859606162636465666768697071727374757677787980818283848586878889909192939495969798
  1. package opt
  2. import (
  3. "gitlink.org.cn/cloudream/common/pkgs/ioswitch/dag"
  4. "gitlink.org.cn/cloudream/jcs-pub/common/pkgs/ioswitch2/ops2"
  5. "gitlink.org.cn/cloudream/jcs-pub/common/pkgs/ioswitch2/parser/state"
  6. )
  7. // 删除未使用的SegmentJoin
  8. func RemoveUnusedSegmentJoin(ctx *state.GenerateState) bool {
  9. changed := false
  10. dag.WalkOnlyType[*ops2.SegmentJoinNode](ctx.DAG.Graph, func(node *ops2.SegmentJoinNode) bool {
  11. if node.Joined().Dst.Len() > 0 {
  12. return true
  13. }
  14. node.RemoveAllInputs()
  15. ctx.DAG.RemoveNode(node)
  16. return true
  17. })
  18. return changed
  19. }
  20. // 删除未使用的SegmentSplit
  21. func RemoveUnusedSegmentSplit(ctx *state.GenerateState) bool {
  22. changed := false
  23. dag.WalkOnlyType[*ops2.SegmentSplitNode](ctx.DAG.Graph, func(typ *ops2.SegmentSplitNode) bool {
  24. // Split出来的每一个流都没有被使用,才能删除这个指令
  25. for _, out := range typ.OutputStreams().Slots.RawArray() {
  26. if out.Dst.Len() > 0 {
  27. return true
  28. }
  29. }
  30. typ.RemoveAllStream()
  31. ctx.DAG.RemoveNode(typ)
  32. changed = true
  33. return true
  34. })
  35. return changed
  36. }
  37. // 如果Split的结果被完全用于Join,则省略Split和Join指令
  38. func OmitSegmentSplitJoin(ctx *state.GenerateState) bool {
  39. changed := false
  40. dag.WalkOnlyType[*ops2.SegmentSplitNode](ctx.DAG.Graph, func(splitNode *ops2.SegmentSplitNode) bool {
  41. // 随便找一个输出流的目的地
  42. splitOut := splitNode.OutputStreams().Get(0)
  43. if splitOut.Dst.Len() != 1 {
  44. return true
  45. }
  46. dstNode := splitOut.Dst.Get(0)
  47. // 这个目的地要是一个Join指令
  48. joinNode, ok := dstNode.(*ops2.SegmentJoinNode)
  49. if !ok {
  50. return true
  51. }
  52. if splitNode.OutputStreams().Len() != joinNode.Joined().Dst.Len() {
  53. return true
  54. }
  55. // Join指令的输入必须全部来自Split指令的输出,且位置要相同
  56. for i := 0; i < splitNode.OutputStreams().Len(); i++ {
  57. splitOut := splitNode.OutputStreams().Get(i)
  58. joinIn := joinNode.InputStreams().Get(i)
  59. if splitOut != joinIn {
  60. return true
  61. }
  62. if splitOut != nil && splitOut.Dst.Len() != 1 {
  63. return true
  64. }
  65. }
  66. // 所有条件都满足,可以开始省略操作,将Join操作的目的地的输入流替换为Split操作的输入流:
  67. // F->Split->Join->T 变换为:F->T
  68. splitInput := splitNode.InputStreams().Get(0)
  69. for _, to := range joinNode.Joined().Dst.RawArray() {
  70. splitInput.To(to, to.InputStreams().IndexOf(joinNode.Joined()))
  71. }
  72. splitInput.NotTo(splitNode)
  73. // 并删除这两个指令
  74. ctx.DAG.RemoveNode(joinNode)
  75. ctx.DAG.RemoveNode(splitNode)
  76. changed = true
  77. return true
  78. })
  79. return changed
  80. }

本项目旨在将云际存储公共基础设施化,使个人及企业可低门槛使用高效的云际存储服务(安装开箱即用云际存储客户端即可,无需关注其他组件的部署),同时支持用户灵活便捷定制云际存储的功能细节。