toolbar/precog/monitor/monitor.go

   1 package monitor
   2
   3 import (
   4         "fmt"
   5         "io/ioutil"
   6         "os"
   7         "os/user"
   8         "strings"
   9         "sync"
  10
  11         "github.com/jinzhu/gorm"
  12         log "github.com/sirupsen/logrus"
  13
  14         vaporCfg "github.com/vapor/config"
  15         "github.com/vapor/crypto/ed25519/chainkd"
  16         dbm "github.com/vapor/database/leveldb"
  17         "github.com/vapor/event"
  18         "github.com/vapor/netsync/chainmgr"
  19         "github.com/vapor/netsync/consensusmgr"
  20         "github.com/vapor/netsync/peers"
  21         "github.com/vapor/p2p"
  22         "github.com/vapor/p2p/discover/dht"
  23         "github.com/vapor/p2p/discover/mdns"
  24         "github.com/vapor/p2p/signlib"
  25         "github.com/vapor/test/mock"
  26         "github.com/vapor/toolbar/precog/config"
  27 )
  28
  29 type monitor struct {
  30         *sync.RWMutex
  31         cfg     *config.Config
  32         db      *gorm.DB
  33         nodeCfg *vaporCfg.Config
  34         sw      *p2p.Switch
  35         privKey chainkd.XPrv
  36         chain   *mock.Chain
  37         txPool  *mock.Mempool
  38         // discvMap maps a node's public key to the node itself
  39         discvMap map[string]*dht.Node
  40         discvCh  chan *dht.Node
  41         dialCh   chan struct{}
  42         // TODO: maybe remove?
  43         checkStatusCh chan struct{}
  44 }
  45
  46 // TODO: set myself as SPV?
  47 func NewMonitor(cfg *config.Config, db *gorm.DB) *monitor {
  48         //TODO: for test
  49         cfg.CheckFreqSeconds = 15
  50
  51         dbPath, err := makePath()
  52         if err != nil {
  53                 log.Fatal(err)
  54         }
  55
  56         nodeCfg := &vaporCfg.Config{
  57                 BaseConfig: vaporCfg.DefaultBaseConfig(),
  58                 P2P:        vaporCfg.DefaultP2PConfig(),
  59                 Federation: vaporCfg.DefaultFederationConfig(),
  60         }
  61         nodeCfg.DBPath = dbPath
  62         nodeCfg.ChainID = "mainnet"
  63         privKey, err := signlib.NewPrivKey()
  64         if err != nil {
  65                 log.Fatal(err)
  66         }
  67
  68         chain, txPool, err := mockChainAndPool()
  69         if err != nil {
  70                 log.Fatal(err)
  71         }
  72
  73         return &monitor{
  74                 RWMutex:       &sync.RWMutex{},
  75                 cfg:           cfg,
  76                 db:            db,
  77                 nodeCfg:       nodeCfg,
  78                 privKey:       privKey.(chainkd.XPrv),
  79                 chain:         chain,
  80                 txPool:        txPool,
  81                 discvMap:      make(map[string]*dht.Node),
  82                 discvCh:       make(chan *dht.Node),
  83                 dialCh:        make(chan struct{}, 1),
  84                 checkStatusCh: make(chan struct{}, 1),
  85         }
  86 }
  87
  88 // TODO: need to fix temp and "discover"
  89 func makePath() (string, error) {
  90         usr, err := user.Current()
  91         if err != nil {
  92                 return "", err
  93         }
  94
  95         dataPath := usr.HomeDir + "/.precog"
  96         if err := os.MkdirAll(dataPath, os.ModePerm); err != nil {
  97                 return "", err
  98         }
  99
 100         tmpDir, err := ioutil.TempDir(dataPath, "")
 101         if err != nil {
 102                 return "", err
 103         }
 104
 105         return tmpDir, nil
 106 }
 107
 108 func (m *monitor) Run() {
 109         defer os.RemoveAll(m.nodeCfg.DBPath)
 110
 111         var seeds []string
 112         for _, node := range m.cfg.Nodes {
 113                 seeds = append(seeds, fmt.Sprintf("%s:%d", node.Host, node.Port))
 114                 if err := m.upSertNode(&node); err != nil {
 115                         log.Error(err)
 116                 }
 117         }
 118         m.nodeCfg.P2P.Seeds = strings.Join(seeds, ",")
 119         if err := m.makeSwitch(); err != nil {
 120                 log.Fatal(err)
 121         }
 122
 123         m.dialCh <- struct{}{}
 124         var discvWg sync.WaitGroup
 125         go m.discoveryRoutine(&discvWg)
 126         go m.collectDiscoveredNodes(&discvWg)
 127         go m.connectNodesRoutine()
 128         go m.checkStatusRoutine()
 129 }
 130
 131 func (m *monitor) makeSwitch() error {
 132         l, listenAddr := p2p.GetListener(m.nodeCfg.P2P)
 133         discv, err := dht.NewDiscover(m.nodeCfg, m.privKey, l.ExternalAddress().Port, m.cfg.NetworkID)
 134         if err != nil {
 135                 return err
 136         }
 137
 138         // no need for lanDiscv, but passing &mdns.LANDiscover{} will cause NilPointer
 139         lanDiscv := mdns.NewLANDiscover(mdns.NewProtocol(), int(l.ExternalAddress().Port))
 140         sw, err := p2p.NewSwitch(m.nodeCfg, discv, lanDiscv, l, m.privKey, listenAddr, m.cfg.NetworkID)
 141         if err != nil {
 142                 return err
 143         }
 144
 145         m.sw = sw
 146         return nil
 147 }
 148
 149 func (m *monitor) prepareReactors(peers *peers.PeerSet) error {
 150         dispatcher := event.NewDispatcher()
 151         // add ConsensusReactor for consensusChannel
 152         _ = consensusmgr.NewManager(m.sw, m.chain, peers, dispatcher)
 153         fastSyncDB := dbm.NewDB("fastsync", m.nodeCfg.DBBackend, m.nodeCfg.DBDir())
 154         // add ProtocolReactor to handle msgs
 155         _, err := chainmgr.NewManager(m.nodeCfg, m.sw, m.chain, m.txPool, dispatcher, peers, fastSyncDB)
 156         if err != nil {
 157                 return err
 158         }
 159
 160         for label, reactor := range m.sw.GetReactors() {
 161                 log.Debugf("start reactor: (%s:%v)", label, reactor)
 162                 if _, err := reactor.Start(); err != nil {
 163                         return nil
 164                 }
 165         }
 166
 167         m.sw.GetSecurity().RegisterFilter(m.sw.GetNodeInfo())
 168         m.sw.GetSecurity().RegisterFilter(m.sw.GetPeers())
 169         return m.sw.GetSecurity().Start()
 170 }
 171
 172 func (m *monitor) checkStatusRoutine() {
 173         peers := peers.NewPeerSet(m.sw)
 174         if err := m.prepareReactors(peers); err != nil {
 175                 log.Fatal(err)
 176         }
 177
 178         bestHeight := uint64(0)
 179         for range m.checkStatusCh {
 180                 for _, peer := range m.sw.GetPeers().List() {
 181                         peer.Start()
 182                         peers.AddPeer(peer)
 183                 }
 184                 log.Infof("%d connected peers: %v", len(m.sw.GetPeers().List()), m.sw.GetPeers().List())
 185
 186                 for _, peer := range m.sw.GetPeers().List() {
 187                         p := peers.GetPeer(peer.ID())
 188                         if p == nil {
 189                                 continue
 190                         }
 191
 192                         if err := p.SendStatus(m.chain.BestBlockHeader(), m.chain.LastIrreversibleHeader()); err != nil {
 193                                 log.Error(err)
 194                                 peers.RemovePeer(p.ID())
 195                         }
 196                 }
 197
 198                 for _, peerInfo := range peers.GetPeerInfos() {
 199                         if peerInfo.Height > bestHeight {
 200                                 bestHeight = peerInfo.Height
 201                         }
 202                 }
 203                 log.Info("bestHeight: ", bestHeight)
 204                 m.processPeerInfos(peers.GetPeerInfos())
 205
 206                 for _, peer := range m.sw.GetPeers().List() {
 207                         p := peers.GetPeer(peer.ID())
 208                         if p == nil {
 209                                 continue
 210                         }
 211
 212                         peers.RemovePeer(p.ID())
 213                 }
 214                 log.Info("Disonnect all peers.")
 215                 m.Unlock()
 216                 m.dialCh <- struct{}{}
 217         }
 218 }