toolbar/precog/monitor/monitor.go

   1 package monitor
   2
   3 import (
   4         "fmt"
   5         "os"
   6         "os/user"
   7         "strings"
   8         "sync"
   9
  10         "github.com/jinzhu/gorm"
  11         log "github.com/sirupsen/logrus"
  12
  13         vaporCfg "github.com/vapor/config"
  14         "github.com/vapor/crypto/ed25519/chainkd"
  15         dbm "github.com/vapor/database/leveldb"
  16         "github.com/vapor/event"
  17         "github.com/vapor/netsync/chainmgr"
  18         "github.com/vapor/netsync/consensusmgr"
  19         "github.com/vapor/netsync/peers"
  20         "github.com/vapor/p2p"
  21         "github.com/vapor/p2p/discover/dht"
  22         "github.com/vapor/p2p/discover/mdns"
  23         "github.com/vapor/p2p/signlib"
  24         "github.com/vapor/test/mock"
  25         "github.com/vapor/toolbar/precog/config"
  26 )
  27
  28 type monitor struct {
  29         *sync.RWMutex
  30         cfg     *config.Config
  31         db      *gorm.DB
  32         nodeCfg *vaporCfg.Config
  33         sw      *p2p.Switch
  34         privKey chainkd.XPrv
  35         chain   *mock.Chain
  36         txPool  *mock.Mempool
  37         // discvMap maps a node's public key to the node itself
  38         discvMap map[string]*dht.Node
  39         discvCh  chan *dht.Node
  40         dialCh   chan struct{}
  41         // TODO: maybe remove?
  42         checkStatusCh chan struct{}
  43 }
  44
  45 // TODO: set myself as SPV?
  46 func NewMonitor(cfg *config.Config, db *gorm.DB) *monitor {
  47         //TODO: for test
  48         cfg.CheckFreqSeconds = 15
  49
  50         dbPath, err := makePath()
  51         if err != nil {
  52                 log.Fatal(err)
  53         }
  54
  55         nodeCfg := &vaporCfg.Config{
  56                 BaseConfig: vaporCfg.DefaultBaseConfig(),
  57                 P2P:        vaporCfg.DefaultP2PConfig(),
  58                 Federation: vaporCfg.DefaultFederationConfig(),
  59         }
  60         nodeCfg.DBPath = dbPath
  61         nodeCfg.ChainID = "mainnet"
  62         privKey, err := signlib.NewPrivKey()
  63         if err != nil {
  64                 log.Fatal(err)
  65         }
  66
  67         chain, txPool, err := mockChainAndPool()
  68         if err != nil {
  69                 log.Fatal(err)
  70         }
  71
  72         return &monitor{
  73                 RWMutex:       &sync.RWMutex{},
  74                 cfg:           cfg,
  75                 db:            db,
  76                 nodeCfg:       nodeCfg,
  77                 privKey:       privKey.(chainkd.XPrv),
  78                 chain:         chain,
  79                 txPool:        txPool,
  80                 discvMap:      make(map[string]*dht.Node),
  81                 discvCh:       make(chan *dht.Node),
  82                 dialCh:        make(chan struct{}, 1),
  83                 checkStatusCh: make(chan struct{}, 1),
  84         }
  85 }
  86
  87 // TODO: need to fix temp and "discover"
  88 func makePath() (string, error) {
  89         usr, err := user.Current()
  90         if err != nil {
  91                 return "", err
  92         }
  93
  94         dataPath := usr.HomeDir + "/.precog"
  95         if err := os.MkdirAll(dataPath, os.ModePerm); err != nil {
  96                 return "", err
  97         }
  98
  99         return dataPath, nil
 100 }
 101
 102 func (m *monitor) Run() {
 103         defer os.RemoveAll(m.nodeCfg.DBPath)
 104
 105         var seeds []string
 106         for _, node := range m.cfg.Nodes {
 107                 seeds = append(seeds, fmt.Sprintf("%s:%d", node.Host, node.Port))
 108                 if err := m.upSertNode(&node); err != nil {
 109                         log.Error(err)
 110                 }
 111         }
 112         m.nodeCfg.P2P.Seeds = strings.Join(seeds, ",")
 113         if err := m.makeSwitch(); err != nil {
 114                 log.Fatal(err)
 115         }
 116
 117         m.dialCh <- struct{}{}
 118         var discvWg sync.WaitGroup
 119         go m.discoveryRoutine(&discvWg)
 120         go m.collectDiscoveredNodes(&discvWg)
 121         go m.connectNodesRoutine()
 122         go m.checkStatusRoutine()
 123 }
 124
 125 func (m *monitor) makeSwitch() error {
 126         l, listenAddr := p2p.GetListener(m.nodeCfg.P2P)
 127         discv, err := dht.NewDiscover(m.nodeCfg, m.privKey, l.ExternalAddress().Port, m.cfg.NetworkID)
 128         if err != nil {
 129                 return err
 130         }
 131
 132         // no need for lanDiscv, but passing &mdns.LANDiscover{} will cause NilPointer
 133         lanDiscv := mdns.NewLANDiscover(mdns.NewProtocol(), int(l.ExternalAddress().Port))
 134         sw, err := p2p.NewSwitch(m.nodeCfg, discv, lanDiscv, l, m.privKey, listenAddr, m.cfg.NetworkID)
 135         if err != nil {
 136                 return err
 137         }
 138
 139         m.sw = sw
 140         return nil
 141 }
 142
 143 func (m *monitor) prepareReactors(peers *peers.PeerSet) error {
 144         dispatcher := event.NewDispatcher()
 145         // add ConsensusReactor for consensusChannel
 146         _ = consensusmgr.NewManager(m.sw, m.chain, peers, dispatcher)
 147         fastSyncDB := dbm.NewDB("fastsync", m.nodeCfg.DBBackend, m.nodeCfg.DBDir())
 148         // add ProtocolReactor to handle msgs
 149         _, err := chainmgr.NewManager(m.nodeCfg, m.sw, m.chain, m.txPool, dispatcher, peers, fastSyncDB)
 150         if err != nil {
 151                 return err
 152         }
 153
 154         for label, reactor := range m.sw.GetReactors() {
 155                 log.Debugf("start reactor: (%s:%v)", label, reactor)
 156                 if _, err := reactor.Start(); err != nil {
 157                         return nil
 158                 }
 159         }
 160
 161         m.sw.GetSecurity().RegisterFilter(m.sw.GetNodeInfo())
 162         m.sw.GetSecurity().RegisterFilter(m.sw.GetPeers())
 163         return m.sw.GetSecurity().Start()
 164 }
 165
 166 func (m *monitor) checkStatusRoutine() {
 167         peers := peers.NewPeerSet(m.sw)
 168         if err := m.prepareReactors(peers); err != nil {
 169                 log.Fatal(err)
 170         }
 171
 172         bestHeight := uint64(0)
 173         for range m.checkStatusCh {
 174                 for _, peer := range m.sw.GetPeers().List() {
 175                         peer.Start()
 176                         peers.AddPeer(peer)
 177                 }
 178                 log.Infof("%d connected peers: %v", len(m.sw.GetPeers().List()), m.sw.GetPeers().List())
 179
 180                 for _, peer := range m.sw.GetPeers().List() {
 181                         p := peers.GetPeer(peer.ID())
 182                         if p == nil {
 183                                 continue
 184                         }
 185
 186                         if err := p.SendStatus(m.chain.BestBlockHeader(), m.chain.LastIrreversibleHeader()); err != nil {
 187                                 log.Error(err)
 188                                 peers.RemovePeer(p.ID())
 189                         }
 190                 }
 191
 192                 for _, peerInfo := range peers.GetPeerInfos() {
 193                         if peerInfo.Height > bestHeight {
 194                                 bestHeight = peerInfo.Height
 195                         }
 196                 }
 197                 log.Info("bestHeight: ", bestHeight)
 198                 m.processPeerInfos(peers.GetPeerInfos())
 199
 200                 for _, peer := range m.sw.GetPeers().List() {
 201                         p := peers.GetPeer(peer.ID())
 202                         if p == nil {
 203                                 continue
 204                         }
 205
 206                         peers.RemovePeer(p.ID())
 207                 }
 208                 log.Info("Disonnect all peers.")
 209                 m.Unlock()
 210                 m.dialCh <- struct{}{}
 211         }
 212 }