toolbar/precog/monitor/monitor.go

   1 package monitor
   2
   3 import (
   4         "fmt"
   5         "io/ioutil"
   6         "os"
   7         "os/user"
   8         "strings"
   9         // "sync"
  10         "time"
  11
  12         "github.com/jinzhu/gorm"
  13         log "github.com/sirupsen/logrus"
  14
  15         vaporCfg "github.com/vapor/config"
  16         "github.com/vapor/crypto/ed25519/chainkd"
  17         dbm "github.com/vapor/database/leveldb"
  18         "github.com/vapor/event"
  19         "github.com/vapor/netsync/chainmgr"
  20         "github.com/vapor/netsync/consensusmgr"
  21         "github.com/vapor/p2p"
  22         // msgs "github.com/vapor/netsync/messages"
  23         "github.com/vapor/netsync/peers"
  24         "github.com/vapor/p2p/discover/dht"
  25         "github.com/vapor/p2p/discover/mdns"
  26         "github.com/vapor/p2p/signlib"
  27         "github.com/vapor/test/mock"
  28         "github.com/vapor/toolbar/precog/config"
  29 )
  30
  31 type monitor struct {
  32         // *sync.RWMutex
  33         cfg       *config.Config
  34         db        *gorm.DB
  35         nodeCfg   *vaporCfg.Config
  36         sw        *p2p.Switch
  37         discvCh   chan *dht.Node
  38         privKey   chainkd.XPrv
  39         chain     *mock.Chain
  40         txPool    *mock.Mempool
  41         connected uint32
  42 }
  43
  44 // TODO: set myself as SPV?
  45 func NewMonitor(cfg *config.Config, db *gorm.DB) *monitor {
  46         //TODO: for test
  47         cfg.CheckFreqSeconds = 30
  48
  49         dbPath, err := makePath()
  50         if err != nil {
  51                 log.Fatal(err)
  52         }
  53
  54         nodeCfg := &vaporCfg.Config{
  55                 BaseConfig: vaporCfg.DefaultBaseConfig(),
  56                 P2P:        vaporCfg.DefaultP2PConfig(),
  57                 Federation: vaporCfg.DefaultFederationConfig(),
  58         }
  59         nodeCfg.DBPath = dbPath
  60         nodeCfg.ChainID = "mainnet"
  61         discvCh := make(chan *dht.Node)
  62         privKey, err := signlib.NewPrivKey()
  63         if err != nil {
  64                 log.Fatal(err)
  65         }
  66
  67         chain, txPool, err := mockChainAndPool()
  68         if err != nil {
  69                 log.Fatal(err)
  70         }
  71
  72         return &monitor{
  73                 // RWMutex: &sync.RWMutex{},
  74                 cfg:     cfg,
  75                 db:      db,
  76                 nodeCfg: nodeCfg,
  77                 discvCh: discvCh,
  78                 privKey: privKey.(chainkd.XPrv),
  79                 chain:   chain,
  80                 txPool:  txPool,
  81         }
  82 }
  83
  84 func makePath() (string, error) {
  85         usr, err := user.Current()
  86         if err != nil {
  87                 return "", err
  88         }
  89
  90         dataPath := usr.HomeDir + "/.precog"
  91         if err := os.MkdirAll(dataPath, os.ModePerm); err != nil {
  92                 return "", err
  93         }
  94
  95         tmpDir, err := ioutil.TempDir(dataPath, "")
  96         if err != nil {
  97                 return "", err
  98         }
  99
 100         return tmpDir, nil
 101 }
 102
 103 func (m *monitor) Run() {
 104         defer os.RemoveAll(m.nodeCfg.DBPath)
 105
 106         dbTx := m.db.Begin()
 107         var seeds []string
 108         for _, node := range m.cfg.Nodes {
 109                 seeds = append(seeds, fmt.Sprintf("%s:%d", node.Host, node.Port))
 110                 if err := m.upSertNode(dbTx, &node); err != nil {
 111                         dbTx.Rollback()
 112                         log.Error(err)
 113                 }
 114         }
 115         dbTx.Commit()
 116         m.nodeCfg.P2P.Seeds = strings.Join(seeds, ",")
 117         if err := m.makeSwitch(); err != nil {
 118                 log.Fatal(err)
 119         }
 120
 121         go m.discoveryRoutine()
 122         go m.collectDiscoveredNodes()
 123         go m.connectNodesRoutine()
 124         go m.checkStatusRoutine()
 125 }
 126
 127 func (m *monitor) makeSwitch() error {
 128         l, listenAddr := p2p.GetListener(m.nodeCfg.P2P)
 129         discv, err := dht.NewDiscover(m.nodeCfg, m.privKey, l.ExternalAddress().Port, m.cfg.NetworkID)
 130         if err != nil {
 131                 return err
 132         }
 133
 134         // no need for lanDiscv, but passing &mdns.LANDiscover{} will cause NilPointer
 135         lanDiscv := mdns.NewLANDiscover(mdns.NewProtocol(), int(l.ExternalAddress().Port))
 136         sw, err := p2p.NewSwitch(m.nodeCfg, discv, lanDiscv, l, m.privKey, listenAddr, m.cfg.NetworkID)
 137         if err != nil {
 138                 return err
 139         }
 140
 141         m.sw = sw
 142         return nil
 143 }
 144
 145 func (m *monitor) prepareReactors(peers *peers.PeerSet) error {
 146         dispatcher := event.NewDispatcher()
 147         // add ConsensusReactor for consensusChannel
 148         _ = consensusmgr.NewManager(m.sw, m.chain, peers, dispatcher)
 149         fastSyncDB := dbm.NewDB("fastsync", m.nodeCfg.DBBackend, m.nodeCfg.DBDir())
 150         // add ProtocolReactor to handle msgs
 151         _, err := chainmgr.NewManager(m.nodeCfg, m.sw, m.chain, m.txPool, dispatcher, peers, fastSyncDB)
 152         if err != nil {
 153                 return err
 154         }
 155
 156         for label, reactor := range m.sw.GetReactors() {
 157                 log.Debug("start reactor: (%s:%v)", label, reactor)
 158                 if _, err := reactor.Start(); err != nil {
 159                         return nil
 160                 }
 161         }
 162
 163         m.sw.GetSecurity().RegisterFilter(m.sw.GetNodeInfo())
 164         m.sw.GetSecurity().RegisterFilter(m.sw.GetPeers())
 165
 166         return m.sw.GetSecurity().Start()
 167 }
 168
 169 func (m *monitor) checkStatusRoutine() {
 170         peers := peers.NewPeerSet(m.sw)
 171         if err := m.prepareReactors(peers); err != nil {
 172                 log.Fatal(err)
 173         }
 174
 175         protocolReactor, ok := m.sw.GetReactors()["PROTOCOL"]
 176         if !ok {
 177                 log.Fatal("protocolReactor not found")
 178         }
 179
 180         bestHeight := uint64(0)
 181         ticker := time.NewTicker(time.Duration(m.cfg.CheckFreqSeconds) * time.Second)
 182         for range ticker.C {
 183                 dbTx := m.db.Begin()
 184                 log.Info("connected peers: ", m.sw.GetPeers().List())
 185
 186                 for _, peer := range m.sw.GetPeers().List() {
 187                         peer.Start()
 188                         protocolReactor.AddPeer(peer)
 189                 }
 190
 191                 for _, peer := range m.sw.GetPeers().List() {
 192                         p := peers.GetPeer(peer.ID())
 193                         if p == nil {
 194                                 continue
 195                         }
 196
 197                         if err := p.SendStatus(m.chain.BestBlockHeader(), m.chain.LastIrreversibleHeader()); err != nil {
 198                                 peers.RemovePeer(p.ID())
 199                         }
 200                 }
 201
 202                 for _, peerInfo := range peers.GetPeerInfos() {
 203                         if peerInfo.Height > bestHeight {
 204                                 bestHeight = peerInfo.Height
 205                         }
 206                 }
 207                 log.Info("bestHeight: ", bestHeight)
 208
 209                 // TODO:
 210                 // msg := struct{ msgs.BlockchainMessage }{&msgs.GetBlockMessage{Height: bestHeight + 1}}
 211                 // for _, peer := range m.sw.GetPeers().List() {
 212                 //      peers.SendMsg(peer.ID(), msgs.BlockchainChannel, msg)
 213                 // }
 214
 215                 for _, peer := range m.sw.GetPeers().List() {
 216                         p := peers.GetPeer(peer.ID())
 217                         if p == nil {
 218                                 continue
 219                         }
 220
 221                         peers.RemovePeer(p.ID())
 222                 }
 223                 log.Info("Disonnect all peers.")
 224
 225                 for _, peerInfo := range peers.GetPeerInfos() {
 226                         if err := m.savePeerInfo(dbTx, peerInfo); err != nil {
 227                                 dbTx.Rollback()
 228                                 log.Error(err)
 229                                 break
 230                         }
 231                 }
 232                 dbTx.Commit()
 233         }
 234 }