Hot-keys on this page

r m x p   toggle line displays

j k   next/prev highlighted chunk

0   (zero) top of page

1   (one) first highlighted chunk

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62

63

64

65

66

67

68

69

70

71

72

73

74

75

76

77

78

79

80

81

82

83

84

85

86

87

88

89

90

91

92

93

94

95

96

97

98

99

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

142

143

144

145

146

147

148

149

150

151

152

153

154

155

156

157

158

159

160

161

162

163

164

165

166

167

168

169

170

171

172

173

174

175

176

#!/usr/bin/env python 

# 

# Copyright (C) 2020  Vates SAS - ronan.abhamon@vates.fr 

# 

# This program is free software: you can redistribute it and/or modify 

# it under the terms of the GNU General Public License as published by 

# the Free Software Foundation, either version 3 of the License, or 

# (at your option) any later version. 

# This program is distributed in the hope that it will be useful, 

# but WITHOUT ANY WARRANTY; without even the implied warranty of 

# MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the 

# GNU General Public License for more details. 

# 

# You should have received a copy of the GNU General Public License 

# along with this program.  If not, see <https://www.gnu.org/licenses/>. 

# 

 

 

from linstorvolumemanager import \ 

  get_controller_uri, LinstorVolumeManager, LinstorVolumeManagerError 

import linstor 

import re 

import util 

 

 

class LinstorJournalerError(Exception): 

    pass 

 

# ============================================================================== 

 

 

class LinstorJournaler: 

    """ 

    Simple journaler that uses LINSTOR properties for persistent "storage". 

    A journal is a id-value pair, and there can be only one journal for a 

    given id. An identifier is juste a transaction name. 

    """ 

 

    REG_TYPE = re.compile('^([^/]+)$') 

    REG_TRANSACTION = re.compile('^[^/]+/([^/]+)$') 

 

    """ 

    Types of transaction in the journal. 

    """ 

    CLONE = 'clone' 

    INFLATE = 'inflate' 

    ZERO = 'zero' 

 

    @staticmethod 

    def default_logger(*args): 

        print(args) 

 

    def __init__(self, uri, group_name, logger=default_logger.__func__): 

        self._namespace = '{}journal/'.format( 

            LinstorVolumeManager._build_sr_namespace() 

        ) 

        self._logger = logger 

        self._journal = self._create_journal_instance( 

            uri, group_name, self._namespace 

        ) 

 

    def create(self, type, identifier, value): 

        # TODO: Maybe rename to 'add' in the future (in Citrix code too). 

 

        key = self._get_key(type, identifier) 

 

        # 1. Ensure transaction doesn't exist. 

        current_value = self.get(type, identifier) 

        if current_value is not None: 

            raise LinstorJournalerError( 

                'Journal transaction already exists for \'{}:{}\': {}' 

                .format(type, identifier, current_value) 

            ) 

 

        # 2. Write! 

        try: 

            self._reset_namespace() 

            self._logger( 

                'Create journal transaction \'{}:{}\''.format(type, identifier) 

            ) 

            self._journal[key] = str(value) 

        except Exception as e: 

            try: 

                self._journal.pop(key, 'empty') 

            except Exception as e2: 

                self._logger( 

                    'Failed to clean up failed journal write: {} (Ignored)' 

                    .format(e2) 

                ) 

 

            raise LinstorJournalerError( 

                'Failed to write to journal: {}'.format(e) 

            ) 

 

    def remove(self, type, identifier): 

        key = self._get_key(type, identifier) 

        try: 

            self._reset_namespace() 

            self._logger( 

                'Destroy journal transaction \'{}:{}\'' 

                .format(type, identifier) 

            ) 

            self._journal.pop(key) 

        except Exception as e: 

            raise LinstorJournalerError( 

                'Failed to remove transaction \'{}:{}\': {}' 

                .format(type, identifier, e) 

            ) 

 

    def get(self, type, identifier): 

        self._reset_namespace() 

        return self._journal.get(self._get_key(type, identifier)) 

 

    def get_all(self, type): 

        entries = {} 

 

        self._journal.namespace = self._namespace + '{}/'.format(type) 

        for (key, value) in self._journal.items(): 

            res = self.REG_TYPE.match(key) 

            if res: 

                identifier = res.groups()[0] 

                entries[identifier] = value 

        return entries 

 

    # Added to compatibility with Citrix API. 

    def getAll(self, type): 

        return self.get_all(type) 

 

    def has_entries(self, identifier): 

        self._reset_namespace() 

        for (key, value) in self._journal.items(): 

            res = self.REG_TRANSACTION.match(key) 

            if res: 

                current_identifier = res.groups()[0] 

                if current_identifier == identifier: 

                    return True 

        return False 

 

    # Added to compatibility with Citrix API. 

    def hasJournals(self, identifier): 

        return self.has_entries(identifier) 

 

    def _reset_namespace(self): 

        self._journal.namespace = self._namespace 

 

    @classmethod 

    def _create_journal_instance(cls, uri, group_name, namespace): 

        def connect(uri): 

            if not uri: 

                uri = get_controller_uri() 

                if not uri: 

                    raise LinstorVolumeManagerError( 

                        'Unable to find controller uri...' 

                    ) 

            return linstor.KV( 

                LinstorVolumeManager._build_group_name(group_name), 

                uri=uri, 

                namespace=namespace 

            ) 

 

        try: 

            return connect(uri) 

        except (linstor.errors.LinstorNetworkError, LinstorVolumeManagerError): 

            pass 

 

        return util.retry( 

            lambda: connect(None), 

            maxretry=10, 

            exceptions=[ 

                linstor.errors.LinstorNetworkError, LinstorVolumeManagerError 

            ] 

        ) 

 

    @staticmethod 

    def _get_key(type, identifier): 

        return '{}/{}'.format(type, identifier)