source: sasview/park_integration/src/sans/fit/ScipyFitting.py @ c846f36

ESS_GUIESS_GUI_DocsESS_GUI_batch_fittingESS_GUI_bumps_abstractionESS_GUI_iss1116ESS_GUI_iss879ESS_GUI_iss959ESS_GUI_openclESS_GUI_orderingESS_GUI_sync_sascalccostrafo411magnetic_scattrelease-4.1.1release-4.1.2release-4.2.2release_4.0.1ticket-1009ticket-1094-headlessticket-1242-2d-resolutionticket-1243ticket-1249ticket885unittest-saveload
Last change on this file since c846f36 was 15f68ce, checked in by Jae Cho <jhjcho@…>, 13 years ago

trying to fix scipy result handling

  • Property mode set to 100644
File size: 8.0 KB
Line 
1
2
3"""
4ScipyFitting module contains FitArrange , ScipyFit,
5Parameter classes.All listed classes work together to perform a
6simple fit with scipy optimizer.
7"""
8
9import numpy 
10import sys
11
12
13from sans.fit.AbstractFitEngine import FitEngine
14from sans.fit.AbstractFitEngine import SansAssembly
15from sans.fit.AbstractFitEngine import FitAbort
16from sans.fit.AbstractFitEngine import Model
17from sans.fit.AbstractFitEngine import FResult
18
19class ScipyFit(FitEngine):
20    """
21    ScipyFit performs the Fit.This class can be used as follow:
22    #Do the fit SCIPY
23    create an engine: engine = ScipyFit()
24    Use data must be of type plottable
25    Use a sans model
26   
27    Add data with a dictionnary of FitArrangeDict where Uid is a key and data
28    is saved in FitArrange object.
29    engine.set_data(data,Uid)
30   
31    Set model parameter "M1"= model.name add {model.parameter.name:value}.
32   
33    :note: Set_param() if used must always preceded set_model()
34         for the fit to be performed.In case of Scipyfit set_param is called in
35         fit () automatically.
36   
37    engine.set_param( model,"M1", {'A':2,'B':4})
38   
39    Add model with a dictionnary of FitArrangeDict{} where Uid is a key and model
40    is save in FitArrange object.
41    engine.set_model(model,Uid)
42   
43    engine.fit return chisqr,[model.parameter 1,2,..],[[err1....][..err2...]]
44    chisqr1, out1, cov1=engine.fit({model.parameter.name:value},qmin,qmax)
45    """
46    def __init__(self):
47        """
48        Creates a dictionary (self.fit_arrange_dict={})of FitArrange elements
49        with Uid as keys
50        """
51        FitEngine.__init__(self)
52        self.fit_arrange_dict = {}
53        self.param_list = []
54        self.curr_thread = None
55    #def fit(self, *args, **kw):
56    #    return profile(self._fit, *args, **kw)
57
58    def fit(self, msg_q=None,
59            q=None, handler=None, curr_thread=None, 
60            ftol=1.49012e-8, reset_flag=False):
61        """
62        """
63        fitproblem = []
64        for fproblem in self.fit_arrange_dict.itervalues():
65            if fproblem.get_to_fit() == 1:
66                fitproblem.append(fproblem)
67        if len(fitproblem) > 1 : 
68            msg = "Scipy can't fit more than a single fit problem at a time."
69            raise RuntimeError, msg
70            return
71        elif len(fitproblem) == 0 : 
72            raise RuntimeError, "No Assembly scheduled for Scipy fitting."
73            return
74        model = fitproblem[0].get_model()
75        if reset_flag:
76            # reset the initial value; useful for batch
77            for name in fitproblem[0].pars:
78                ind = fitproblem[0].pars.index(name)
79                model.model.setParam(name, fitproblem[0].vals[ind])
80        listdata = []
81        listdata = fitproblem[0].get_data()
82        # Concatenate dList set (contains one or more data)before fitting
83        data = listdata
84       
85        self.curr_thread = curr_thread
86        ftol = ftol
87       
88        # Check the initial value if it is within range
89        self._check_param_range(model)
90       
91        result = FResult(model=model, data=data, param_list=self.param_list)
92        if handler is not None:
93            handler.set_result(result=result)
94        try:
95            # This import must be here; otherwise it will be confused when more
96            # than one thread exist.
97            from scipy import optimize
98           
99            functor = SansAssembly(paramlist=self.param_list, 
100                                   model=model, 
101                                   data=data,
102                                    handler=handler,
103                                    fitresult=result,
104                                     curr_thread=curr_thread,
105                                     msg_q=msg_q)
106            out, cov_x, _, mesg, success = optimize.leastsq(functor,
107                                            model.get_params(self.param_list),
108                                                    ftol=ftol,
109                                                    full_output=1,
110                                                    warning=True)
111
112        except KeyboardInterrupt:
113            msg = "Fitting: Terminated!!!"
114            handler.error(msg)
115            raise KeyboardInterrupt, msg #<= more stable
116            #less stable below
117            """
118            if hasattr(sys, 'last_type') and sys.last_type == KeyboardInterrupt:
119                if handler is not None:
120                    msg = "Fitting: Terminated!!!"
121                    handler.error(msg)
122                    result = handler.get_result()
123                    return result
124            else:
125                raise
126            """
127        except:
128            raise
129        chisqr = functor.chisq()
130
131        if cov_x is not None and numpy.isfinite(cov_x).all():
132            stderr = numpy.sqrt(numpy.diag(cov_x))
133        else:
134            stderr = []
135           
136        result.index = data.idx
137        result.fitness = chisqr
138        result.stderr  = stderr
139        result.pvec = out
140        result.success = success
141        result.theory = functor.theory
142        if q is not None:
143            q.put(result)
144            return q
145        if success < 1 or success > 5:
146            result.fitness = None
147        return [result]
148
149       
150    def _check_param_range(self, model):
151        """
152        Check parameter range and set the initial value inside
153        if it is out of range.
154       
155        : model: park model object
156        """
157        is_outofbound = False
158        # loop through parameterset
159        for p in model.parameterset:       
160            param_name = p.get_name()
161            # proceed only if the parameter name is in the list of fitting
162            if param_name in self.param_list:
163                # if the range was defined, check the range
164                if numpy.isfinite(p.range[0]):
165                    if p.value <= p.range[0]: 
166                        # 10 % backing up from the border if not zero
167                        # for Scipy engine to work properly.
168                        shift = self._get_zero_shift(p.range[0])
169                        new_value = p.range[0] + shift
170                        p.value =  new_value
171                        is_outofbound = True
172                if numpy.isfinite(p.range[1]):
173                    if p.value >= p.range[1]:
174                        shift = self._get_zero_shift(p.range[1])
175                        # 10 % backing up from the border if not zero
176                        # for Scipy engine to work properly.
177                        new_value = p.range[1] - shift
178                        # Check one more time if the new value goes below
179                        # the low bound, If so, re-evaluate the value
180                        # with the mean of the range.
181                        if numpy.isfinite(p.range[0]):
182                            if new_value < p.range[0]:
183                                new_value = (p.range[0] + p.range[1]) / 2.0
184                        # Todo:
185                        # Need to think about when both min and max are same.
186                        p.value =  new_value
187                        is_outofbound = True
188                       
189        return is_outofbound
190   
191    def _get_zero_shift(self, range):
192        """
193        Get 10% shift of the param value = 0 based on the range value
194       
195        : param range: min or max value of the bounds
196        """
197        if range == 0:
198            shift = 0.1
199        else:
200            shift = 0.1 * range
201           
202        return shift
203   
204   
205#def profile(fn, *args, **kw):
206#    import cProfile, pstats, os
207#    global call_result
208#   def call():
209#        global call_result
210#        call_result = fn(*args, **kw)
211#    cProfile.runctx('call()', dict(call=call), {}, 'profile.out')
212#    stats = pstats.Stats('profile.out')
213#    stats.sort_stats('time')
214#    stats.sort_stats('calls')
215#    stats.print_stats()
216#    os.unlink('profile.out')
217#    return call_result
218
219     
Note: See TracBrowser for help on using the repository browser.