source: sasview/park_integration/src/sans/fit/ScipyFitting.py @ 0766d6d

ESS_GUIESS_GUI_DocsESS_GUI_batch_fittingESS_GUI_bumps_abstractionESS_GUI_iss1116ESS_GUI_iss879ESS_GUI_iss959ESS_GUI_openclESS_GUI_orderingESS_GUI_sync_sascalccostrafo411magnetic_scattrelease-4.1.1release-4.1.2release-4.2.2release_4.0.1ticket-1009ticket-1094-headlessticket-1242-2d-resolutionticket-1243ticket-1249ticket885unittest-saveload
Last change on this file since 0766d6d was 15f68ce, checked in by Jae Cho <jhjcho@…>, 13 years ago

trying to fix scipy result handling

  • Property mode set to 100644
File size: 8.0 KB
RevLine 
[aa36f96]1
2
[792db7d5]3"""
[aa36f96]4ScipyFitting module contains FitArrange , ScipyFit,
5Parameter classes.All listed classes work together to perform a
6simple fit with scipy optimizer.
[792db7d5]7"""
[61cb28d]8
[88b5e83]9import numpy 
[511c6810]10import sys
[2446b66]11
[7705306]12
[b2f25dc5]13from sans.fit.AbstractFitEngine import FitEngine
14from sans.fit.AbstractFitEngine import SansAssembly
[511c6810]15from sans.fit.AbstractFitEngine import FitAbort
[634ca14]16from sans.fit.AbstractFitEngine import Model
[444c900e]17from sans.fit.AbstractFitEngine import FResult
[88b5e83]18
[4c718654]19class ScipyFit(FitEngine):
[7705306]20    """
[aa36f96]21    ScipyFit performs the Fit.This class can be used as follow:
22    #Do the fit SCIPY
23    create an engine: engine = ScipyFit()
24    Use data must be of type plottable
25    Use a sans model
26   
27    Add data with a dictionnary of FitArrangeDict where Uid is a key and data
28    is saved in FitArrange object.
29    engine.set_data(data,Uid)
30   
31    Set model parameter "M1"= model.name add {model.parameter.name:value}.
32   
33    :note: Set_param() if used must always preceded set_model()
34         for the fit to be performed.In case of Scipyfit set_param is called in
35         fit () automatically.
36   
37    engine.set_param( model,"M1", {'A':2,'B':4})
38   
39    Add model with a dictionnary of FitArrangeDict{} where Uid is a key and model
40    is save in FitArrange object.
41    engine.set_model(model,Uid)
42   
43    engine.fit return chisqr,[model.parameter 1,2,..],[[err1....][..err2...]]
44    chisqr1, out1, cov1=engine.fit({model.parameter.name:value},qmin,qmax)
[7705306]45    """
[792db7d5]46    def __init__(self):
47        """
[b2f25dc5]48        Creates a dictionary (self.fit_arrange_dict={})of FitArrange elements
[aa36f96]49        with Uid as keys
[792db7d5]50        """
[b2f25dc5]51        FitEngine.__init__(self)
52        self.fit_arrange_dict = {}
53        self.param_list = []
[c4d6900]54        self.curr_thread = None
[d9dc518]55    #def fit(self, *args, **kw):
56    #    return profile(self._fit, *args, **kw)
[393f0f3]57
[ba7dceb]58    def fit(self, msg_q=None,
59            q=None, handler=None, curr_thread=None, 
[7db52f1]60            ftol=1.49012e-8, reset_flag=False):
[aa36f96]61        """
62        """
[89f3b66]63        fitproblem = []
[c4d6900]64        for fproblem in self.fit_arrange_dict.itervalues():
[89f3b66]65            if fproblem.get_to_fit() == 1:
[393f0f3]66                fitproblem.append(fproblem)
[89f3b66]67        if len(fitproblem) > 1 : 
[e0072082]68            msg = "Scipy can't fit more than a single fit problem at a time."
69            raise RuntimeError, msg
[a9e04aa]70            return
[89f3b66]71        elif len(fitproblem) == 0 : 
[a9e04aa]72            raise RuntimeError, "No Assembly scheduled for Scipy fitting."
73            return
[393f0f3]74        model = fitproblem[0].get_model()
[7db52f1]75        if reset_flag:
76            # reset the initial value; useful for batch
77            for name in fitproblem[0].pars:
78                ind = fitproblem[0].pars.index(name)
79                model.model.setParam(name, fitproblem[0].vals[ind])
80        listdata = []
[393f0f3]81        listdata = fitproblem[0].get_data()
[792db7d5]82        # Concatenate dList set (contains one or more data)before fitting
[e0072082]83        data = listdata
[852354c8]84       
[89f3b66]85        self.curr_thread = curr_thread
[93de635d]86        ftol = ftol
[852354c8]87       
88        # Check the initial value if it is within range
89        self._check_param_range(model)
90       
[444c900e]91        result = FResult(model=model, data=data, param_list=self.param_list)
[852354c8]92        if handler is not None:
93            handler.set_result(result=result)
[511c6810]94        try:
[2446b66]95            # This import must be here; otherwise it will be confused when more
96            # than one thread exist.
97            from scipy import optimize
98           
[ba7dceb]99            functor = SansAssembly(paramlist=self.param_list, 
100                                   model=model, 
101                                   data=data,
102                                    handler=handler,
103                                    fitresult=result,
104                                     curr_thread=curr_thread,
105                                     msg_q=msg_q)
[db427ec]106            out, cov_x, _, mesg, success = optimize.leastsq(functor,
[c4d6900]107                                            model.get_params(self.param_list),
[852354c8]108                                                    ftol=ftol,
[c4d6900]109                                                    full_output=1,
110                                                    warning=True)
[425e49ca]111
[acfff8b]112        except KeyboardInterrupt:
113            msg = "Fitting: Terminated!!!"
114            handler.error(msg)
115            raise KeyboardInterrupt, msg #<= more stable
116            #less stable below
117            """
118            if hasattr(sys, 'last_type') and sys.last_type == KeyboardInterrupt:
[852354c8]119                if handler is not None:
[acfff8b]120                    msg = "Fitting: Terminated!!!"
121                    handler.error(msg)
[852354c8]122                    result = handler.get_result()
123                    return result
[511c6810]124            else:
125                raise
[acfff8b]126            """
[e0e22f2c]127        except:
128            raise
[c4d6900]129        chisqr = functor.chisq()
[15f68ce]130
[fd6b789]131        if cov_x is not None and numpy.isfinite(cov_x).all():
132            stderr = numpy.sqrt(numpy.diag(cov_x))
133        else:
[15f68ce]134            stderr = []
[d8661fb]135           
136        result.index = data.idx
[15f68ce]137        result.fitness = chisqr
138        result.stderr  = stderr
139        result.pvec = out
140        result.success = success
141        result.theory = functor.theory
142        if q is not None:
143            q.put(result)
144            return q
145        if success < 1 or success > 5:
146            result.fitness = None
[444c900e]147        return [result]
[15f68ce]148
[852354c8]149       
150    def _check_param_range(self, model):
151        """
152        Check parameter range and set the initial value inside
153        if it is out of range.
154       
155        : model: park model object
156        """
157        is_outofbound = False
158        # loop through parameterset
159        for p in model.parameterset:       
160            param_name = p.get_name()
161            # proceed only if the parameter name is in the list of fitting
162            if param_name in self.param_list:
163                # if the range was defined, check the range
164                if numpy.isfinite(p.range[0]):
165                    if p.value <= p.range[0]: 
166                        # 10 % backing up from the border if not zero
167                        # for Scipy engine to work properly.
168                        shift = self._get_zero_shift(p.range[0])
169                        new_value = p.range[0] + shift
170                        p.value =  new_value
171                        is_outofbound = True
172                if numpy.isfinite(p.range[1]):
173                    if p.value >= p.range[1]:
174                        shift = self._get_zero_shift(p.range[1])
175                        # 10 % backing up from the border if not zero
176                        # for Scipy engine to work properly.
177                        new_value = p.range[1] - shift
178                        # Check one more time if the new value goes below
179                        # the low bound, If so, re-evaluate the value
180                        # with the mean of the range.
181                        if numpy.isfinite(p.range[0]):
182                            if new_value < p.range[0]:
183                                new_value = (p.range[0] + p.range[1]) / 2.0
184                        # Todo:
185                        # Need to think about when both min and max are same.
186                        p.value =  new_value
187                        is_outofbound = True
188                       
189        return is_outofbound
190   
191    def _get_zero_shift(self, range):
192        """
193        Get 10% shift of the param value = 0 based on the range value
194       
195        : param range: min or max value of the bounds
196        """
197        if range == 0:
198            shift = 0.1
199        else:
200            shift = 0.1 * range
201           
202        return shift
203   
[e0072082]204   
[c4d6900]205#def profile(fn, *args, **kw):
206#    import cProfile, pstats, os
207#    global call_result
208#   def call():
209#        global call_result
210#        call_result = fn(*args, **kw)
211#    cProfile.runctx('call()', dict(call=call), {}, 'profile.out')
212#    stats = pstats.Stats('profile.out')
213#    stats.sort_stats('time')
214#    stats.sort_stats('calls')
215#    stats.print_stats()
216#    os.unlink('profile.out')
217#    return call_result
[9c648c7]218
[48882d1]219     
Note: See TracBrowser for help on using the repository browser.