source: CLRX/CLRadeonExtender/trunk/amdasm/AsmRegAllocSSAData.cpp @ 4013

Last change on this file since 4013 was 4013, checked in by matszpk, 12 months ago

CLRadeonExtender: AsmRegAlloc?: Small changes.

File size: 73.9 KB
Line 
1/*
2 *  CLRadeonExtender - Unofficial OpenCL Radeon Extensions Library
3 *  Copyright (C) 2014-2018 Mateusz Szpakowski
4 *
5 *  This library is free software; you can redistribute it and/or
6 *  modify it under the terms of the GNU Lesser General Public
7 *  License as published by the Free Software Foundation; either
8 *  version 2.1 of the License, or (at your option) any later version.
9 *
10 *  This library is distributed in the hope that it will be useful,
11 *  but WITHOUT ANY WARRANTY; without even the implied warranty of
12 *  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
13 *  Lesser General Public License for more details.
14 *
15 *  You should have received a copy of the GNU Lesser General Public
16 *  License along with this library; if not, write to the Free Software
17 *  Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA  02110-1301  USA
18 */
19
20#include <CLRX/Config.h>
21#include <iostream>
22#include <stack>
23#include <deque>
24#include <vector>
25#include <utility>
26#include <unordered_set>
27#include <unordered_map>
28#include <algorithm>
29#include <CLRX/utils/Utilities.h>
30#include <CLRX/utils/Containers.h>
31#include <CLRX/amdasm/Assembler.h>
32#include "AsmInternals.h"
33#include "AsmRegAlloc.h"
34
35using namespace CLRX;
36
37static inline void insertReplace(SSAReplacesMap& rmap, const AsmSingleVReg& vreg,
38              size_t origId, size_t destId)
39{
40    ARDOut << "  insertreplace: " << vreg.regVar << ":" << vreg.index  << ": " <<
41                origId << ", " << destId << "\n";
42    auto res = rmap.insert({ vreg, {} });
43    res.first->second.insertValue({ origId, destId });
44}
45
46/* caching concepts:
47 * resfirstPointsCache - cache of the ways that goes to conflict which should be resolved
48 *               from first code block of the code. The entries holds a stackVarMap state
49 *               to first point the conflict (first visited already code block)
50 * resSecondPointsCache - cache of the tree traversing, starting at the first conflict
51 *               point (first visited code block). Entries holds a
52 *               regvars SSAId read before write (that should resolved)
53 */
54
55static void handleSSAEntryWhileResolving(SSAReplacesMap* replacesMap,
56            const LastSSAIdMap* stackVarMap,
57            std::unordered_map<AsmSingleVReg, BlockIndex>& alreadyReadMap,
58            FlowStackEntry2& entry, const SSAEntry& sentry,
59            RBWSSAIdMap* cacheSecPoints)
60{
61    const SSAInfo& sinfo = sentry.second;
62    auto res = alreadyReadMap.insert({ sentry.first, entry.blockIndex });
63   
64    if (res.second && sinfo.readBeforeWrite)
65    {
66        if (cacheSecPoints != nullptr)
67        {
68            auto res = cacheSecPoints->insert({ sentry.first, { sinfo.ssaIdBefore } });
69            if (!res.second)
70                res.first->second.insertValue(sinfo.ssaIdBefore);
71        }
72       
73        if (stackVarMap != nullptr)
74        {
75            // resolve conflict for this variable ssaId>.
76            // only if in previous block previous SSAID is
77            // read before all writes
78            auto it = stackVarMap->find(sentry.first);
79           
80            if (it != stackVarMap->end())
81            {
82                // found, resolve by set ssaIdLast
83                for (size_t ssaId: it->second)
84                {
85                    if (ssaId > sinfo.ssaIdBefore)
86                        insertReplace(*replacesMap, sentry.first, ssaId,
87                                    sinfo.ssaIdBefore);
88                    else if (ssaId < sinfo.ssaIdBefore)
89                        insertReplace(*replacesMap, sentry.first,
90                                        sinfo.ssaIdBefore, ssaId);
91                }
92            }
93        }
94    }
95}
96
97// use res second point cache entry to resolve conflict with SSAIds.
98// it emits SSA replaces from these conflicts
99static void useResSecPointCache(SSAReplacesMap* replacesMap,
100        const LastSSAIdMap* stackVarMap,
101        const std::unordered_map<AsmSingleVReg, BlockIndex>& alreadyReadMap,
102        const RBWSSAIdMap* resSecondPoints, BlockIndex nextBlock,
103        RBWSSAIdMap* destCacheSecPoints)
104{
105    ARDOut << "use resSecPointCache for " << nextBlock <<
106            ", alreadyRMapSize: " << alreadyReadMap.size() << "\n";
107    for (const auto& sentry: *resSecondPoints)
108    {
109        const bool alreadyRead = alreadyReadMap.find(sentry.first) != alreadyReadMap.end();
110        if (destCacheSecPoints != nullptr && !alreadyRead)
111        {
112            auto res = destCacheSecPoints->insert(sentry);
113            if (!res.second)
114                for (size_t srcSSAId: sentry.second)
115                    res.first->second.insertValue(srcSSAId);
116        }
117       
118        if (stackVarMap != nullptr)
119        {
120            auto it = stackVarMap->find(sentry.first);
121           
122            if (it != stackVarMap->end() && !alreadyRead)
123            {
124                // found, resolve by set ssaIdLast
125                for (size_t ssaId: it->second)
126                {
127                    for (size_t secSSAId: sentry.second)
128                    {
129                        if (ssaId > secSSAId)
130                            insertReplace(*replacesMap, sentry.first, ssaId, secSSAId);
131                        else if (ssaId < secSSAId)
132                            insertReplace(*replacesMap, sentry.first, secSSAId, ssaId);
133                    }
134                }
135            }
136        }
137    }
138}
139
140// add new res second cache entry with readBeforeWrite for all encountered regvars
141static void addResSecCacheEntry(const RoutineMap& routineMap,
142                const std::vector<CodeBlock>& codeBlocks,
143                SimpleCache<size_t, RBWSSAIdMap>& resSecondPointsCache,
144                size_t nextBlock)
145{
146    ARDOut << "addResSecCacheEntry: " << nextBlock << "\n";
147    //std::stack<CallStackEntry> callStack = prevCallStack;
148    // traverse by graph from next block
149    std::deque<FlowStackEntry2> flowStack;
150    flowStack.push_back({ nextBlock, 0 });
151    CBlockBitPool visited(codeBlocks.size(), false);
152   
153    std::unordered_map<AsmSingleVReg, BlockIndex> alreadyReadMap;
154   
155    RBWSSAIdMap cacheSecPoints;
156   
157    while (!flowStack.empty())
158    {
159        FlowStackEntry2& entry = flowStack.back();
160        const CodeBlock& cblock = codeBlocks[entry.blockIndex];
161       
162        if (entry.nextIndex == 0)
163        {
164            // process current block
165            if (!visited[entry.blockIndex])
166            {
167                visited[entry.blockIndex] = true;
168                ARDOut << "  resolv (cache): " << entry.blockIndex << "\n";
169               
170                const RBWSSAIdMap* resSecondPoints =
171                            resSecondPointsCache.use(entry.blockIndex);
172                if (resSecondPoints == nullptr)
173                    for (auto& sentry: cblock.ssaInfoMap)
174                        handleSSAEntryWhileResolving(nullptr, nullptr,
175                                alreadyReadMap, entry, sentry,
176                                &cacheSecPoints);
177                else // to use cache
178                {
179                    useResSecPointCache(nullptr, nullptr, alreadyReadMap,
180                            resSecondPoints, entry.blockIndex, &cacheSecPoints);
181                    flowStack.pop_back();
182                    continue;
183                }
184            }
185            else
186            {
187                // back, already visited
188                ARDOut << "resolv already (cache): " << entry.blockIndex << "\n";
189                flowStack.pop_back();
190                continue;
191            }
192        }
193       
194        if (entry.nextIndex < cblock.nexts.size())
195        {
196            flowStack.push_back({ cblock.nexts[entry.nextIndex].block, 0 });
197            entry.nextIndex++;
198        }
199        else if (((entry.nextIndex==0 && cblock.nexts.empty()) ||
200                // if have any call then go to next block
201                (cblock.haveCalls && entry.nextIndex==cblock.nexts.size())) &&
202                 !cblock.haveReturn && !cblock.haveEnd)
203        {
204            // add toResolveMap ssaIds inside called routines
205            for (const auto& next: cblock.nexts)
206                if (next.isCall)
207                {
208                    const RoutineData& rdata = routineMap.find(next.block)->second;
209                    for (const auto& v: rdata.rbwSSAIdMap)
210                        alreadyReadMap.insert({v.first, entry.blockIndex });
211                    for (const auto& v: rdata.lastSSAIdMap)
212                        alreadyReadMap.insert({v.first, entry.blockIndex });
213                }
214           
215            flowStack.push_back({ entry.blockIndex+1, 0 });
216            entry.nextIndex++;
217        }
218        else // back
219        {
220            // remove old to resolve in leaved way to allow collecting next ssaId
221            // before write (can be different due to earlier visit)
222            for (const auto& next: cblock.nexts)
223                if (next.isCall)
224                {
225                    const RoutineData& rdata = routineMap.find(next.block)->second;
226                    for (const auto& v: rdata.rbwSSAIdMap)
227                    {
228                        auto it = alreadyReadMap.find(v.first);
229                        if (it != alreadyReadMap.end() && it->second == entry.blockIndex)
230                            alreadyReadMap.erase(it);
231                    }
232                    for (const auto& v: rdata.lastSSAIdMap)
233                    {
234                        auto it = alreadyReadMap.find(v.first);
235                        if (it != alreadyReadMap.end() && it->second == entry.blockIndex)
236                            alreadyReadMap.erase(it);
237                    }
238                }
239           
240            for (const auto& sentry: cblock.ssaInfoMap)
241            {
242                auto it = alreadyReadMap.find(sentry.first);
243                if (it != alreadyReadMap.end() && it->second == entry.blockIndex)
244                    // remove old to resolve in leaved way to allow collecting next ssaId
245                    // before write (can be different due to earlier visit)
246                    alreadyReadMap.erase(it);
247            }
248            ARDOut << "  popresolv (cache)\n";
249            flowStack.pop_back();
250        }
251    }
252   
253    resSecondPointsCache.put(nextBlock, cacheSecPoints);
254}
255
256// apply calls (changes from these calls) from code blocks to stack var map
257static void applyCallToStackVarMap(const CodeBlock& cblock, const RoutineMap& routineMap,
258        LastSSAIdMap& stackVarMap, BlockIndex blockIndex, size_t nextIndex)
259{
260    for (const NextBlock& next: cblock.nexts)
261        if (next.isCall)
262        {
263            const LastSSAIdMap& regVarMap =
264                    routineMap.find(next.block)->second.lastSSAIdMap;
265            for (const auto& sentry: regVarMap)
266                stackVarMap[sentry.first].clear(); // clearing
267        }
268   
269    for (const NextBlock& next: cblock.nexts)
270        if (next.isCall)
271        {
272            ARDOut << "  applycall: " << blockIndex << ": " <<
273                    nextIndex << ": " << next.block << "\n";
274            const LastSSAIdMap& regVarMap =
275                    routineMap.find(next.block)->second.lastSSAIdMap;
276            for (const auto& sentry: regVarMap)
277                for (size_t s: sentry.second)
278                    stackVarMap.insertSSAId(sentry.first, s);
279        }
280}
281
282
283// main routine to resilve SSA conflicts in code
284// it emits SSA replaces from these conflicts
285static void resolveSSAConflicts(const std::deque<FlowStackEntry2>& prevFlowStack,
286        const RoutineMap& routineMap, const std::vector<CodeBlock>& codeBlocks,
287        const PrevWaysIndexMap& prevWaysIndexMap,
288        const CBlockBitPool& waysToCache, ResSecondPointsToCache& cblocksToCache,
289        SimpleCache<size_t, LastSSAIdMap>& resFirstPointsCache,
290        SimpleCache<size_t, RBWSSAIdMap>& resSecondPointsCache,
291        SSAReplacesMap& replacesMap)
292{
293    size_t nextBlock = prevFlowStack.back().blockIndex;
294    auto pfEnd = prevFlowStack.end();
295    --pfEnd;
296    ARDOut << "startResolv: " << (pfEnd-1)->blockIndex << "," << nextBlock << "\n";
297    LastSSAIdMap stackVarMap;
298   
299    size_t pfStartIndex = 0;
300    {
301        auto pfPrev = pfEnd;
302        --pfPrev;
303        auto it = prevWaysIndexMap.find(pfPrev->blockIndex);
304        if (it != prevWaysIndexMap.end())
305        {
306            const LastSSAIdMap* cached = resFirstPointsCache.use(it->second.first);
307            if (cached!=nullptr)
308            {
309                ARDOut << "use pfcached: " << it->second.first << ", " <<
310                        it->second.second << "\n";
311                stackVarMap = *cached;
312                pfStartIndex = it->second.second+1;
313               
314                // apply missing calls at end of the cached
315                const CodeBlock& cblock = codeBlocks[it->second.first];
316               
317                const FlowStackEntry2& entry = *(prevFlowStack.begin()+pfStartIndex-1);
318                if (entry.nextIndex > cblock.nexts.size())
319                    applyCallToStackVarMap(cblock, routineMap, stackVarMap, -1, -1);
320            }
321        }
322    }
323   
324    for (auto pfit = prevFlowStack.begin()+pfStartIndex; pfit != pfEnd; ++pfit)
325    {
326        const FlowStackEntry2& entry = *pfit;
327        ARDOut << "  apply: " << entry.blockIndex << "\n";
328        const CodeBlock& cblock = codeBlocks[entry.blockIndex];
329        for (const auto& sentry: cblock.ssaInfoMap)
330        {
331            const SSAInfo& sinfo = sentry.second;
332            if (sinfo.ssaIdChange != 0)
333                stackVarMap[sentry.first] = { sinfo.ssaId + sinfo.ssaIdChange - 1 };
334        }
335        if (entry.nextIndex > cblock.nexts.size())
336            applyCallToStackVarMap(cblock, routineMap, stackVarMap,
337                        entry.blockIndex, entry.nextIndex);
338       
339        // put to first point cache
340        if (waysToCache[pfit->blockIndex] &&
341            !resFirstPointsCache.hasKey(pfit->blockIndex))
342        {
343            ARDOut << "put pfcache " << pfit->blockIndex << "\n";
344            resFirstPointsCache.put(pfit->blockIndex, stackVarMap);
345        }
346    }
347   
348    RBWSSAIdMap cacheSecPoints;
349    const bool toCache = (!resSecondPointsCache.hasKey(nextBlock)) &&
350                cblocksToCache.count(nextBlock)>=2;
351   
352    //std::stack<CallStackEntry> callStack = prevCallStack;
353    // traverse by graph from next block
354    std::deque<FlowStackEntry2> flowStack;
355    flowStack.push_back({ nextBlock, 0 });
356    CBlockBitPool visited(codeBlocks.size(), false);
357   
358    // already read in current path
359    // key - vreg, value - source block where vreg of conflict found
360    std::unordered_map<AsmSingleVReg, BlockIndex> alreadyReadMap;
361   
362    while (!flowStack.empty())
363    {
364        FlowStackEntry2& entry = flowStack.back();
365        const CodeBlock& cblock = codeBlocks[entry.blockIndex];
366       
367        if (entry.nextIndex == 0)
368        {
369            // process current block
370            if (!visited[entry.blockIndex])
371            {
372                visited[entry.blockIndex] = true;
373                ARDOut << "  resolv: " << entry.blockIndex << "\n";
374               
375                const RBWSSAIdMap* resSecondPoints =
376                        resSecondPointsCache.use(entry.blockIndex);
377                if (resSecondPoints == nullptr)
378                    for (auto& sentry: cblock.ssaInfoMap)
379                        handleSSAEntryWhileResolving(&replacesMap, &stackVarMap,
380                                alreadyReadMap, entry, sentry,
381                                toCache ? &cacheSecPoints : nullptr);
382                else // to use cache
383                {
384                    useResSecPointCache(&replacesMap, &stackVarMap, alreadyReadMap,
385                            resSecondPoints, entry.blockIndex,
386                            toCache ? &cacheSecPoints : nullptr);
387                    flowStack.pop_back();
388                    continue;
389                }
390            }
391            else
392            {
393                cblocksToCache.increase(entry.blockIndex);
394                ARDOut << "cblockToCache: " << entry.blockIndex << "=" <<
395                            cblocksToCache.count(entry.blockIndex) << "\n";
396                // back, already visited
397                ARDOut << "resolv already: " << entry.blockIndex << "\n";
398                flowStack.pop_back();
399                continue;
400            }
401        }
402       
403        if (entry.nextIndex < cblock.nexts.size())
404        {
405            flowStack.push_back({ cblock.nexts[entry.nextIndex].block, 0 });
406            entry.nextIndex++;
407        }
408        else if (((entry.nextIndex==0 && cblock.nexts.empty()) ||
409                // if have any call then go to next block
410                (cblock.haveCalls && entry.nextIndex==cblock.nexts.size())) &&
411                 !cblock.haveReturn && !cblock.haveEnd)
412        {
413            // add toResolveMap ssaIds inside called routines
414            for (const auto& next: cblock.nexts)
415                if (next.isCall)
416                {
417                    const RoutineData& rdata = routineMap.find(next.block)->second;
418                    for (const auto& v: rdata.rbwSSAIdMap)
419                        alreadyReadMap.insert({v.first, entry.blockIndex });
420                    for (const auto& v: rdata.lastSSAIdMap)
421                        alreadyReadMap.insert({v.first, entry.blockIndex });
422                }
423           
424            flowStack.push_back({ entry.blockIndex+1, 0 });
425            entry.nextIndex++;
426        }
427        else // back
428        {
429            // remove old to resolve in leaved way to allow collecting next ssaId
430            // before write (can be different due to earlier visit)
431            for (const auto& next: cblock.nexts)
432                if (next.isCall)
433                {
434                    const RoutineData& rdata = routineMap.find(next.block)->second;
435                    for (const auto& v: rdata.rbwSSAIdMap)
436                    {
437                        auto it = alreadyReadMap.find(v.first);
438                        if (it != alreadyReadMap.end() && it->second == entry.blockIndex)
439                            alreadyReadMap.erase(it);
440                    }
441                    for (const auto& v: rdata.lastSSAIdMap)
442                    {
443                        auto it = alreadyReadMap.find(v.first);
444                        if (it != alreadyReadMap.end() && it->second == entry.blockIndex)
445                            alreadyReadMap.erase(it);
446                    }
447                }
448           
449            for (const auto& sentry: cblock.ssaInfoMap)
450            {
451                auto it = alreadyReadMap.find(sentry.first);
452                if (it != alreadyReadMap.end() && it->second == entry.blockIndex)
453                    // remove old to resolve in leaved way to allow collecting next ssaId
454                    // before write (can be different due to earlier visit)
455                    alreadyReadMap.erase(it);
456            }
457            ARDOut << "  popresolv\n";
458           
459            if (cblocksToCache.count(entry.blockIndex)==2 &&
460                !resSecondPointsCache.hasKey(entry.blockIndex))
461                // add to cache
462                addResSecCacheEntry(routineMap, codeBlocks, resSecondPointsCache,
463                            entry.blockIndex);
464           
465            flowStack.pop_back();
466        }
467    }
468   
469    if (toCache)
470        resSecondPointsCache.put(nextBlock, cacheSecPoints);
471}
472
473// join ret SSAId Map - src - last SSAIdMap from called routine
474static void joinRetSSAIdMap(RetSSAIdMap& dest, const LastSSAIdMap& src,
475                BlockIndex routineBlock)
476{
477    for (const auto& entry: src)
478    {
479        ARDOut << "  joinRetSSAIdMap: " << entry.first.regVar << ":" <<
480                cxuint(entry.first.index) << ":";
481        for (size_t v: entry.second)
482            ARDOut << " " << v;
483        ARDOut << "\n";
484        // insert if not inserted
485        auto res = dest.insert({entry.first, { { routineBlock }, entry.second } });
486        if (res.second)
487            continue; // added new
488        VectorSet<size_t>& destEntry = res.first->second.ssaIds;
489        res.first->second.routines.push_back(routineBlock);
490        // add new ways
491        for (size_t ssaId: entry.second)
492            destEntry.insertValue(ssaId);
493        ARDOut << "    :";
494        for (size_t v: destEntry)
495            ARDOut << " " << v;
496        ARDOut << "\n";
497    }
498}
499
500// simple join last ssaid map
501static void joinLastSSAIdMap(LastSSAIdMap& dest, const LastSSAIdMap& src)
502{
503    for (const auto& entry: src)
504    {
505        ARDOut << "  joinLastSSAIdMap: " << entry.first.regVar << ":" <<
506                cxuint(entry.first.index) << ":";
507        for (size_t v: entry.second)
508            ARDOut << " " << v;
509        ARDOut << "\n";
510        auto res = dest.insert(entry); // find
511        if (res.second)
512            continue; // added new
513        VectorSet<size_t>& destEntry = res.first->second;
514        // add new ways
515        for (size_t ssaId: entry.second)
516            destEntry.insertValue(ssaId);
517        ARDOut << "    :";
518        for (size_t v: destEntry)
519            ARDOut << " " << v;
520        ARDOut << "\n";
521    }
522}
523
524// join last SSAIdMap of the routine including later routine call
525// dest - dest last SSAId map, src - source lastSSAIdMap
526// laterRdatas - data of subroutine/routine exeuted after src lastSSAIdMap state
527static void joinLastSSAIdMapInt(LastSSAIdMap& dest, const LastSSAIdMap& src,
528                    const LastSSAIdMap& laterRdataCurSSAIdMap,
529                    const LastSSAIdMap& laterRdataLastSSAIdMap, bool loop)
530{
531    for (const auto& entry: src)
532    {
533        auto lsit = laterRdataLastSSAIdMap.find(entry.first);
534        if (lsit != laterRdataLastSSAIdMap.end())
535        {
536            auto csit = laterRdataCurSSAIdMap.find(entry.first);
537            if (csit != laterRdataCurSSAIdMap.end() && !csit->second.empty())
538            {
539                // if found in last ssa ID map,
540                // but has first value (some way do not change SSAId)
541                // then pass to add new ssaIds before this point
542                if (!lsit->second.hasValue(csit->second[0]))
543                    continue; // otherwise, skip
544            }
545        }
546        ARDOut << "  joinLastSSAIdMapInt: " << entry.first.regVar << ":" <<
547                cxuint(entry.first.index) << ":";
548        for (size_t v: entry.second)
549            ARDOut << " " << v;
550        ARDOut << "\n";
551        auto res = dest.insert(entry); // find
552        if (res.second)
553            continue; // added new
554        VectorSet<size_t>& destEntry = res.first->second;
555        // add new ways
556        for (size_t ssaId: entry.second)
557            destEntry.insertValue(ssaId);
558        ARDOut << "    :";
559        for (size_t v: destEntry)
560            ARDOut << " " << v;
561        ARDOut << "\n";
562    }
563    if (!loop) // do not if loop
564        joinLastSSAIdMap(dest, laterRdataLastSSAIdMap);
565}
566
567static void joinLastSSAIdMap(LastSSAIdMap& dest, const LastSSAIdMap& src,
568                    const RoutineData& laterRdata, bool loop = false)
569{
570    joinLastSSAIdMapInt(dest, src, laterRdata.curSSAIdMap, laterRdata.lastSSAIdMap, loop);
571}
572
573
574// join routine data from child call with data from parent routine
575// (just join child call from parent)
576static void joinRoutineData(RoutineData& dest, const RoutineData& src,
577            const std::unordered_map<AsmSingleVReg, size_t>& curSSAIdMap,
578            bool notFirstReturn)
579{
580    // insert readBeforeWrite only if doesnt exists in destination
581    dest.rbwSSAIdMap.insert(src.rbwSSAIdMap.begin(), src.rbwSSAIdMap.end());
582    dest.origRbwSSAIdMap.insert(src.origRbwSSAIdMap.begin(), src.origRbwSSAIdMap.end());
583   
584    //joinLastSSAIdMap(dest.curSSAIdMap, src.lastSSAIdMap);
585   
586    for (const auto& entry: src.lastSSAIdMap)
587    {
588        ARDOut << "  joinRoutineData: " << entry.first.regVar << ":" <<
589                cxuint(entry.first.index) << ":";
590        for (size_t v: entry.second)
591            ARDOut << " " << v;
592        ARDOut << "\n";
593        auto res = dest.curSSAIdMap.insert(entry); // find
594        VectorSet<size_t>& destEntry = res.first->second;
595       
596        if (!res.second)
597        {
598            // add new ways
599            for (size_t ssaId: entry.second)
600                destEntry.insertValue(ssaId);
601        }
602        else if (notFirstReturn)
603        {
604            auto csit = curSSAIdMap.find(entry.first);
605            // insert to lastSSAIdMap if no ssaIds for regvar in lastSSAIdMap
606            dest.lastSSAIdMap.insert({ entry.first,
607                        { (csit!=curSSAIdMap.end() ? csit->second : 1)-1 } });
608        }
609       
610        ARDOut << "    :";
611        for (size_t v: destEntry)
612            ARDOut << " " << v;
613        ARDOut << "\n";
614    }
615}
616
617// reduce retSSAIds for calls (for all read before write SSAIds for current code block)
618static void reduceSSAIdsForCalls(FlowStackEntry& entry,
619            const std::vector<CodeBlock>& codeBlocks,
620            RetSSAIdMap& retSSAIdMap, RoutineMap& routineMap,
621            SSAReplacesMap& ssaReplacesMap)
622{
623    if (retSSAIdMap.empty())
624        return;
625    LastSSAIdMap rbwSSAIdMap;
626    std::unordered_set<AsmSingleVReg> reduced;
627    std::unordered_set<AsmSingleVReg> changed;
628    const CodeBlock& cblock = codeBlocks[entry.blockIndex.index];
629    // collect rbw SSAIds
630    for (const NextBlock next: cblock.nexts)
631        if (next.isCall)
632        {
633            auto it = routineMap.find(next.block); // must find
634            for (const auto& rentry: it->second.rbwSSAIdMap)
635                rbwSSAIdMap.insertSSAId(rentry.first,rentry.second);
636           
637        }
638    for (const NextBlock next: cblock.nexts)
639        if (next.isCall)
640        {
641            auto it = routineMap.find(next.block); // must find
642            // add changed
643            for (const auto& lentry: it->second.lastSSAIdMap)
644                if (rbwSSAIdMap.find(lentry.first) == rbwSSAIdMap.end())
645                    changed.insert(lentry.first);
646        }
647   
648    // reduce SSAIds
649    for (const auto& rentry: retSSAIdMap)
650    {
651        auto ssaIdsIt = rbwSSAIdMap.find(rentry.first);
652        if (ssaIdsIt != rbwSSAIdMap.end())
653        {
654            const VectorSet<size_t>& ssaIds = ssaIdsIt->second;
655            const VectorSet<size_t>& rssaIds = rentry.second.ssaIds;
656            Array<size_t> outSSAIds(ssaIds.size() + rssaIds.size());
657            std::copy(rssaIds.begin(), rssaIds.end(), outSSAIds.begin());
658            std::copy(ssaIds.begin(), ssaIds.end(), outSSAIds.begin()+rssaIds.size());
659           
660            std::sort(outSSAIds.begin(), outSSAIds.end());
661            outSSAIds.resize(std::unique(outSSAIds.begin(), outSSAIds.end()) -
662                        outSSAIds.begin());
663            size_t minSSAId = outSSAIds.front();
664            if (outSSAIds.size() >= 2)
665            {
666                for (auto sit = outSSAIds.begin()+1; sit != outSSAIds.end(); ++sit)
667                    insertReplace(ssaReplacesMap, rentry.first, *sit, minSSAId);
668               
669                ARDOut << "calls retssa ssaid: " << rentry.first.regVar << ":" <<
670                        rentry.first.index << "\n";
671            }
672           
673            for (BlockIndex rblock: rentry.second.routines)
674                routineMap.find(rblock)->second.lastSSAIdMap[rentry.first] =
675                            VectorSet<size_t>({ minSSAId });
676            reduced.insert(rentry.first);
677        }
678    }
679    for (const AsmSingleVReg& vreg: reduced)
680        retSSAIdMap.erase(vreg);
681    reduced.clear();
682       
683    for (const AsmSingleVReg& vreg: changed)
684    {
685        auto rit = retSSAIdMap.find(vreg);
686        if (rit != retSSAIdMap.end())
687        {
688            // if modified
689            // put before removing to revert for other ways after calls
690            auto res = entry.prevRetSSAIdSets.insert(*rit);
691            if (res.second)
692                res.first->second = rit->second;
693            // just remove, if some change without read before
694            retSSAIdMap.erase(rit);
695        }
696    }
697}
698
699static void reduceSSAIds2(std::unordered_map<AsmSingleVReg, size_t>& curSSAIdMap,
700            RetSSAIdMap& retSSAIdMap, FlowStackEntry& entry, const SSAEntry& ssaEntry)
701{
702    const SSAInfo& sinfo = ssaEntry.second;
703    size_t& ssaId = curSSAIdMap[ssaEntry.first];
704    auto ssaIdsIt = retSSAIdMap.find(ssaEntry.first);
705    if (ssaIdsIt != retSSAIdMap.end() && sinfo.readBeforeWrite)
706    {
707        auto& ssaIds = ssaIdsIt->second.ssaIds;
708        ssaId = ssaIds.front()+1; // plus one
709        retSSAIdMap.erase(ssaIdsIt);
710    }
711    else if (ssaIdsIt != retSSAIdMap.end() && sinfo.ssaIdChange!=0)
712    {
713        // put before removing to revert for other ways after calls
714        auto res = entry.prevRetSSAIdSets.insert(*ssaIdsIt);
715        if (res.second)
716            res.first->second = ssaIdsIt->second;
717        // just remove, if some change without read before
718        retSSAIdMap.erase(ssaIdsIt);
719    }
720}
721
722// reduce retSSAIds (last SSAIds for regvar) while passing by code block
723// and emits SSA replaces for these ssaids
724static bool reduceSSAIds(std::unordered_map<AsmSingleVReg, size_t>& curSSAIdMap,
725            RetSSAIdMap& retSSAIdMap, RoutineMap& routineMap,
726            SSAReplacesMap& ssaReplacesMap, FlowStackEntry& entry, SSAEntry& ssaEntry)
727{
728    SSAInfo& sinfo = ssaEntry.second;
729    size_t& ssaId = curSSAIdMap[ssaEntry.first];
730    auto ssaIdsIt = retSSAIdMap.find(ssaEntry.first);
731    if (ssaIdsIt != retSSAIdMap.end() && sinfo.readBeforeWrite)
732    {
733        auto& ssaIds = ssaIdsIt->second.ssaIds;
734       
735        if (sinfo.ssaId != SIZE_MAX)
736        {
737            VectorSet<size_t> outSSAIds = ssaIds;
738            outSSAIds.insertValue(ssaId-1); // ???
739            // already set
740            if (outSSAIds.size() >= 1)
741            {
742                // reduce to minimal ssaId from all calls
743                std::sort(outSSAIds.begin(), outSSAIds.end());
744                outSSAIds.resize(std::unique(outSSAIds.begin(), outSSAIds.end()) -
745                            outSSAIds.begin());
746                // insert SSA replaces
747                if (outSSAIds.size() >= 2)
748                {
749                    size_t minSSAId = outSSAIds.front();
750                    for (auto sit = outSSAIds.begin()+1; sit != outSSAIds.end(); ++sit)
751                        insertReplace(ssaReplacesMap, ssaEntry.first, *sit, minSSAId);
752                }
753            }
754        }
755        else if (ssaIds.size() >= 2)
756        {
757            // reduce to minimal ssaId from all calls
758            std::sort(ssaIds.begin(), ssaIds.end());
759            ssaIds.resize(std::unique(ssaIds.begin(), ssaIds.end()) - ssaIds.begin());
760            // insert SSA replaces
761            size_t minSSAId = ssaIds.front();
762            for (auto sit = ssaIds.begin()+1; sit != ssaIds.end(); ++sit)
763                insertReplace(ssaReplacesMap, ssaEntry.first, *sit, minSSAId);
764            ssaId = minSSAId+1; // plus one
765        }
766        else if (ssaIds.size() == 1)
767            ssaId = ssaIds.front()+1; // plus one
768       
769        ARDOut << "retssa ssaid: " << ssaEntry.first.regVar << ":" <<
770                ssaEntry.first.index << ": " << ssaId << "\n";
771        // replace smallest ssaId in routineMap lastSSAId entry
772        // reduce SSAIds replaces
773        for (BlockIndex rblock: ssaIdsIt->second.routines)
774        {
775            RoutineData& rdata = routineMap.find(rblock)->second;
776            size_t rbwRetSSAId = SIZE_MAX;
777            auto rbwIt = rdata.rbwSSAIdMap.find(ssaEntry.first);
778            auto rlsit = rdata.lastSSAIdMap.find(ssaEntry.first);
779            if (rbwIt != rdata.rbwSSAIdMap.end() && rlsit->second.hasValue(rbwIt->second))
780                rbwRetSSAId = rbwIt->second;
781            rlsit->second = VectorSet<size_t>({ ssaId-1 });
782            if (rbwRetSSAId != SIZE_MAX)
783            {
784                ARDOut << "  keep retSSAId rbw: " << rbwRetSSAId << "\n";
785                // add retSSAId without changes (in way without regvar changes)
786                rlsit->second.insertValue(rbwRetSSAId);
787            }
788        }
789        // finally remove from container (because obsolete)
790        retSSAIdMap.erase(ssaIdsIt);
791        return true;
792    }
793    else if (ssaIdsIt != retSSAIdMap.end() && sinfo.ssaIdChange!=0)
794    {
795        // put before removing to revert for other ways after calls
796        auto res = entry.prevRetSSAIdSets.insert(*ssaIdsIt);
797        if (res.second)
798            res.first->second = ssaIdsIt->second;
799        // just remove, if some change without read before
800        retSSAIdMap.erase(ssaIdsIt);
801    }
802    return false;
803}
804
805// update single current SSAId for routine and optionally lastSSAIdMap if returns
806// has been encountered but not regvar
807static void updateRoutineData(RoutineData& rdata, const SSAEntry& ssaEntry,
808                size_t prevSSAId)
809{
810    const SSAInfo& sinfo = ssaEntry.second;
811    bool beforeFirstAccess = true;
812    // put first SSAId before write
813    if (sinfo.readBeforeWrite)
814    {
815        //ARDOut << "PutCRBW: " << sinfo.ssaIdBefore << "\n";
816        if (!rdata.rbwSSAIdMap.insert({ ssaEntry.first, prevSSAId }).second)
817            // if already added
818            beforeFirstAccess = false;
819       
820        rdata.origRbwSSAIdMap.insert({ ssaEntry.first,
821                        ssaEntry.second.ssaIdBefore }).second;
822    }
823   
824    if (sinfo.ssaIdChange != 0)
825    {
826        //ARDOut << "PutC: " << sinfo.ssaIdLast << "\n";
827        auto res = rdata.curSSAIdMap.insert({ ssaEntry.first, { sinfo.ssaIdLast } });
828        // put last SSAId
829        if (!res.second)
830        {
831            beforeFirstAccess = false;
832            // if not inserted
833            VectorSet<size_t>& ssaIds = res.first->second;
834            ssaIds.clear(); // clear all ssaIds in currentSSAID entry
835            ssaIds.insertValue(sinfo.ssaIdLast);
836        }
837        // add readbefore if in previous returns if not added yet
838        if (rdata.notFirstReturn && beforeFirstAccess)
839        {
840            rdata.lastSSAIdMap.insert({ ssaEntry.first, { prevSSAId } });
841            for (auto& loopEnd: rdata.loopEnds)
842                loopEnd.second.ssaIdMap.insert({ ssaEntry.first, { prevSSAId } });
843        }
844    }
845    else
846    {
847        // insert read ssaid if no change
848        auto res = rdata.curSSAIdMap.insert({ ssaEntry.first, { prevSSAId } });
849        if (!res.second)
850        {
851            VectorSet<size_t>& ssaIds = res.first->second;
852            ssaIds.insertValue(prevSSAId);
853        }
854    }
855}
856
857static void initializePrevRetSSAIds(
858            const std::unordered_map<AsmSingleVReg, size_t>& curSSAIdMap,
859            const RetSSAIdMap& retSSAIdMap, const RoutineData& rdata,
860            FlowStackEntry& entry)
861{
862    for (const auto& v: rdata.lastSSAIdMap)
863    {
864        auto res = entry.prevRetSSAIdSets.insert({v.first, {}});
865        if (!res.second)
866            continue; // already added, do not change
867        auto rfit = retSSAIdMap.find(v.first);
868        if (rfit != retSSAIdMap.end())
869            res.first->second = rfit->second;
870       
871        auto csit = curSSAIdMap.find(v.first);
872        res.first->second.prevSSAId = (csit!=curSSAIdMap.end() ? csit->second : 1);
873    }
874}
875
876// revert retSSAIdMap while leaving from code block
877static void revertRetSSAIdMap(std::unordered_map<AsmSingleVReg, size_t>& curSSAIdMap,
878            RetSSAIdMap& retSSAIdMap, FlowStackEntry& entry, RoutineData* rdata)
879{
880    // revert retSSAIdMap
881    for (auto v: entry.prevRetSSAIdSets)
882    {
883        auto rfit = retSSAIdMap.find(v.first);
884        if (rdata!=nullptr && rfit != retSSAIdMap.end())
885        {
886            VectorSet<size_t>& ssaIds = rdata->curSSAIdMap[v.first];
887            for (size_t ssaId: rfit->second.ssaIds)
888                ssaIds.eraseValue(ssaId);
889        }
890       
891        if (!v.second.ssaIds.empty())
892        {
893            // just add if previously present
894            if (rfit != retSSAIdMap.end())
895                rfit->second = v.second;
896            else
897                retSSAIdMap.insert(v);
898        }
899        else // erase if empty
900            retSSAIdMap.erase(v.first);
901       
902        size_t oldSSAId = curSSAIdMap[v.first]-1;
903        curSSAIdMap[v.first] = v.second.prevSSAId;
904        if (rdata!=nullptr)
905        {
906            VectorSet<size_t>& ssaIds = rdata->curSSAIdMap[v.first];
907            ssaIds.eraseValue(oldSSAId); // ??? need extra constraints
908            for (size_t ssaId: v.second.ssaIds)
909                ssaIds.insertValue(ssaId);
910            if (v.second.ssaIds.empty())
911            {
912                auto cit = curSSAIdMap.find(v.first);
913                ssaIds.insertValue((cit!=curSSAIdMap.end() ? cit->second : 1)-1);
914            }
915           
916            ARDOut << " revertSSAIdPopEntry" << entry.blockIndex << ": " <<
917                    v.first.regVar << ":" << v.first.index << ":";
918            for (size_t v: ssaIds)
919                ARDOut << " " << v;
920            ARDOut << "\n";
921        }
922    }
923}
924
925// update current SSAId in curSSAIdMap for routine while leaving from code block
926static void updateRoutineCurSSAIdMap(RoutineData* rdata, const SSAEntry& ssaEntry,
927            const FlowStackEntry& entry, size_t curSSAId, size_t nextSSAId)
928{
929    VectorSet<size_t>& ssaIds = rdata->curSSAIdMap[ssaEntry.first];
930    ARDOut << " updateRoutineCurSSAIdMap " << entry.blockIndex << ": " <<
931                ssaEntry.first.regVar << ":" << ssaEntry.first.index << ":";
932    for (size_t v: ssaIds)
933        ARDOut << " " << v;
934    ARDOut << "\n";
935   
936    // if cblock with some children
937    if (nextSSAId != curSSAId)
938        ssaIds.eraseValue(nextSSAId-1);
939   
940    // push previous SSAId to lastSSAIdMap (later will be replaced)
941    ssaIds.insertValue(curSSAId-1);
942   
943    ARDOut << " updateRoutineCurSSAIdMap after " << entry.blockIndex << ": " <<
944                ssaEntry.first.regVar << ":" << ssaEntry.first.index << ":";
945    for (size_t v: ssaIds)
946        ARDOut << " " << v;
947    ARDOut << "\n";
948}
949
950static bool tryAddLoopEnd(const FlowStackEntry& entry, BlockIndex routineBlock,
951                RoutineData& rdata, bool isLoop, bool noMainLoop)
952{
953    if (isLoop && (!noMainLoop || routineBlock != entry.blockIndex))
954    {
955        // handle loops
956        ARDOut << "  join loop ssaids: " << entry.blockIndex << "\n";
957        // add to routine data loopEnds
958        auto loopsit2 = rdata.loopEnds.find(entry.blockIndex);
959        if (loopsit2 != rdata.loopEnds.end())
960        {
961            if (!loopsit2->second.passed)
962                // still in loop join ssaid map
963                joinLastSSAIdMap(loopsit2->second.ssaIdMap, rdata.curSSAIdMap);
964        }
965        else
966            rdata.loopEnds.insert({ entry.blockIndex, { rdata.curSSAIdMap, false } });
967        return true;
968    }
969    return false;
970}
971
972
973static void createRoutineData(const std::vector<CodeBlock>& codeBlocks,
974        std::unordered_map<AsmSingleVReg, size_t>& curSSAIdMap,
975        const std::unordered_set<BlockIndex>& loopBlocks,
976        const std::unordered_set<BlockIndex>& callBlocks,
977        const ResSecondPointsToCache& subroutToCache,
978        SimpleCache<BlockIndex, RoutineData>& subroutinesCache,
979        const RoutineMap& routineMap, RoutineData& rdata,
980        BlockIndex routineBlock, bool noMainLoop = false,
981        const CBlockBitPool& prevFlowStackBlocks = {})
982{
983    ARDOut << "--------- createRoutineData ----------------\n";
984    CBlockBitPool visited(codeBlocks.size(), false);
985    CBlockBitPool haveReturnBlocks(codeBlocks.size(), false);
986   
987    VectorSet<BlockIndex> activeLoops;
988    SubrLoopsMap subrLoopsMap;
989    SubrLoopsMap loopSubrsMap;
990    RoutineMap subrDataForLoopMap;
991    std::deque<FlowStackEntry> flowStack;
992    CBlockBitPool flowStackBlocks(codeBlocks.size(), false);
993    if (!prevFlowStackBlocks.empty())
994        flowStackBlocks = prevFlowStackBlocks;
995    // last SSA ids map from returns
996    RetSSAIdMap retSSAIdMap;
997    flowStack.push_back({ routineBlock, 0 });
998    flowStackBlocks[routineBlock] = true;
999   
1000    while (!flowStack.empty())
1001    {
1002        FlowStackEntry& entry = flowStack.back();
1003        const CodeBlock& cblock = codeBlocks[entry.blockIndex.index];
1004       
1005        auto addSubroutine = [&](
1006            std::unordered_map<BlockIndex, LoopSSAIdMap>::const_iterator loopsit2,
1007            bool applyToMainRoutine)
1008        {
1009            if (subroutinesCache.hasKey(entry.blockIndex))
1010            {
1011                // if already put, just applyToMainRoutine if needed
1012                if (applyToMainRoutine &&
1013                    loopBlocks.find(entry.blockIndex) != loopBlocks.end() &&
1014                    loopsit2 != rdata.loopEnds.end())
1015                {
1016                    RoutineData* subRdata = subroutinesCache.use(entry.blockIndex);
1017                    joinLastSSAIdMap(rdata.lastSSAIdMap, loopsit2->second.ssaIdMap,
1018                                        *subRdata, true);
1019                }
1020                return;
1021            }
1022           
1023            RoutineData subrData;
1024            const bool oldFB = flowStackBlocks[entry.blockIndex];
1025            flowStackBlocks[entry.blockIndex] = !oldFB;
1026            createRoutineData(codeBlocks, curSSAIdMap, loopBlocks, callBlocks,
1027                    subroutToCache, subroutinesCache, routineMap, subrData,
1028                    entry.blockIndex, true, flowStackBlocks);
1029            RoutineData subrDataCopy;
1030            flowStackBlocks[entry.blockIndex] = oldFB;
1031           
1032            if (loopBlocks.find(entry.blockIndex) != loopBlocks.end())
1033            {   // leave from loop point
1034                ARDOut << "   loopfound " << entry.blockIndex << "\n";
1035                if (loopsit2 != rdata.loopEnds.end())
1036                {
1037                    subrDataCopy = subrData;
1038                    subrDataForLoopMap.insert({ entry.blockIndex, subrDataCopy });
1039                    ARDOut << "   loopssaId2Map: " <<
1040                            entry.blockIndex << "\n";
1041                    joinLastSSAIdMap(subrData.lastSSAIdMap,
1042                            loopsit2->second.ssaIdMap, subrData, true);
1043                    ARDOut << "   loopssaIdMap2End: \n";
1044                    if (applyToMainRoutine)
1045                        joinLastSSAIdMap(rdata.lastSSAIdMap, loopsit2->second.ssaIdMap,
1046                                        subrDataCopy, true);
1047                }
1048            }
1049           
1050            // apply loop to subroutines
1051            auto it = loopSubrsMap.find(entry.blockIndex);
1052            if (it != loopSubrsMap.end())
1053            {
1054                ARDOut << "    found loopsubrsmap: " << entry.blockIndex << ":";
1055                for (BlockIndex subr: it->second)
1056                {
1057                    ARDOut << " " << subr;
1058                    RoutineData* subrData2 = subroutinesCache.use(subr);
1059                    if (subrData2 == nullptr)
1060                        continue;
1061                    RoutineData subrData2Copy = *subrData2;
1062                    ARDOut << "*";
1063                    joinLastSSAIdMap(subrData2Copy.lastSSAIdMap,
1064                            loopsit2->second.ssaIdMap, subrDataCopy, false);
1065                    // reinsert subroutine into subroutine cache
1066                    subrData2Copy.calculateWeight();
1067                    subroutinesCache.put(subr, subrData2Copy);
1068                }
1069                ARDOut << "\n";
1070            }
1071            // apply loops to this subroutine
1072            auto it2 = subrLoopsMap.find(entry.blockIndex);
1073            if (it2 != subrLoopsMap.end())
1074            {
1075                ARDOut << "    found subrloopsmap: " << entry.blockIndex << ":";
1076                for (auto lit2 = it2->second.rbegin(); lit2 != it2->second.rend(); ++lit2)
1077                {
1078                    BlockIndex loop = *lit2;
1079                    auto loopsit3 = rdata.loopEnds.find(loop);
1080                    if (loopsit3 == rdata.loopEnds.end() ||
1081                        activeLoops.hasValue(loop))
1082                        continue;
1083                    ARDOut << " " << loop;
1084                    auto  itx = subrDataForLoopMap.find(loop);
1085                    if (itx != subrDataForLoopMap.end())
1086                        joinLastSSAIdMap(subrData.lastSSAIdMap,
1087                                loopsit3->second.ssaIdMap, itx->second, false);
1088                }
1089                ARDOut << "\n";
1090            }
1091           
1092            subrData.calculateWeight();
1093            subroutinesCache.put(entry.blockIndex, subrData);
1094        };
1095       
1096        if (entry.nextIndex == 0)
1097        {
1098            bool isLoop = loopBlocks.find(entry.blockIndex) != loopBlocks.end();
1099           
1100            if (!prevFlowStackBlocks.empty() && prevFlowStackBlocks[entry.blockIndex])
1101            {
1102                tryAddLoopEnd(entry, routineBlock, rdata, isLoop, noMainLoop);
1103               
1104                flowStackBlocks[entry.blockIndex] = !flowStackBlocks[entry.blockIndex];
1105                flowStack.pop_back();
1106                continue;
1107            }
1108           
1109            // process current block
1110            const RoutineData* cachedRdata = nullptr;
1111           
1112            if (routineBlock != entry.blockIndex)
1113            {
1114                cachedRdata = subroutinesCache.use(entry.blockIndex);
1115                if (cachedRdata == nullptr)
1116                {
1117                    // try in routine map
1118                    auto rit = routineMap.find(entry.blockIndex);
1119                    if (rit != routineMap.end())
1120                        cachedRdata = &rit->second;
1121                }
1122                if (!isLoop && visited[entry.blockIndex] && cachedRdata == nullptr &&
1123                    subroutToCache.count(entry.blockIndex)!=0)
1124                {
1125                    auto loopsit2 = rdata.loopEnds.find(entry.blockIndex);
1126                    ARDOut << "-- subrcache2 for " << entry.blockIndex << "\n";
1127                    addSubroutine(loopsit2, false);
1128                    cachedRdata = subroutinesCache.use(entry.blockIndex);
1129                }
1130            }
1131           
1132            if (cachedRdata != nullptr)
1133            {
1134                ARDOut << "use cached subr " << entry.blockIndex << "\n";
1135                ARDOut << "procret2: " << entry.blockIndex << "\n";
1136                if (visited[entry.blockIndex] && !haveReturnBlocks[entry.blockIndex])
1137                {
1138                    // no joining. no returns
1139                    ARDOut << "procretend2 nojoin\n";
1140                    flowStackBlocks[entry.blockIndex] = !flowStackBlocks[entry.blockIndex];
1141                    flowStack.pop_back();
1142                    continue;
1143                }
1144                joinLastSSAIdMap(rdata.lastSSAIdMap, rdata.curSSAIdMap, *cachedRdata);
1145                // get not given rdata curSSAIdMap ssaIds but present in cachedRdata
1146                // curSSAIdMap
1147                for (const auto& entry: cachedRdata->curSSAIdMap)
1148                    if (rdata.curSSAIdMap.find(entry.first) == rdata.curSSAIdMap.end())
1149                    {
1150                        auto cit = curSSAIdMap.find(entry.first);
1151                        size_t prevSSAId = (cit!=curSSAIdMap.end() ? cit->second : 1)-1;
1152                        rdata.curSSAIdMap.insert({ entry.first, { prevSSAId } });
1153                       
1154                        if (rdata.notFirstReturn)
1155                        {
1156                            rdata.lastSSAIdMap.insertSSAId(entry.first, prevSSAId);
1157                            for (auto& loopEnd: rdata.loopEnds)
1158                                loopEnd.second.ssaIdMap.
1159                                        insertSSAId(entry.first, prevSSAId);
1160                        }
1161                    }
1162               
1163                // join loopEnds
1164                for (const auto& loopEnd: cachedRdata->loopEnds)
1165                {
1166                    auto res = rdata.loopEnds.insert({ loopEnd.first, LoopSSAIdMap{} });
1167                    // true - do not add cached rdata loopend, because it was added
1168                    joinLastSSAIdMapInt(res.first->second.ssaIdMap, rdata.curSSAIdMap,
1169                                cachedRdata->curSSAIdMap, loopEnd.second.ssaIdMap, true);
1170                }
1171                ARDOut << "procretend2\n";
1172                flowStackBlocks[entry.blockIndex] = !flowStackBlocks[entry.blockIndex];
1173                flowStack.pop_back();
1174                // propagate haveReturn to previous block
1175                flowStack.back().haveReturn = true;
1176                haveReturnBlocks[flowStack.back().blockIndex] = true;
1177                continue;
1178            }
1179            else if (!visited[entry.blockIndex])
1180            {
1181                // set up loops for which subroutine is present
1182                if (subroutToCache.count(entry.blockIndex)!=0 && !activeLoops.empty())
1183                {
1184                    subrLoopsMap.insert({ entry.blockIndex, activeLoops });
1185                    for (BlockIndex loop: activeLoops)
1186                    {
1187                        auto res = loopSubrsMap.insert({ loop, { entry.blockIndex } });
1188                        if (!res.second)
1189                            res.first->second.insertValue(entry.blockIndex);
1190                    }
1191                }
1192               
1193                if (loopBlocks.find(entry.blockIndex) != loopBlocks.end())
1194                    activeLoops.insertValue(entry.blockIndex);
1195                ARDOut << "proc: " << entry.blockIndex << "\n";
1196                visited[entry.blockIndex] = true;
1197               
1198                for (const auto& ssaEntry: cblock.ssaInfoMap)
1199                    if (ssaEntry.first.regVar != nullptr)
1200                    {
1201                        reduceSSAIds2(curSSAIdMap, retSSAIdMap, entry, ssaEntry);
1202                        // put data to routine data
1203                        updateRoutineData(rdata, ssaEntry, curSSAIdMap[ssaEntry.first]-1);
1204                       
1205                        if (ssaEntry.second.ssaIdChange!=0)
1206                            curSSAIdMap[ssaEntry.first] = ssaEntry.second.ssaIdLast+1;
1207                    }
1208            }
1209            else
1210            {
1211                tryAddLoopEnd(entry, routineBlock, rdata, isLoop, noMainLoop);
1212                flowStackBlocks[entry.blockIndex] = !flowStackBlocks[entry.blockIndex];
1213                flowStack.pop_back();
1214                continue;
1215            }
1216        }
1217       
1218        // join and skip calls
1219        {
1220            std::vector<BlockIndex> calledRoutines;
1221            for (; entry.nextIndex < cblock.nexts.size() &&
1222                        cblock.nexts[entry.nextIndex].isCall; entry.nextIndex++)
1223            {
1224                BlockIndex rblock = cblock.nexts[entry.nextIndex].block;
1225                if (callBlocks.find(rblock) != callBlocks.end())
1226                    rblock.pass = 1;
1227                if (rblock != routineBlock)
1228                    calledRoutines.push_back(rblock);
1229            }
1230           
1231            if (!calledRoutines.empty())
1232            {
1233                // toNotClear - regvar to no keep (because is used in called routines)
1234                std::unordered_set<AsmSingleVReg> toNotClear;
1235                // if regvar any called routine (used)
1236                std::unordered_set<AsmSingleVReg> allInCalls;
1237                for (BlockIndex rblock: calledRoutines)
1238                {
1239                    const RoutineData& srcRdata = routineMap.find(rblock)->second;
1240                    // for next recursion pass call - choose origRvwSSAIdMap
1241                    // otherwise - standard rbwSsaIdMap
1242                    const std::unordered_map<AsmSingleVReg, size_t>& srcRbwSSAIdMap =
1243                        (entry.blockIndex.pass == 0 && rblock.pass!=0) ?
1244                        srcRdata.origRbwSSAIdMap : srcRdata.rbwSSAIdMap;
1245                    if (entry.blockIndex.pass == 0 && rblock.pass!=0)
1246                        ARDOut << "choose origRbwSSAIdMap: " << rblock << "\n";
1247                       
1248                    for (const auto& rbw: srcRbwSSAIdMap)
1249                    {
1250                        allInCalls.insert(rbw.first);
1251                        auto lsit = srcRdata.lastSSAIdMap.find(rbw.first);
1252                        if (lsit != srcRdata.lastSSAIdMap.end() &&
1253                             lsit->second.hasValue(rbw.second))
1254                            // if returned not modified, then do not clear this regvar
1255                            toNotClear.insert(rbw.first);
1256                    }
1257                    for (const auto& rbw: srcRdata.lastSSAIdMap)
1258                        allInCalls.insert(rbw.first);
1259                }
1260                for (auto& entry: rdata.curSSAIdMap)
1261                    // if any called routine and if to clear
1262                    if (allInCalls.find(entry.first) != allInCalls.end() &&
1263                        toNotClear.find(entry.first) == toNotClear.end())
1264                        // not found
1265                        entry.second.clear();
1266           
1267                for (BlockIndex rblock: calledRoutines)
1268                    joinRoutineData(rdata, routineMap.find(rblock)->second,
1269                                    curSSAIdMap, rdata.notFirstReturn);
1270            }
1271        }
1272       
1273        if (entry.nextIndex < cblock.nexts.size())
1274        {
1275            const BlockIndex nextBlock = { cblock.nexts[entry.nextIndex].block,
1276                        entry.blockIndex.pass };
1277            flowStack.push_back({ nextBlock, 0 });
1278            // negate - if true (already in flowstack, then popping keep this state)
1279            flowStackBlocks[nextBlock] = !flowStackBlocks[nextBlock];
1280            entry.nextIndex++;
1281        }
1282        else if (((entry.nextIndex==0 && cblock.nexts.empty()) ||
1283                // if have any call then go to next block
1284                (cblock.haveCalls && entry.nextIndex==cblock.nexts.size())) &&
1285                 !cblock.haveReturn && !cblock.haveEnd)
1286        {
1287            if (entry.nextIndex!=0) // if back from calls (just return from calls)
1288            {
1289                for (const NextBlock& next: cblock.nexts)
1290                    if (next.isCall)
1291                    {
1292                        //ARDOut << "joincall:"<< next.block << "\n";
1293                        BlockIndex rblock(next.block, entry.blockIndex.pass);
1294                        if (callBlocks.find(next.block) != callBlocks.end())
1295                            rblock.pass = 1;
1296                        auto it = routineMap.find(rblock); // must find
1297                        initializePrevRetSSAIds(curSSAIdMap, retSSAIdMap,
1298                                    it->second, entry);
1299                       
1300                        joinRetSSAIdMap(retSSAIdMap, it->second.lastSSAIdMap, rblock);
1301                    }
1302            }
1303            const BlockIndex nextBlock = entry.blockIndex+1;
1304            flowStack.push_back({ nextBlock, 0 });
1305            // negate - if true (already in flowstack, then popping keep this state)
1306            flowStackBlocks[nextBlock] = !flowStackBlocks[nextBlock];
1307            entry.nextIndex++;
1308        }
1309        else
1310        {
1311            ARDOut << "popstart: " << entry.blockIndex << "\n";
1312            if (cblock.haveReturn)
1313            {
1314                ARDOut << "procret: " << entry.blockIndex << "\n";
1315                joinLastSSAIdMap(rdata.lastSSAIdMap, rdata.curSSAIdMap);
1316                ARDOut << "procretend\n";
1317                rdata.notFirstReturn = true;
1318                entry.haveReturn = true;
1319                haveReturnBlocks[entry.blockIndex] = true;
1320            }
1321           
1322            const bool curHaveReturn = entry.haveReturn;
1323           
1324            // revert retSSAIdMap
1325            revertRetSSAIdMap(curSSAIdMap, retSSAIdMap, entry, &rdata);
1326            //
1327           
1328            for (const auto& ssaEntry: cblock.ssaInfoMap)
1329            {
1330                if (ssaEntry.first.regVar == nullptr)
1331                    continue;
1332                size_t curSSAId = ssaEntry.second.ssaIdBefore+1;
1333                size_t nextSSAId = (ssaEntry.second.ssaIdLast != SIZE_MAX) ?
1334                    ssaEntry.second.ssaIdLast+1 : curSSAId;
1335                curSSAIdMap[ssaEntry.first] = curSSAId;
1336               
1337                ARDOut << "popcurnext: " << ssaEntry.first.regVar <<
1338                            ":" << ssaEntry.first.index << ": " <<
1339                            nextSSAId << ", " << curSSAId << "\n";
1340               
1341                updateRoutineCurSSAIdMap(&rdata, ssaEntry, entry, curSSAId, nextSSAId);
1342            }
1343           
1344            activeLoops.eraseValue(entry.blockIndex);
1345           
1346            auto loopsit2 = rdata.loopEnds.find(entry.blockIndex);
1347            if (loopBlocks.find(entry.blockIndex) != loopBlocks.end())
1348            {
1349                if (loopsit2 != rdata.loopEnds.end())
1350                {
1351                    ARDOut << "   mark loopblocks passed: " <<
1352                                entry.blockIndex << "\n";
1353                    // mark that loop has passed fully
1354                    loopsit2->second.passed = true;
1355                }
1356                else
1357                    ARDOut << "   loopblocks nopassed: " <<
1358                                entry.blockIndex << "\n";
1359            }
1360           
1361            if ((!noMainLoop || flowStack.size() > 1) &&
1362                subroutToCache.count(entry.blockIndex)!=0)
1363            { //put to cache
1364                ARDOut << "-- subrcache for " << entry.blockIndex << "\n";
1365                addSubroutine(loopsit2, true);
1366            }
1367           
1368            flowStackBlocks[entry.blockIndex] = false;
1369            ARDOut << "pop: " << entry.blockIndex << "\n";
1370           
1371            flowStack.pop_back();
1372            // set up haveReturn
1373            if (!flowStack.empty())
1374            {
1375                flowStack.back().haveReturn |= curHaveReturn;
1376                haveReturnBlocks[flowStack.back().blockIndex] =
1377                        flowStack.back().haveReturn;
1378            }
1379        }
1380    }
1381    ARDOut << "--------- createRoutineData end ------------\n";
1382}
1383
1384void AsmRegAllocator::createSSAData(ISAUsageHandler& usageHandler)
1385{
1386    if (codeBlocks.empty())
1387        return;
1388    usageHandler.rewind();
1389    auto cbit = codeBlocks.begin();
1390    AsmRegVarUsage rvu;
1391    if (!usageHandler.hasNext())
1392        return; // do nothing if no regusages
1393    rvu = usageHandler.nextUsage();
1394   
1395    cxuint regRanges[MAX_REGTYPES_NUM*2];
1396    cxuint realRegsCount[MAX_REGTYPES_NUM];
1397    std::fill(realRegsCount, realRegsCount+MAX_REGTYPES_NUM, 0);
1398    size_t regTypesNum;
1399    assembler.isaAssembler->getRegisterRanges(regTypesNum, regRanges);
1400   
1401    while (true)
1402    {
1403        while (cbit != codeBlocks.end() && cbit->end <= rvu.offset)
1404        {
1405            cbit->usagePos = usageHandler.getReadPos();
1406            ++cbit;
1407        }
1408        if (cbit == codeBlocks.end())
1409            break;
1410        // skip rvu's before codeblock
1411        while (rvu.offset < cbit->start && usageHandler.hasNext())
1412            rvu = usageHandler.nextUsage();
1413        if (rvu.offset < cbit->start)
1414            break;
1415       
1416        cbit->usagePos = usageHandler.getReadPos();
1417        while (rvu.offset < cbit->end)
1418        {
1419            // process rvu
1420            // only if regVar
1421            for (uint16_t rindex = rvu.rstart; rindex < rvu.rend; rindex++)
1422            {
1423                auto res = cbit->ssaInfoMap.insert(
1424                        { AsmSingleVReg{ rvu.regVar, rindex }, SSAInfo() });
1425               
1426                SSAInfo& sinfo = res.first->second;
1427                if (res.second)
1428                    sinfo.firstPos = rvu.offset;
1429                if ((rvu.rwFlags & ASMRVU_READ) != 0 && (sinfo.ssaIdChange == 0 ||
1430                    // if first write RVU instead read RVU
1431                    (sinfo.ssaIdChange == 1 && sinfo.firstPos==rvu.offset)))
1432                    sinfo.readBeforeWrite = true;
1433                /* change SSA id only for write-only regvars -
1434                 *   read-write place can not have two different variables */
1435                if (rvu.rwFlags == ASMRVU_WRITE && rvu.regField!=ASMFIELD_NONE)
1436                    sinfo.ssaIdChange++;
1437                if (rvu.regVar==nullptr)
1438                    sinfo.ssaIdBefore = sinfo.ssaIdFirst =
1439                            sinfo.ssaId = sinfo.ssaIdLast = 0;
1440            }
1441            // get next rvusage
1442            if (!usageHandler.hasNext())
1443                break;
1444            rvu = usageHandler.nextUsage();
1445        }
1446        ++cbit;
1447    }
1448   
1449    size_t rbwCount = 0;
1450    size_t wrCount = 0;
1451   
1452    SimpleCache<BlockIndex, RoutineData> subroutinesCache(codeBlocks.size()<<3);
1453   
1454    std::deque<CallStackEntry> callStack;
1455    std::deque<FlowStackEntry> flowStack;
1456    // total SSA count
1457    std::unordered_map<AsmSingleVReg, size_t> totalSSACountMap;
1458    // last SSA ids map from returns
1459    RetSSAIdMap retSSAIdMap;
1460    // last SSA ids in current way in code flow
1461    std::unordered_map<AsmSingleVReg, size_t> curSSAIdMap;
1462    // routine map - routine datas map, value - last SSA ids map
1463    RoutineMap routineMap;
1464    // key - current res first key, value - previous first key and its flowStack pos
1465    PrevWaysIndexMap prevWaysIndexMap;
1466    // to track ways last block indices pair: block index, flowStackPos)
1467    std::pair<size_t, size_t> lastCommonCacheWayPoint{ SIZE_MAX, SIZE_MAX };
1468    CBlockBitPool isRoutineGen(codeBlocks.size(), false);
1469   
1470    CBlockBitPool waysToCache(codeBlocks.size(), false);
1471    CBlockBitPool flowStackBlocks(codeBlocks.size(), false);
1472    // subroutToCache - true if given block begin subroutine to cache
1473    ResSecondPointsToCache cblocksToCache(codeBlocks.size());
1474    CBlockBitPool visited(codeBlocks.size(), false);
1475    flowStack.push_back({ 0, 0 });
1476    flowStackBlocks[0] = true;
1477    std::unordered_set<BlockIndex> callBlocks;
1478    std::unordered_set<BlockIndex> loopBlocks;
1479    std::unordered_set<size_t> recurseBlocks;
1480   
1481    /** INFO if you want to get code changedRegVars between recursions you get 3984
1482     * this stuff has been deleted */
1483   
1484    std::unordered_map<size_t, std::unordered_map<AsmSingleVReg, size_t> >
1485            curSSAIdMapStateMap;
1486   
1487    /*
1488     * main loop to fill up ssaInfos
1489     */
1490    while (!flowStack.empty())
1491    {
1492        FlowStackEntry& entry = flowStack.back();
1493        CodeBlock& cblock = codeBlocks[entry.blockIndex.index];
1494       
1495        if (entry.nextIndex == 0)
1496        {
1497            // process current block
1498            if (!visited[entry.blockIndex])
1499            {
1500                ARDOut << "proc: " << entry.blockIndex << "\n";
1501                visited[entry.blockIndex] = true;
1502               
1503                for (auto& ssaEntry: cblock.ssaInfoMap)
1504                {
1505                    SSAInfo& sinfo = ssaEntry.second;
1506                    if (ssaEntry.first.regVar==nullptr)
1507                    {
1508                        // TODO - pass registers through SSA marking and resolving
1509                        sinfo.ssaIdChange = 0; // zeroing SSA changes
1510                        continue; // no change for registers
1511                    }
1512                   
1513                    if (sinfo.ssaId != SIZE_MAX)
1514                    {
1515                        // already initialized
1516                        reduceSSAIds(curSSAIdMap, retSSAIdMap,
1517                                routineMap, ssaReplacesMap, entry, ssaEntry);
1518                        if (sinfo.ssaIdChange!=0)
1519                            curSSAIdMap[ssaEntry.first] = sinfo.ssaIdLast+1;
1520                       
1521                        // count read before writes (for cache weight)
1522                        if (sinfo.readBeforeWrite)
1523                            rbwCount++;
1524                        if (sinfo.ssaIdChange!=0)
1525                            wrCount++;
1526                        continue;
1527                    }
1528                   
1529                    bool reducedSSAId = reduceSSAIds(curSSAIdMap, retSSAIdMap,
1530                                routineMap, ssaReplacesMap, entry, ssaEntry);
1531                   
1532                    size_t& ssaId = curSSAIdMap[ssaEntry.first];
1533                   
1534                    size_t& totalSSACount = totalSSACountMap[ssaEntry.first];
1535                    if (totalSSACount == 0)
1536                    {
1537                        // first read before write at all, need change totalcount, ssaId
1538                        ssaId++;
1539                        totalSSACount++;
1540                    }
1541                   
1542                    sinfo.ssaId = totalSSACount;
1543                    sinfo.ssaIdFirst = sinfo.ssaIdChange!=0 ? totalSSACount : SIZE_MAX;
1544                    sinfo.ssaIdBefore = ssaId-1;
1545                   
1546                    totalSSACount += sinfo.ssaIdChange;
1547                    sinfo.ssaIdLast = sinfo.ssaIdChange!=0 ? totalSSACount-1 : SIZE_MAX;
1548                    //totalSSACount = std::max(totalSSACount, ssaId);
1549                    if (!reducedSSAId || sinfo.ssaIdChange!=0)
1550                        ssaId = totalSSACount;
1551                   
1552                    // count read before writes (for cache weight)
1553                    if (sinfo.readBeforeWrite)
1554                        rbwCount++;
1555                    if (sinfo.ssaIdChange!=0)
1556                        wrCount++;
1557                }
1558            }
1559            else
1560            {
1561                size_t pass = entry.blockIndex.pass;
1562                cblocksToCache.increase(entry.blockIndex);
1563                ARDOut << "cblockToCache: " << entry.blockIndex << "=" <<
1564                            cblocksToCache.count(entry.blockIndex) << "\n";
1565                // back, already visited
1566                flowStackBlocks[entry.blockIndex] = !flowStackBlocks[entry.blockIndex];
1567                flowStack.pop_back();
1568               
1569                if (pass != 0)
1570                    continue;
1571                size_t curWayBIndex = flowStack.back().blockIndex.index;
1572                if (lastCommonCacheWayPoint.first != SIZE_MAX)
1573                {
1574                    // mark point of way to cache (res first point)
1575                    waysToCache[lastCommonCacheWayPoint.first] = true;
1576                    ARDOut << "mark to pfcache " <<
1577                            lastCommonCacheWayPoint.first << ", " <<
1578                            curWayBIndex << "\n";
1579                    prevWaysIndexMap[curWayBIndex] = lastCommonCacheWayPoint;
1580                }
1581                lastCommonCacheWayPoint = { curWayBIndex, flowStack.size()-1 };
1582                ARDOut << "lastCcwP: " << curWayBIndex << "\n";
1583                continue;
1584            }
1585        }
1586       
1587        if (!callStack.empty() &&
1588            entry.blockIndex == callStack.back().callBlock &&
1589            entry.nextIndex-1 == callStack.back().callNextIndex)
1590        {
1591            ARDOut << " ret: " << entry.blockIndex << "\n";
1592            const BlockIndex routineBlock = callStack.back().routineBlock;
1593            RoutineData& prevRdata = routineMap.find(routineBlock)->second;
1594            if (!isRoutineGen[routineBlock])
1595            {
1596                createRoutineData(codeBlocks, curSSAIdMap, loopBlocks, callBlocks,
1597                            cblocksToCache, subroutinesCache, routineMap, prevRdata,
1598                            routineBlock);
1599                isRoutineGen[routineBlock] = true;
1600               
1601                auto csimsmit = curSSAIdMapStateMap.find(routineBlock.index);
1602                if (csimsmit != curSSAIdMapStateMap.end() && entry.blockIndex.pass==0)
1603                {
1604                    ARDOut << " get curSSAIdMap from back recur 2\n";
1605                    curSSAIdMap = csimsmit->second;
1606                    curSSAIdMapStateMap.erase(csimsmit);
1607                }
1608            }
1609           
1610            callStack.pop_back(); // just return from call
1611            callBlocks.erase(routineBlock);
1612        }
1613       
1614        if (entry.nextIndex < cblock.nexts.size())
1615        {
1616            bool isCall = false;
1617            BlockIndex nextBlock = cblock.nexts[entry.nextIndex].block;
1618            nextBlock.pass = entry.blockIndex.pass;
1619            if (cblock.nexts[entry.nextIndex].isCall)
1620            {
1621                if (!callBlocks.insert(nextBlock).second)
1622                {
1623                    // if already called (then it is recursion)
1624                    if (recurseBlocks.insert(nextBlock.index).second)
1625                    {
1626                        ARDOut << "   -- recursion: " << nextBlock << "\n";
1627                        nextBlock.pass = 1;
1628                       
1629                        curSSAIdMapStateMap.insert({ nextBlock.index,  curSSAIdMap });
1630                    }
1631                    else if (entry.blockIndex.pass==1)
1632                    {
1633                        entry.nextIndex++;
1634                        ARDOut << " NO call (rec): " << entry.blockIndex << "\n";
1635                        continue;
1636                    }
1637                }
1638                else if (entry.blockIndex.pass==1 &&
1639                    recurseBlocks.find(nextBlock.index) != recurseBlocks.end())
1640                {
1641                    entry.nextIndex++;
1642                    ARDOut << " NO call (rec)2: " << entry.blockIndex << "\n";
1643                    continue;
1644                }
1645               
1646                ARDOut << " call: " << entry.blockIndex << "\n";
1647               
1648                callStack.push_back({ entry.blockIndex, entry.nextIndex, nextBlock });
1649                routineMap.insert({ nextBlock, { } });
1650                isCall = true;
1651            }
1652           
1653            flowStack.push_back({ nextBlock, 0, isCall });
1654            if (flowStackBlocks[nextBlock])
1655            {
1656                if (!cblock.nexts[entry.nextIndex].isCall)
1657                    loopBlocks.insert(nextBlock);
1658                flowStackBlocks[nextBlock] = false; // keep to inserted in popping
1659            }
1660            else
1661                flowStackBlocks[nextBlock] = true;
1662            entry.nextIndex++;
1663        }
1664        else if (((entry.nextIndex==0 && cblock.nexts.empty()) ||
1665                // if have any call then go to next block
1666                (cblock.haveCalls && entry.nextIndex==cblock.nexts.size())) &&
1667                 !cblock.haveReturn && !cblock.haveEnd)
1668        {
1669            if (entry.nextIndex!=0) // if back from calls (just return from calls)
1670            {
1671                reduceSSAIdsForCalls(entry, codeBlocks, retSSAIdMap, routineMap,
1672                                     ssaReplacesMap);
1673                //
1674                for (const NextBlock& next: cblock.nexts)
1675                    if (next.isCall)
1676                    {
1677                        //ARDOut << "joincall:"<< next.block << "\n";
1678                        size_t pass = 0;
1679                        if (callBlocks.find(next.block) != callBlocks.end())
1680                        {
1681                            ARDOut << " is secpass: " << entry.blockIndex << " : " <<
1682                                    next.block << "\n";
1683                            pass = 1; // it ways second pass
1684                        }
1685                       
1686                        auto it = routineMap.find({ next.block, pass }); // must find
1687                        initializePrevRetSSAIds(curSSAIdMap, retSSAIdMap,
1688                                    it->second, entry);
1689                       
1690                        BlockIndex rblock(next.block, entry.blockIndex.pass);
1691                        if (callBlocks.find(next.block) != callBlocks.end())
1692                            rblock.pass = 1;
1693                       
1694                        joinRetSSAIdMap(retSSAIdMap, it->second.lastSSAIdMap, rblock);
1695                    }
1696            }
1697           
1698            flowStack.push_back({ entry.blockIndex+1, 0, false });
1699            if (flowStackBlocks[entry.blockIndex+1])
1700            {
1701                loopBlocks.insert(entry.blockIndex+1);
1702                 // keep to inserted in popping
1703                flowStackBlocks[entry.blockIndex+1] = false;
1704            }
1705            else
1706                flowStackBlocks[entry.blockIndex+1] = true;
1707            entry.nextIndex++;
1708        }
1709        else // back
1710        {
1711            // revert retSSAIdMap
1712            revertRetSSAIdMap(curSSAIdMap, retSSAIdMap, entry, nullptr);
1713            //
1714           
1715            for (const auto& ssaEntry: cblock.ssaInfoMap)
1716            {
1717                if (ssaEntry.first.regVar == nullptr)
1718                    continue;
1719               
1720                size_t& curSSAId = curSSAIdMap[ssaEntry.first];
1721                const size_t nextSSAId = curSSAId;
1722                curSSAId = ssaEntry.second.ssaIdBefore+1;
1723               
1724                ARDOut << "popcurnext: " << ssaEntry.first.regVar <<
1725                            ":" << ssaEntry.first.index << ": " <<
1726                            nextSSAId << ", " << curSSAId << "\n";
1727            }
1728           
1729            ARDOut << "pop: " << entry.blockIndex << "\n";
1730            flowStackBlocks[entry.blockIndex] = false;
1731           
1732            if (!flowStack.empty() && flowStack.back().isCall)
1733            {
1734                auto csimsmit = curSSAIdMapStateMap.find(entry.blockIndex.index);
1735                if (csimsmit != curSSAIdMapStateMap.end())
1736                {
1737                    ARDOut << " get curSSAIdMap from back recur\n";
1738                    curSSAIdMap = csimsmit->second;
1739                }
1740            }
1741           
1742            flowStack.pop_back();
1743           
1744            if (!flowStack.empty() && lastCommonCacheWayPoint.first != SIZE_MAX &&
1745                    lastCommonCacheWayPoint.second >= flowStack.size() &&
1746                    flowStack.back().blockIndex.pass == 0)
1747            {
1748                lastCommonCacheWayPoint =
1749                        { flowStack.back().blockIndex.index, flowStack.size()-1 };
1750                ARDOut << "POPlastCcwP: " << lastCommonCacheWayPoint.first << "\n";
1751            }
1752        }
1753    }
1754   
1755    /**********
1756     * after that, we find points to resolve conflicts
1757     **********/
1758    flowStack.clear();
1759    std::deque<FlowStackEntry2> flowStack2;
1760   
1761    std::fill(visited.begin(), visited.end(), false);
1762    flowStack2.push_back({ 0, 0 });
1763   
1764    SimpleCache<size_t, LastSSAIdMap> resFirstPointsCache(wrCount<<1);
1765    SimpleCache<size_t, RBWSSAIdMap> resSecondPointsCache(rbwCount<<1);
1766   
1767    while (!flowStack2.empty())
1768    {
1769        FlowStackEntry2& entry = flowStack2.back();
1770        CodeBlock& cblock = codeBlocks[entry.blockIndex];
1771       
1772        if (entry.nextIndex == 0)
1773        {
1774            // process current block
1775            if (!visited[entry.blockIndex])
1776                visited[entry.blockIndex] = true;
1777            else
1778            {
1779                resolveSSAConflicts(flowStack2, routineMap, codeBlocks,
1780                            prevWaysIndexMap, waysToCache, cblocksToCache,
1781                            resFirstPointsCache, resSecondPointsCache, ssaReplacesMap);
1782               
1783                // back, already visited
1784                flowStack2.pop_back();
1785                continue;
1786            }
1787        }
1788       
1789        if (entry.nextIndex < cblock.nexts.size())
1790        {
1791            flowStack2.push_back({ cblock.nexts[entry.nextIndex].block, 0 });
1792            entry.nextIndex++;
1793        }
1794        else if (((entry.nextIndex==0 && cblock.nexts.empty()) ||
1795                // if have any call then go to next block
1796                (cblock.haveCalls && entry.nextIndex==cblock.nexts.size())) &&
1797                 !cblock.haveReturn && !cblock.haveEnd)
1798        {
1799            flowStack2.push_back({ entry.blockIndex+1, 0 });
1800            entry.nextIndex++;
1801        }
1802        else // back
1803        {
1804            if (cblocksToCache.count(entry.blockIndex)==2 &&
1805                !resSecondPointsCache.hasKey(entry.blockIndex))
1806                // add to cache
1807                addResSecCacheEntry(routineMap, codeBlocks, resSecondPointsCache,
1808                            entry.blockIndex);
1809            flowStack2.pop_back();
1810        }
1811    }
1812}
Note: See TracBrowser for help on using the repository browser.