MID-TERM PERFORMANCE EVALUATION OF THE PRODUCERS TO MARKETS ALLIANCE ACTIVITY September 2020 DISCLAIMER The author’s views expressed in this publication do not necessarily reflect the views of the United States Agency for International Development or the United States Government. CACAO POD HARVESTED IN TUMACO FARM BY SEI CONSULTANTS Contract Title: Monitoring, Evaluation and Learning Activity Contract Number: 72051419C00001 Submitted: September 23, 2020 Contractor: Panagora Group, LLC COR: Omar López Authors: José Luis Astorquia, Genni Cavalli, Carlos Castañeda, Pablo Gutiérrez, Jorge Jaramillo, and Orlando Gracia. Additional thanks to Alfredo Torres, Yazmín Medina, David Doncel, Javier Rodríguez, Luisa Fernanda Cardona, Juan Guillermo Bedoya, Inés Cadavid, Juan Camilo Paillie, and Martha Barriga. Data collection was undertaken by subcontractor Sistemas Especializados de Información. CONTENTS ACRONYMS 4 ABSTRACT 1 EXECUTIVE SUMMARY 2 I. EVALUATION PURPOSE 5 II. ACTIVITY DESCRIPTION AND BACKGROUND 6 III. EVALUATION QUESTIONS AND METHODOLOGY 8 EVALUATION QUESTIONS 8 QUANTITATIVE METHODOLOGY 8 QUALITATIVE METHODOLOGY 9 GENDER ANALYSIS 9 GEOGRAPHIC ANALYSIS 10 IV. EVALUATION FINDINGS AND CONCLUSIONS 11 EFFECTIVENESS OF THE ACTIVITY 11 Q1: HOW EFFECTIVE ARE THE MODELS USED BY THE PMA ACTIVITY TO PROVIDE TECHNICAL ASSISTANCE AT THE VALUE CHAINS SUPPORTED BY USAID? 11 Q2: IN CASE THE TECHNICAL MODELS USED BY THE PMA ACTIVITY TO STRENGTHEN THE VALUE CHAINS SUPPORTED BY USAID ARE FOUND TO BE EFFECTIVE, WHAT ARE THE CAUSES FOR THOSE RESULTS? 14 COMPETITIVENESS AND MARKET ACCESS 16 Q3: TO WHAT EXTENT IS THE PMA ACTIVITY HELPING PRODUCERS RESPOND TO MARKET OPPORTUNITIES AND IMPROVE THE COMPETITIVENESS OF RURAL PRODUCERS? 16 COMPARING THE ACTIVITY’S PERFORMANCE TO THE CONTEXT 21 Q4: HOW IS THE PERFORMANCE OF THE PMA ACTIVITY EXPLAINED IN COMPARISON TO THE LOCAL, REGIONAL, AND NATIONAL CONTEXT? 21 THE ACTIVITY AND ILLICIT ECONOMIES 26 Q5: HOW IS THE PMA ACTIVITY INTERVENTION AFFECTED BY THE LOCAL AND REGIONAL ILLICIT ECONOMIES AT TARGETED MUNICIPALITIES? HOW DOES THE PMA ACTIVITY INTERVENTION AFFECT THOSE ECONOMIES? 26 EFFECTS OF TERTIARY ROAD IMPROVEMENT 29 Q6: WHAT SOCIAL AND ECONOMIC EFFECTS CAN BE IDENTIFIED FROM TERTIARY ROADS IMPROVEMENT DIFFERENT THAN CONNECTIVITY TO MARKET HUBS? 29 V. EVALUATION RECOMMENDATIONS 34 VI. RECOMMENDATIONS MATRIX 36 ANNEX 1: RECOMMENDATIONS MATRIX (SPANISH) 44 ANNEX 2: SUPLEMENTAL ANALYSIS AND DATA 54 ANNEX 3: FINDINGS, CONCLUSIONS, AND RECOMMENDATIONS 71 ANNEX 4: DETAILED METHODOLOGY 161 ANNEX 5: GENDER PERSPECTIVE 245 ANNEX 6: INSTRUMENTS 257 ANNEX 7: SOURCES OF INFORMATION 436 ANNEX 8: STATEMENT OF WORK 437 ANNEX 9: SUMMARY INFORMATION ABOUT TEAM MEMBERS 458 ANNEX 10: REFERENCES 459 ACRONYMS ADS Automated Directive Service ART Regional Renewal Agency CLA Collaboration, Learning, and Analysis COP Chief of Party COR Contracts Officer Representative CPFF Cost-Plus-Fixed-Fee Contract EPSEA Organizations in Charge of Agricultural Training FIS Social Investment Foundation GAP Good Agricultural Practices GFP Good Farming Practices GHP Good Handling Practices GIS Geographic Information System GMP Good Manufacturing Practices ICO Organizational Capacity Index IP Implementing Partner MEL Monitoring, Evaluation, and Learning PDET Territorial-focused Development Programs PMA Producers to Markets Alliance PNIS National Comprehensive Program for Crop Substitution SENA National Learning Service SoW Statement of Work TBD To Be Determined Later USAID United States Agency for International Development WP Work Plan 1 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV ABSTRACT This document is the mid-term performance evaluation of the Producers to Markets Alliance activity prepared by the USAID/Colombia Monitoring, Evaluation and Learning activity. The purpose of the evaluation was to review various aspects of the work done by the activity, provide useful insights into current and future performance, evaluate the effectiveness of the implemented model and try to understand the extent of the progress, outlining the odds for future sustainability. We gathered, sorted, and examined significant volumes of quantitative, qualitative, and geographic information from an array of locations and stakeholders. We organized the data to produce findings, analyzed and compared the findings to obtain conclusions, and discussed the conclusions to generate recommendations. In general, we found that beneficiaries usually valued the products and services received from the Producer’s Market Alliance activity as positive or very positive. The most frequent changes perceived by participants were technical improvements in agricultural production, enhanced capability of engaging commercial partners to reach agreements, and better available infrastructure, especially rural roads, and productive assets. We found that the main concern and opportunity for improvement is the sustainability of the activity’s work. As the Producer’s Market Alliance is a five-year initiative, beneficiaries worry losing some advancements when the activity leaves the targeted regions. One possibility to address these concerns is to build and strengthen local capacities. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 2 EXECUTIVE SUMMARY The Monitoring, Evaluation, and Learning (MEL) activity, by way of an evaluation team, prepared a mid￾term performance evaluation of the Producers to Markets Alliance (PMA) activity. For this evaluation, we developed a work protocol that included quantitative, qualitative, and spatial analysis methodologies. The first two tools had the purpose of gathering information in the field and subsequent processing and analysis; the third was useful for collecting geographic data and spatially locating relevant events. The USAID-funded PMA activity is five years in duration and operates in 87 municipalities scattered in five regions: Meta (nine municipalities in the southwest); Caquetá (all the department, 16 municipalities); Bajo Cauca (south of Córdoba - five municipalities-, south of Bolívar - six municipalities- and north of Antioquia -16 municipalities-); Cauca and Valle del Cauca (north of Cauca -17 municipalities and south of Valle del Cauca -2 municipalities); and Nariño (16 municipalities in the west). The purpose of the PMA activity is to improve rural producers' competitiveness to respond to new and expanding market opportunities. To fulfill this objective, PMA operates through three main areas or components and one cross-cutting: i) increased export sales; ii) expanded value chain production; iii) productive infrastructure for market efficiency, and iv) learning, knowledge, management, and communications. PMA concentrates its efforts on five value chains: i) cacao, ii) coffee, iii) rubber, iv) dairy, and v) fruits and vegetables. The activity has the possibility of introducing new ones if needed and feasible. For the collection and analysis of information, we designed and used seven quantitative instruments and nine qualitative instruments. The MEL activity hired a specialized data collection firm called S.E.I. Consultores (SEI), who contributed their experience with field and data analysis. For the data collection phase, we selected a sample of 18 municipalities from the universe listed above (of that total, nearly 50 were active). During the field trips, the SEI interviewers gathered 55 quantitative and 204 qualitative interviews from stakeholders such as farmers, public servants, community leaders, producer associations' representatives, commercial companies' employees, technical assistants, and the implementing partner staff. After the fieldwork phase, SEI, for the most part, transcribed and coded the qualitative data. We used this processed information and various secondary sources to analyze the data and answer the six guiding questions posed in the evaluation scope of work document. The evaluation questions focused on the whole evaluation process, from the design to the reporting. The bulk of the work involved sorting and organizing the findings, triangulating information, drawing conclusions, and preparing recommendations. We concluded that most beneficiaries valued products and services received from PMA as beneficial and worthwhile; the main concern Image 1: Mapping Exercise, La Montañita, Caquetá 3 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV expressed was the sustainability of PMA’s impact and the continuity of work once the activity is completed. We derived the following conclusions from the guiding evaluation questions: • In general, the PMA’s models are effective in assisting USAID-supported value chains. We found that the male and female beneficiaries positively value the way PMA imparts technical knowledge. These beneficiaries also found the information they received from PMA helped achieve the outcomes they were seeking. • The beneficiary screening criteria used by PMA and the methods used to provide technical assistance are the two primary factors that explain why PMA technical models are effective. Our analysis identified three types of causes or elements relevant to PMA's assistance: i) the ones related to the success of the intervention; ii) the ones not found in the intervention, and iii) the ones susceptible to improvement. Although the question centers on the first group, we thought it would be useful for the PMA activity to receive feedback on all three types, as this enriches the perspective on current actions and augments the possibilities for improvement. • The PMA activity usually focuses on helping producers to improve market opportunities and maintain competitiveness. For the most part, PMA helps male and female farmers improve the quality of their products, increase their yields, and use an entrepreneur-like approach to agricultural and livestock production. These three factors enhance local growers' odds of accessing better and bigger clients, especially when they can harness strength in numbers by working through associations. • Although results are somewhat disparate for the observed value chains, on average, the PMA beneficiaries have similar yields than farmers with similar crops in the rest of the country. Our analysis points to the current security conditions of the targeted territories and the presence of illegal economic activities as intervening factors. Regarding sales, the data show that the supported associations have slightly better results than those from other organizations1. We could not find enough reliable information to compare the export figures2. • The PMA activity promotes hubs of licit economic activities in the targeted regions, improving security conditions and strengthening relations among the residents. PMA's municipalities have been affected by illicit crops for years; in many cases, farmers, settlers, and indigenous people turned to coca crops due to pressure from armed groups that flourished because of historical state abandonment and the lack of viable economic alternatives. PMA has demonstrated to these groups that it is possible and necessary to transition to law-abiding ways of life. PMA beneficiaries agreed that most men and women prefer to be in a legal economy, but reluctantly accept coca crops as a last resort response to the presence of armed conflict and the lack of state programs and presence. • The PMA activity’s work on improving to tertiary roads in targeted municipalities brought positive social and economic effects. In general, we found that building, improving, or periodic maintenance of roads brought quantifiable changes in PMA beneficiaries’ lives, especially for those living in remote 1 The control organizations were selected by the Implementing Partner to participate in the activity but, at the time of the evaluation, had not received assistance. 2 For exports, we recognize that the information collected at the time of the evaluation was not the best source to assess the performance, but that was the information available then. Data recently received from the IP from their M&E system shows the following numbers for exports (in Colombian pesos): 2018, 3,253,408,864; 2019, 10,259,374,120; 2020, 19,618,128,320. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 4 locations. Upgrading these road networks contributed to increased production, the marketing of agricultural goods, and improved security conditions. Drawing from these conclusions, we prepared a list of 15 recommendations, meant to offer the PMA with options to enhance implementation and propose ways to improve future activities beyond PMA. This evaluation report has six sections plus associated annexes. Section I describes the evaluation purpose. Section II provides information on the evaluated activity, including background, context, and theory of change. Section III details the evaluation questions and the methodology used by the evaluation team (annex four contains the quantitative, qualitative, and geographic methodology's extended version). Section IV lists and explains the main findings and conclusions associated with each evaluation question (annex two contains supplemental analysis and data). Main messages are presented with bold font and capitalized for ease. The report concludes in Section V with all the recommendations derived from the findings and conclusions. Section VI contains the recommendations matrix with feedback from the implementing partner to the proposed actions (see Annex I for the original Spanish language version). The Annexes are in a separate volume for ease of navigation and reference. . 5 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV I. EVALUATION PURPOSE PURPOSE This is a mid-term performance evaluation of the Producer’s Market Alliance (PMA) activity. The primary purpose of the evaluation was to answer the six guiding questions posed in the Scope of Work document. In so doing, our effort was to meet the following goals: • Assess how and if the strategies used by PMA are suitable to improve the livelihood of targeted communities. • Provide useful insights into the PMA activity’s current and future performance. • Estimate if the actions undertaken by the PMA activity are sustainable in the short and medium-term. The evaluation examines a USAID-funded activity’s results when trying to attain their proposed objectives. This type of evaluation identifies changes in local conditions, quantifiable and perceived, and estimates the probable contribution made by the PMA activity to the observed outcome. To accomplish the task at hand, a team of inter-disciplinary professionals devised a work plan and undertook the resulting actions, like designing surveys, gathering research data, and processing secondary information. Data collection included 55 quantitative interviews and 204 qualitative interviews in 18 municipalities spanning eight departments. MAIN MESSAGE Most beneficiaries deem products and services received from the PMA activity as useful and valuable but implementing some changes in form and substance could help meet aspirations for sustainable results that endure beyond the life of the activity. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 6 II. ACTIVITY DESCRIPTION AND BACKGROUND The PMA activity is a USAID-funded program focused on improving rural producers’ competitiveness within the context of new and expanding market opportunities. The activity directly contributes to USAID/Colombia’s Country Development Cooperation Strategy objective of strengthening Colombia’s capacity to implement a sustainable and inclusive peace by improving conditions for inclusive rural economic growth. To this end, PMA works to strengthen legal economies in targeted municipalities by increasing the competitiveness of producers and increase the value of licit products. PMA focuses on equipping small-scale farmers and other value chain actors to respond to new and expanding market opportunities; opening possibilities to develop means for increasing income on a sustainable basis. PMA improves farmers’ and enterprises’ capacity to react and meet the quality standards and volume requirements required by licit markets. The activity helps close business deals between producers and buyers to increase incomes of small farmers, especially for women heads of households and members of minority ethnic groups. PMA targets five priority value chains: i) cacao, ii) specialty coffee, iii) natural latex, iv) tropical fruits and vegetables, and v) sustainable dairy production, as well as other opportunities based on market demand and income-generating potential. PMA supports new planting, crop renewal, increased productivity, improved postharvest handling, and other value-adding efforts. The intervention aims to reduce production costs, increase yields, enhance the quality of products, augment sales, and improve customer satisfaction. The activity supports a three-prong approach: • Increase export sales by connecting producers to markets. This component seeks to fill the information gap by partnering with private sector firms and traders with market contacts, information, and leads from buyers seeking new supply sources and requiring more product volumes. • Increase production that responds to market demand. The activity supports the efforts of value chain development through new planting, renewal of essential livelihoods crops, increased productivity, improved postharvest handling, and other alternatives, as needed and based on market demand. The objective is to use technical assistance to reduce production costs through higher yields, improve product quality, handling, and delivery schedules for selling and customer fulfillment. • Increase investment in rural infrastructure that enables markets to work efficiently. This component seeks to leverage and mobilize financial resources to facilitate public and private funding to expand rural infrastructure, in support of the key-value chains and business deals targeted under PMA. THEORY OF CHANGE Following the causal logic outlined in the results framework, PMA’s overarching theory of change is that by i) significantly scaling up value chain productivity and quality; ii) integrating rural smallholder farmers into profitable domestic and export markets; and iii) addressing infrastructure bottlenecks affecting market efficiency, then agricultural producers will increase their competitiveness, improve their capacity to respond to dynamic market opportunities, gain entry into sophisticated, profitable, and licit value chains, and break the cycle of poverty and illicit economic activity. 7 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV TABLE 1: INFORMATION SUMMARY Activity Name: Producers to Markets Alliance (PMA). Period of Performance: 03/03/2017 - 03/02/2022 Contractor: FINTRAC Inc. Total Estimated Cost $71,463,707 Contract Number: AID-514-C-17-00002 Contracting Mechanism: Cost-Plus-Fixed-Fee (CPFF) Contract Coverage: CAUCA: Caloto, Corinto, Miranda, Santander de Quilichao, Toribio, Balboa, Buenos Aires, Cajibío, Caldono, El Tambo, Mercaderes, Patía, Piendamó, Suárez, Morales, Argelia, Jambaló VALLE DEL CAUCA: Florida, Pradera CÓRDOBA: Montelíbano, Puerto Libertador, San José de Ure, Tierralta, Valencia ANTIOQUIA: Anorí, Briceño, Cáceres, Caucasia, El Bagre, Guadalupe, Ituango, Nechí, Tarazá, Valdivia, Zaragoza, Amalfi, Remedios, Segovia, Yondó, Yarumal META: La Macarena, Mesetas, Puerto Rico, Uribe, Vistahermosa, San Juan de Arama, Puerto Lleras, Mapiripán, Puerto Concordia CAQUETÁ: Cartagena del Chairá, La Montañita, San Vicente del Caguán, Albania, Belén De Los Andaquíes, Curillo, El Doncello, El Paujil, Florencia, Morelia, Puerto Rico, San José Del Fragua, Milán, Solano, Solita, Valparaíso NARIÑO: San Andres de Tumaco, Cumbitara, El Rosario, Leiva, Los Andes, Policarpa, Barbacoas, El Charco, Francisco Pizarro, La Tola, Magüi, Mosquera, Olaya Herrera, Ricaurte, Roberto Payán, Santa Bárbara BOLÍVAR: San Pablo, Santa Rosa del Sur, Arenal, Cantagallo, Morales, Simití USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 8 III. EVALUATION QUESTIONS AND METHODOLOGY EVALUATION QUESTIONS 1. How effective are the models used by the activity to provide technical assistance at the value chains supported by USAID? 2. In case the technical models used by the activity to strengthen the value chains supported by USAID are found to be effective, what are the causes for those results? 3. To what extent is the activity helping producers respond to market opportunities and improve the competitiveness of rural producers? 4. How is the performance of PMA reflected in sales, productivity, and exports of farmers supported explained in comparison to the local, regional, and national context? 5. How is the PMA intervention affected by the local and regional illicit economies at targeted municipalities? How does the PMA intervention affect those economies? 6. What social and economic effects can be identified from tertiary roads improvement different than connectivity to market hubs? QUANTITATIVE METHODOLOGY The evaluation team used different analysis techniques and information sources (described in more detail in Annex 4: Detailed Methodology) to meet the objectives outlined in the evaluation of the PMA activity. This process was useful to identify differences between affinity groups (for example, farmers of a given value chain or a given region). It was also critical to defining probable issues that explain changes to PMA's most relevant variables: sales value, hectares in production, or other indicators included in the evaluation matrix (see Annex 4, Evaluation Matrix). For this, the team used two levels of analysis: The first level of analysis is descriptive, where we looked for differences in the outcome variables for different types of beneficiaries. We identified changes in the performance of various kinds of producers. This level of analysis only establishes whether a difference exists or not; and it is not possible to identify how different variables are related to explain any differences. The second level of analysis is more comprehensive; we estimated models of factors associated (using linear regression or probability regression). These models illustrate how different control variables (like the size of the productive unit, number of training events, gender, and age of the head of household, among others) come together to assemble an explanation of the beneficiaries' performance. The power of these models is the ability to establish whether there is a correlation between one or multiple variables, its magnitude, and its direction. For the 2019 PMA Producer’s Survey, 1,084 growers answered the questionnaire: 178 belonged to farms with female heads of households and 1,084 with male heads of households. For the 2020 Association’s Survey, 21 of the 55 organizations had female leaders, and 24 had male leaders. 9 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV QUALITATIVE METHODOLOGY The purpose of gathering qualitative data was to obtain detailed information to illustrate how different stakeholders perceive, receive, and consider the PMA. Using specific qualitative tools, we focused on collecting and describing the opinions, narratives, and stories expressed by people working and benefitting from PMA interventions. We gathered information focused on the main topics of interest: changes in production processes; good agricultural practices; technical assistance; improvements in local infrastructure; associativity; marketing opportunities; and the probability of instilling a culture of peace and legality in the region. The qualitative interviews we undertook had the following sex disaggregation: 49 women (24 percent), 153 men (74 percent), and six unidentified participants (2 percent). Focal groups were comprised of 66 percent males and 34 percent females (see Annex 5). To test the relevance and usefulness of the surveys designed for each group of interest, we devised a pilot exercise in Vista Hermosa, Meta and made any adjustments to our questions and approach. For this data collection phase, interviewers visited 18 chosen municipalities (17 plus the pilot) and conducted the following actions: 18 workshops with PMA's recipients; 18 social cartography exercises with members of communities benefitted by improvements in infrastructure; 51 semi-structured interviews to owners of demonstrative plots; interviews to 31 technical assistants, 18 grower's associations, 18 citizen oversight organizations, 34 commercial allies, 32 local public servants, and ten PMA regional employees; interviews to representatives of several storage centers and infrastructure projects; and ethnographic tours in demonstrative plots. In total, we covered 18 municipalities in all the regions targeted by PMA: five in Caquetá, three in Cauca, one in Nariño, two in Valle del Cauca, two in Córdoba, one in Antioquia, two in Bolívar, and two in Meta. In some cases, mainly when dealing with commercial allies, interviews were held in different locations outside PMA's municipalities (for a detailed description of fieldwork, refer to Annex 4: Detailed Methodology). We recorded all the qualitative interviews (with consent from the interviewed party), and we hired a specialized firm that transcribed and coded the data using the software NVivo. Coding was also an opportunity to sort qualitative information by the six evaluation questions. We used 70 codes grouped into 12 categories. We arranged documents according to their complexity, created concurrence matrixes, and proposed comparisons to identify common patterns and saturation levels in the data. Once the process was finalized, the coding specialists used different reports to deliver results to the thematic experts for analysis. To draft the conclusions and observations, we triangulated qualitative, quantitative, and geographic information, composing a more comprehensive picture of the reality described by all the interviewees. GENDER ANALYSIS In our discussions with USAID and our desk review of the PMA documentation, we noticed that there was a lack of sex-disaggregated data reported. We paid attention to differences between men and women during the data collection and also did not find a statistically significant difference in responses. This being said we are sensitive to the challenges faced by female farmers and producers within Colombia, and we were informed by the gender analysis done by the PMA in May 2017. We cross￾referenced with the evaluation questions and, after discussion with USAID and the implementing USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 10 partner, agreed that we would refer to gender differences when appropriate but these would not be a primary focus of the evaluation. GEOGRAPHIC ANALYSIS We deliberately used geographic analysis tools to analyze secondary information and analyze data obtained through field research. We processed available secondary information looking for helpful insights to answer evaluation questions 4 and 5. In particular, we focused the analysis on the geographic evolution of illicit crops, security indicators (like homicide rates, crimes related to threats and terrorist events), and proximity between beneficiaries and tertiary roads. Regarding the data collection and research, our GIS specialists designed a social cartography instrument to understand question 3 better. This instrument helped quantify the time invested by growers when traveling to storage centers and to locating road improvement works. With the resulting information, we performed a network analysis (isochronous curves) to determine the time used by beneficiaries commuting before and after road improvement and therefore calculating any time reduction due to the intervention. This analysis resulted in graphic outputs, maps, and diagrams of virtual tours (see Annex 4: Detailed Methodology). 11 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV IV. EVALUATION FINDINGS AND CONCLUSIONS Each of the evaluation questions are presented under a lead topic below. In some cases, the evaluation questions have additional detail, which is described and set off by a bullet under the question. Evaluation questions 2 and 6 are the exceptions. EFFECTIVENESS OF THE ACTIVITY Q1: HOW EFFECTIVE ARE THE MODELS USED BY THE PMA ACTIVITY TO PROVIDE TECHNICAL ASSISTANCE AT THE VALUE CHAINS SUPPORTED BY USAID? • Take into account that the technical models used by the activity include (i) knowledge transfer actions, (ii) improvement of agricultural practices and (iii) use of several technologies that contemplate the implementation of “demonstrative farms,” quadrilles, training for trainers, “mingas” and direct technical assistance. Also determine direct and indirect factors that have contributed to the effectiveness of these models. IN GENERAL, THE ACTIVITY’S MODELS ARE EFFECTIVE IN ASSISTING USAID-SUPPORTED VALUE CHAINS. General results of data gathered show that the male and female beneficiaries positively value the ways PMA imparts technical knowledge (Exhibit 1). Furthermore, beneficiaries found concrete and desired consequences of applying the information received3. THE INCREASE IN PRODUCTION AND SALES IS A USEFUL INDICATOR TO ESTIMATE THE TECHNICAL ASSISTANCE MODEL’S EFFECTIVENESS. Most farmers reported growth in production and sales. They claim to have an increment between 1 and 10 percent increase in the product they end up selling4 (for all the value chains). Cacao, coffee, and rubber growers perceive that they sell more than 90 percent of their crops (see Table 2); however, perceived changes in production, 3 We found no consistent differences regarding gender. In Annex 5 we use quantitative information to provide additional statistics for some indicators used for gender analysis. 4 The increase refers to the percentage of Production sold. The information comes from the Producer’s Survey 2019. Exhibit 1 Satisfaction with PMA, gender disagregated USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 12 sales, and prices are lower (see Table 3). The increase in production is a useful indicator of the technical assistance model’s effectiveness. TABLE 2: 2019 SALES FOR INDIVIDUAL FARMERS5 VALUE CHAIN PRODUCT SOLD Cacao 94.8% Coffee 93% Rubber 91.9% THE MAIN BENEFITS PERCEIVED BY MALE AND FEMALE PRODUCERS INCLUDE AN AUGMENTED INCOME AND AN IMPROVED QUALITY OF LIFE. Unlike individual farmers, representatives from associations state having an increase in sales: 60 percent of associations declare having a growth of 50 percent in sales, from 2018 to 2019 (see Table 4). THERE IS EVIDENCE OF AN INCREASE IN THE BENEFICIARIES’ PROFITS FROM AGRICULTURAL PRODUCTION AND THEIR REGIONS’ AGRICULTURAL DIVERSIFICATION. “In Belén de Los Andaquíes, growers claim that production has increased more than 100 5 Source: Associations’ survey 2020. Association’s Survey – MEL Activity conducted this survey with a census of the associations reported by the IP as involved with the program in the 18 chosen municipalities, and a sample of associations outside of PMA. These criteria produced 55 associations, 48 in the first group, and 7 in the second. For the most part, the survey asked about sales, costs, inventories, good practices, technical assistance, and participation in PMA during 2018 and 2019. 6 Source: Producer’s survey 2019. The table shows the percentage of individual producers that perceived a change in their results (production, sales, and price) due to the relationship with PMA. Producer’s Survey – The IP surveyed 1,084 farmers of the productive value chains benefitted by PMA: cacao, coffee, rubber, dairy, and blackberry/coconut/plantain. For the most part, the survey asked about production, sales, good practices, costs, technical assistance, demographic information, and geographical data. 7 Source: Associations’ survey 2020. TABLE 3: CHANGES PERCEIVED BY INDIVIDUAL FARMERS FOR 20196 SURVEY CACAO COFFEE RUBBER DAIRY Changes in Production 52.2% 19.7% 31.9% 47.7% Changes in Sales 10.3% 7.8% 10.0% 15.0% Changes in Price 2.6% 10.4% 2.5% 6.4% TABLE 4: CHANGES IN SALES PERCEIVED BY ASSOCIATIONS7 ASSOCIATIONS CÓRDOBA NARIÑO CAUCA CAQUETÁ Increment Perceived 80% 40% 63% 64% 13 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV percent in a replicated plot: imagine that result, we doubled our yield. If a farmer produced 80 kilograms before the Activity, he [or she] is currently looking at 160-220 kilograms. If he [or she] was receiving 5,000 pesos before PMA, he [or she] now receives 8,000 pesos.” Semi-structured interview, Caquetá THE PRODUCERS RECOGNIZE IMPROVEMENT DUE TO THE TECHNICAL ASSISTANCE RECEIVED FROM THE ACTIVITY AND SHOW SATISFACTION WITH ITS USEFULNESS. A high percentage of farmers answered the interviews affirmatively when asked if they had received training and expressed satisfaction with the quality of the service (see Exhibit 2). Even more, some of those growers said that before the Activity in 2019, they had never received technical assistance: 44 percent for cacao, 57 percent for coffee, 28 percent for rubber, and 62 percent for dairy. TECHNICAL ASSISTANCE HELPS TO CREATE NEW BUSINESS ALLIANCES AND TO REACTIVATE, CONSOLIDATE, AND STRENGTHEN EXISTING ONES. Almost half of the associations interviewed (49 percent) have a current trade agreement, and 95 percent of those associations are satisfied with their contracts, while 38 percent of the 49 percent only have verbal agreements. This type of informal arrangement has some shortcomings as it makes follow-up difficult (see Table 5). TABLE 5: ASSOCIATIONS AND TRADE AGREEMENTS 20208 TRADE AGREEMENTS ASSOCIATIONS Current trade agreements 49% Verbal trade agreements 38% Satisfied or very satisfied with agreements 95% THE PRODUCERS SHOW SATISFACTION WITH THE CURRENT TRADE AGREEMENTS. The high percentage of associations satisfied with their trade agreements shows a trust-building trend 8 Source: Associations’ survey 2020 Exhibit 2: Producer Receptivity to Technical Assistance SOURCE: FARMER’S SURVEY 2019, INTERVIEWED PRODUCERS WHO RECEIVED TECHNICAL ASSISTANCE. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 14 between buyers and purveyors. It also indicates a willingness from their trade partners to abide by mutually agreed terms and comply with deadlines and conditions. ACCESS AND USE OF PRODUCTIVE ASSETS AUGMENT THE BENEFITS OF TECHNICAL ASSISTANCE, PRODUCING MORE SIGNIFICANT RESULTS. According to the interviews, when farmers were able to apply the lessons learned through PMA’s training and combine them with the use of facilities and equipment, the positive outcomes were reinforced. AVAILABILITY AND USE OF PRODUCTIVE ASSETS PROMOTE “ASSOCIATIVITY” AND ACCESS TO MARKETS. The demand for productive assets cultivates cooperation among the members of farmers’ groups because it is easier for an organization to purchase or rent facilities or equipment. Male and female farmers reported that access to these assets is their primary need regarding increasing productivity and improving the quality of their products. TRAINING IN THE USE OF PRODUCTIVE ASSETS AND INFRASTRUCTURE TO IMPROVE PROCESSES, INCREASE PRICES, TRANSFORM PRODUCTS, AND STRENGTHEN PARTNERSHIPS WAS EXTREMELY HELPFUL. The assets more often found in the targeted municipalities and valued by farmers are tools9, post-harvesting transformation stations, storage centers, and machinery. Currently, associations state they are using the following productive assets (see Table 6). TABLE 6: ASSOCIATIONS AND TYPE OF ASSET 202010 ASSETS USE Tool benches and machinery 58% Post-harvesting transformation stations 83% Storage centers 54% Q2: IN CASE THE TECHNICAL MODELS USED BY THE PMA ACTIVITY TO STRENGTHEN THE VALUE CHAINS SUPPORTED BY USAID ARE FOUND TO BE EFFECTIVE, WHAT ARE THE CAUSES FOR THOSE RESULTS? THE CRITERIA TO SCREEN BENEFICIARIES AND THE MECHANISMS USED TO PROVIDE TECHNICAL ASSISTANCE ARE THE PRIMARY CAUSES THAT EXPLAIN WHY TECHNICAL MODELS ARE EFFECTIVE. Analysis of the information showed three types of causes or elements relevant to PMA's assistance: i) the ones related to the success of the intervention; ii) the ones not found in the intervention, and iii) the ones susceptible to improvement. Although the question centers on the first group, we thought it would be useful for the PMA to receive feedback on all of them. FILTERS AND ENTRY CRITERIA ALLOW THE ACTIVITY TO MAKE AN ADEQUATE SELECTION OF BENEFICIARIES, CHOOSING PARTICIPANTS WITH SUFFICIENT CHARACTERISTICS TO DEVELOP A PRODUCTIVE PROJECT AND APPLY THE TECHNICAL ASSISTANCE SERVICE. To select the most suitable farmers and associations, PMA scouted several 9 Tools benches, tool kits, workbenches or tool chests. 10 Source: Associations’ survey 2020. 15 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV features: for farmers, this was having the crop already planted or having a minimum number of hectares/plants/animals. For associations, this meant accepting those legally constituted and older than six months, with resources and sufficient members, having technical viability, and sufficient human resources, among other factors. With these requirements, PMA significantly increased its odds of obtaining results in time. PMA’S USE OF DIFFERENT TECHNICAL ASSISTANCE DELIVERY MECHANISMS HAS ALLOWED AN ADEQUATE PROVISION OF THE SERVICE. AMONG THESE MECHANISMS, TRAINING ON PRODUCTIVE ASSETS AND TRAINING ON GOOD PRACTICES STAND OUT. PMA employed several tools to impart technical knowledge: field visits, demonstrative plots, "replicated" plots, training schools, quality clubs, training of trainers, national tours, environmental education, organizational strengthening, support to commercial allies, and certifications. PMA used all these resources, and technical staff members relied on their expertise to decide which, when, and how to use them. WHILE THERE IS NO MODEL TO SERVICE TECHNICAL ASSISTANCE TO PRODUCERS; THERE IS A BATTERY OF MECHANISMS OR TOOLS TO TRANSFER KNOWLEDGE. More than a technical assistance model, PMA uses an array of mechanisms and tools to enhance the beneficiaries' agricultural and livestock production. It seems that the use of these resources is contingent upon the experts' informed opinions. Having a structured model would have several advantages, for instance: • Male and female farmers may better understand the concepts. • A financial and technical follow-up would be more comfortable. • PMA could teach the methodology to a third party that can continue the work once the activity contract ends. THERE IS NO OPERATING MANUAL OR DOCUMENT THAT EXPLAINS (I) THE SEQUENCE TO USE THE ASSISTANCE MECHANISMS OR (II) THE CRITERIA FOR CHOOSING THEM. Writing down the technical assistance model could be very beneficial to gain clarity, illustrate the logic behind the interventions, and hand down expertise to government agencies and other organizations that can improve the work's sustainability. If appropriate, technical assistance is one of the keys to upgrading production in vulnerable regions and dissuading the threat of illicit crops. The idea is to encourage any effort that prolongs that assistance. THERE ARE A LIMITED NUMBER OF THE ACTIVITY'S TECHNICAL ASSISTANTS TO PROVIDE TECHNICAL SERVICES (A FEW VISITS OR MANY PRODUCERS PER TRAINER). On several occasions, we heard that the number of trainers or assistants are insufficient to attend the existing demand. “In the case of Simití, there is only one technician for every 300 cocoa producers; if you visit one daily, you will not be able to visit all of them in one year. In the case of Valdivia, in most projects, 20 to 30 visits per producer are carried out in a truly short period.” Semi-structured interview, Bolívar USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 16 THE SELECTION OF PRODUCERS WHO ARE ALSO TECHNICAL ASSISTANTS ALLOWS THE SHARING OF KNOWLEDGE TO BE MORE EFFICIENT. The activity chose male and female farmers that, at the same time, are trainers in other regions targeted by PMA. This way, technical assistants can disseminate knowledge more proficiently by taking the lessons learned to different places. THE FREQUENCY OF ASSISTANCE VARIES ACCORDING TO THE VALUE CHAIN. Many of the associations that have agreements with commercial allies that sell under their brand have more demanding arrangements in terms of quantity, quality, and delivery deadlines. These associations require more technical assistance, specialized, and tailored to their needs. GROUPING ASSOCIATIONS TOGETHER INCREASES THE IMPACT OF TECHNICAL VISITS. When the PMA is successful in bringing associations together, evidence indicates that this magnifies the benefits. Comparable groups profit from similar information, and they can create synergies to increase their leverage, improve their position, or obtain better prices. WHEN THE COMMERCIAL PARTNER PAYS AN ADDITIONAL PRICE OR PERCENTAGE FOR THE PRODUCT'S ADDED VALUE, THE PRODUCER IS ENCOURAGED TO CONTINUE APPLYING THE TECHNICAL ASSISTANCE MODELS. Incentives for differentiated products are a highly effective way of promoting quality (see Table 7). Also, these bonuses stimulate farmers to adopt good practices and comply with environmental standards. TABLE 7: ASSOCIATIONS WITH SALES AT PREMIUM PRICES, 202011 VALUE CHAIN ASSOCIATIONS Cacao 93% Coffee 100% Rubber 100% Dairy 100% COMPETITIVENESS AND MARKET ACCESS Q3: TO WHAT EXTENT IS THE PMA ACTIVITY HELPING PRODUCERS RESPOND TO MARKET OPPORTUNITIES AND IMPROVE THE COMPETITIVENESS OF RURAL PRODUCERS? • To what extent, if any, “associativity” has been a factor for the success in the model. Also, define how the model contributes to a higher level of association. Assess if the newfound access to improved technical assistance and new technologies has enhanced production indicators such as yield per hectare and product quality and has decreased production costs. Evaluate other aspects of production, such as compliance of market standards and benefits obtained from membership to producer organizations (technical services, prices, others). This analysis must be done using a quantitative and qualitative approach. PMA USUALLY HELPS PRODUCERS TO IMPROVE MARKET OPPORTUNITIES AND MAINTAIN COMPETITIVENESS. For the most part, PMA helps male and female farmers improve the 11 Source: Associations’ survey 2020 17 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV quality of their products, increase their yields, and have an entrepreneur-like approach to agricultural and livestock production. These three factors enhance local growers' odds of accessing better and bigger clients, especially when they can harness strength in numbers through associations12. DIFFERENT INDIVIDUALS ENGAGED IN PRODUCTION CHAINS RECOGNIZE THE VALUE OF "ASSOCIATIVITY" TO OBTAIN TECHNICAL ASSISTANCE. The producers state that they received technical support and training through their associations. They report that associations are interested in guaranteeing their sales and improving the quality of their products. They claim that training allows them to use their resources better to invest in what their crops need and provides them with learning to obtain high-quality products. For example, coffee growers in Cauca state that if the coffee is not of good quality, it is difficult to sell it, and they need technical assistance to produce quality coffee. DIFFERENT INDIVIDUALS WORKING WITH PRODUCTION CHAINS ACKNOWLEDGE THE IMPORTANCE OF PARTICIPATING IN INTERNATIONAL COOPERATION PROJECTS. Some male and female beneficiaries report that working through associations has allowed them to participate in these types of cooperation projects, which they perceive positively. These projects promote the organizational strengthening of the associations and, in some cases, improve their financial leverage. For associations, it is essential to have financing to make substantial investments. DIFFERENT TYPES OF PRODUCTION CHAINS RECOGNIZE THE IMPORTANCE OF CONSOLIDATING PRODUCT VOLUMES TO ACCESS MARKETS. Male and female producers acknowledge that belonging to an association allows them to obtain the large production quantities that some markets demand. The aggregation between several producers makes it possible to gather production and achieve a more considerable amount, which each farmer alone would not be able to obtain. In the cocoa business, for example, to export products, most international markets require much bigger shipments than customary. Therefore, belonging to an association is beneficial for producers to access new clients, like international ones, such as with the cocoa value chain. THE ASSOCIATIONS EMBRACE THE TECHNICAL ASSISTANCE SERVICE FOR POST￾HARVEST TASKS13. The post-harvest phase is crucial within the production chain because it is where a quality product is guaranteed to maintain a high level of quality required for commercialization. This stage includes packaging, separation, refrigeration, and drying processes, among other things. Almost 77 percent of the organizations surveyed in 2020 highlighted having received technical assistance in post￾harvest techniques, among the main activities carried out by PMA (see Table 8). Rubber, blackberry, coconut, and plantain chains grower associations are the ones that recognize the most this value-adding process (see Exhibit 3). 12 Regarding access to technical assistance and level of satisfaction with PMA’s services, we found no significant differences between males and females. In Annex 5 we offer a more in-depth analysis of gender-focused indicators. 13 Associations also embrace technical assistance on crop management, good practices, soil management, and pest and disease management. However, we want to highlight training on post-harvesting issues because not many programs focus on it. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 18 TABLE 8: ASSOCIATIONS MENTIONING TRAINING TOPICS14 TOPIC ASSOCIATIONS Crop management 84% Good Practices 93% Soil Management 95% Post-harvest 77 Pests and Diseases 91% PRODUCERS PERCEIVE BENEFITS IN THEIR CROPS BECAUSE OF IMPROVEMENTS TO LOCAL ROADS. Male and female producers declare that improving road infrastructure brings benefits to their value chains. The main advantage they observe is the reduction in transportation times from their plots to the storage centers. Producers also report decreases in transportation costs, improvements in the quality of their products during travel, and an increase in the number of available means of transportation (see Table 9). These changes represent improvements in the value chains in the intervention areas because they streamline the producers' cost structure, allow better connectivity with the storage centers, and favor market opportunities (see Annex 2: Question 3, interviews 1 and 2). TABLE 9: BENEFITS ASSOCIATED WITH ROAD IMPROVEMENTS, 201915 WHAT BENEFITS DO YOU PERCEIVE, OR WILL YOU HAVE WITH THE IMPROVEMENTS OF ROADS? Decrease in travel times 38.1% 14 Source: Associations’ survey 2020. 15 Source: Associations’ survey 2020. Exhibit 3: Associations that mention technical assistance topics SOURCE: SURVEY OF ORGANIZAITONS 19 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV Decrease in travel costs 33.6% Increase in transportation means 32.0% Better products arriving at markets 29.5% Valuation of real state 45.9% Improves access to the farm 34.0% Motivates other farm improvements 29.0% Motivates community to keep road improvements 27.6% Motivates local governments to improve road network 27.4% MOST OF THE ASSOCIATION REPRESENTATIVES STATE THAT THEY ARE SATISFIED WITH THE PURCHASE AND MARKETING AGREEMENTS. Male and female producers claim that sales and marketing agreements with business partners are an essential variable in guaranteeing access to markets. The pre-established deals give the farmer’s security and certainty that they will sell their products at a fixed price and reach a defined market. In the dairy, cocoa, blackberry, coconut, and plantain chains, many associations say they have had agreements in force with allies in 2018 and 2019 (see Exhibit 4). Marketing agreements are also frequent among the organizations of the cocoa, coffee, and dairy chains that report sales (see Exhibits 5). Among these organizations, the majority report being satisfied or very satisfied with these agreements (see Exhibit 6). Exhibit 4: Associations with purchase agreements SOURCE: SURVEY OF ORGANIZAITONS USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 20 THE ASSOCIATIONS SUPPORTED BY PMA HAVE A BETTER PERFORMANCE IN THE ORGANIZATIONAL CAPACITY INDEX16. The Organizational Capacity Index (ICO) is a methodological instrument that identifies the strengths and weaknesses of organizations. Associations supported by PMA score five percentage points higher than those not supported. The components that drive this percentage increase are (i) managerial, administrative, and management capacity, (ii) services offered to associates, and (iii) skills and capabilities in human development. The associations that have higher ICO scores are those that belong to the rubber, cocoa, and coffee chains. PMA HAS BUILT LOCAL KNOWLEDGE, ESPECIALLY CONCERNING TECHNICAL ASSISTANCE AND MARKETING, CONTRIBUTING TO THE ASSOCIATIONS' SUSTAINABILITY. The male and female beneficiaries declare that PMA has developed capacity in the associations for all the productive chains, especially regarding technical issues and marketing. They state that this capacity is an essential resource instilled by PMA, which allows products to be commercialized and sold even after the activity ends (see Annex 2: Question 3, interviews 3 and 4). The figures show this improvement in the increase in sales reported by the organizations, which exceeded 50 percent between 2018 and 2019 (see Exhibit 7). The installed capacity allows the associations to be sustainable in the long term, even when PMA is no longer operating in the regions. 16 We used the Organizational Capacity Index because it was in the Fedesarrollo baseline. Exhibit 5: Associations with marketing agreements – 2018 and 2019 SOURCE: SURVEY OF ORGANIZAITONS 2018 2019 Exhibit 6: Associations satisfied with agreements SOURCE: SURVEY OF ORGANIZAITONS 21 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV MANY PRODUCERS PERCEIVE A FAVORABLE CHANGE IN PRODUCTIVITY, SALES, AND PRODUCT PRICE. Some male and female producers report that productivity in their value chains has increased after the PMA intervention. For example, in the dairy chain, some beneficiaries claim that the number of cows per hectare have increased and that milk production per cow per day has also increased, keeping the same cows. For the cocoa chain, some producers state that the cocoa they produce from the same tree is higher when it is harvest time (see Annex 2: Question 3, interviews 5 and 6). These increases in productivity translate into increased sales COMPARING THE ACTIVITY’S PERFORMANCE TO THE CONTEXT Q4: HOW IS THE PERFORMANCE OF THE PMA ACTIVITY (REFLECTED IN SALES, PRODUCTIVITY, AND EXPORTS OF FARMERS SUPPORTED) EXPLAINED IN COMPARISON TO THE LOCAL, REGIONAL, AND NATIONAL CONTEXT? • Review the sales and production information available for producers benefitted by the Program to determine how they compare to local, regional, and national data. Determine if “associativity” has been relevant to any verifiable success. PMA’S MALE AND FEMALE BENEFICIARIES HAVE LOWER YIELDS THAN FARMERS WITH SIMILAR CROPS IN THE REST OF THE COUNTRY; CURRENT SECURITY CONDITIONS OF THE BENEFITED TERRITORIES AND THE PRESENCE OF ILLEGAL ECONOMIC ACTIVITIES EXPLAIN THIS PHENOMENON. In the case of sales, data shows that supported associations have slightly better results than those from other organizations. And the evaluation could not find enough reliable information to compare exportation figures17. THE MUNICIPALITIES IN WHICH PMA OPERATES HAVE HAD A RELATIVE REDUCTION IN ILLICIT CROPS COMPARED TO THE REST OF THE COUNTRY. The municipalities where PMA operates have had a relative decrease of illegal crops compared to the rest of the country. Exhibit 8 shows that in 2015 (before the PMA intervention), the average density of hectares with coca crops in the municipalities that had PMA interventions were higher than the average of the other regions that 17 For exports, we recognize that the information collected at the time of the evaluation was not the best source to assess the performance, but that was the information available then. Data recently received from the IP from their M&E reporting shows the following numbers for exports (in Colombian pesos): 2018, 3,253,408,864; 2019, 10,259,374,120; 2020, 19,618,128,320. Exhibit 7: Changes in sales reported by organizations, 2018 and 2019 SOURCE: SURVEY OF ORGANIZAITONS USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 22 had coca that year. On the other hand, the situation in 2018 changed. For that year, the averages of hectares cultivated with coca are similar, both in the municipalities where PMA operates and in the others. The data shows a generalized increase in the cultivated hectares of coca in the country. However, there is an improvement in the municipalities intervened by PMA regarding the municipalities not intervened. TABLE 10: LOGARITHM – COCA CULTIVATED HECTARES18 YEAR PMA MUNICIPALITIES NON-PMA MUNICIPALITIES DIFFERENCE19 2015 5.417 4.133 -1.284** 2018 5.690 4.834 -0.856 Crop density aside, when performing a mean-differences test of the hectares of coca cultivated (comparing PMA and non-PMA municipalities), the data indicate that in 2015 the PMA municipalities had, on average, more hectares of coca cultivated than the non-PMA municipalities and that the difference between the two was statistically significant. On the other hand, in 2018, although the PMA municipalities had a higher average of hectares cultivated than other municipalities, the difference was no longer significant, confirming the relative improvement of PMA regions. THE REDUCTION OF ILLEGAL CROPS IN THE AREAS WHERE PMA OPERATES HAS INCREASED THE POPULATION'S SENSE OF SECURITY. One of the improvements with this reduction relates to how males and females perceive safety in areas where PMA works. In this way, PMA is influencing both productive and social issues. One of the consequences is that beneficiaries feel more secure when carrying out a task that is distant from the armed groups. “Well, [regarding] legality and security, if there are no illicit crops, to give an example, the truth is that there will be no armed groups interested in the region or in the area where the 18 Source: Our calculations based on SIMCI data. 19 *** p<0.01, ** p<0.05, * p<0.1 Exhibit 8: Hectares with Coca - PMA Municipalities vs. Non-PMA Municipalities SOURCE: OWN CALCULATIONS BASED ON SIMCI DATA. 23 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV association is. That is the most striking thing when there are illicit crops, or there is illegal mining and all that [is] easy. That calls all the armed actors who are there waiting to see how they also take advantage of that; in the absence of that [illicit activity], there will be no such difficulty with the armed actors, so there will be security.” Semi-structured interview, Local official, Caquetá Illicit crop information is confirmed by analyzing terrorism events in 2016 and 2019 in the areas in which PMA operates. In this regard, Exhibit 9 shows a significant decrease in acts of terrorism in the departments of Antioquia and Nariño. There is no evidence of change in terrorism events in Cauca and Meta, while in Caquetá, there is a slight increase.20 MOST BENEFICIARIES HAVE ACCESS TO A ROAD LESS THAN A KILOMETER AWAY21, WHICH IMPROVES THE OPPORTUNITIES FOR MARKETING OF PRODUCTS AND SAFETY. Investments in the road network in PMA's areas of influence has several effects: one part is related to marketing logistics; the other part has to do with security issues. Given this, the male and female beneficiaries feel that having better connectivity reduces the scope of action of illegal groups, and therefore changes the way they operate. “Security in the area improves due to the roads; When there are roads and ways to reach the communities, all processes are easier. So that is why it has had an impact on security. Now, 20 We don’t have information at the municipal level, so this comparison is not possible. 21 This refers to a one-kilometer radius from where we did the interviews (which, in some cases, was the place of residence). Exhibit 9: Acts of Terrorism USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 24 many roads do not have that reach, so that is why those issues weaken.” Semi-structured interview, Construction Worker, Córdoba In this sense, it is significant that by 2019 almost all PMA beneficiaries had access to a road less than one kilometer from their place of residence (see Exhibit 10). The positive consequences go beyond marketing and selling the products; they include the perception of security, facilitating access to social services such as education and health. These are factors that improve the quality of life of the population. PMA CROPS HAVE LOWER OR EQUAL YIELDS THAN THOSE PRESENTED BY SIMILAR PRODUCTS IN THE REST OF THE COUNTRY AND AREAS SERVICED BY PDETS. The data shows that PMA crops have production levels and yields comparable to those of plantations found in the rest of the PDET areas or the rest of the country, even though PMA operates in territories with Exhibit 10: Distance to a Road - PMA Beneficiaries 25 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV complex problems. These results reflect PMA’s success regarding production issues, which is consistent with the perceptions of the beneficiaries (see Exhibit 11)22. THE ACTIVITY PARTICIPANTS ACKNOWLEDGE USAID’S CONTINUED PRESENCE IN THE REGION AND RECOGNIZE THE PMA. One topic repeatedly found in interviews with beneficiaries is their acknowledgment of USAID's activities. PMA participants not only discern the Mission's long￾standing presence in the territory but can also differentiate the support of the activity. "For me, the Commercial [Producers’] Alliances Program is the support that USAID gives, that the United States, the United States government gives to the farmers of Colombia, supporting us on licit crops and supporting us on the issue of roads. It is a very valuable contribution for us." Semi-structured interview, Farmer, Bolívar "PMA has been fundamental in the institutional field and strengthening institutions. If we see when the intervention began, it was not only to producers and crops, the intervention was also made in each of the municipal committees, finding difficulties in the administrative part, say in accounting." Semi-structured interview, Farmer, Caquetá "We were benefited by the Natural Heritage Program. With USAID resources, three collection plants were built. Previously with the Colombia Responde program, we also had donations, consultancies, and some projects to strengthen cultural work; the whole topic of technical assistance." Semi-structured interview, Farmer, Caquetá 22 We did not have the "starting" information for PMA's beneficiaries. We only had the Fedesarrollo baseline, and we agreed that this was not a good starting point, since the interviewees did not turn out to be beneficiaries. We understand that the PMA has baseline information of the beneficiaries, but this was not available at the time. Exhibit 11: PMA crops versus other crops USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 26 THE ACTIVITY AND ILLICIT ECONOMIES Q5: HOW IS THE PMA ACTIVITY INTERVENTION AFFECTED BY THE LOCAL AND REGIONAL ILLICIT ECONOMIES AT TARGETED MUNICIPALITIES? HOW DOES THE PMA ACTIVITY INTERVENTION AFFECT THOSE ECONOMIES? • For question 5, USAID asked us to determine if the increase of technical knowledge by farmers, by training sessions and the adoption of new technologies, has offered alternative paths away from illicit options. Also, in areas with security issues, examine how effective are indirect interventions. The scope of this question should not slip to "rural security" related to illicit economies. It is an economic question in nature, asking for market dynamics, and therefore, it should be answered in such a direction. PMA PROMOTES HUBS OF LICIT ECONOMIC ACTIVITIES IN THE REGIONS, IMPROVING SECURITY CONDITIONS AND STRENGTHENING RELATIONS AMONG THE RESIDENTS. PMA's municipalities have been affected by illicit crops for years; in many cases, farmers, settlers, and indigenous people turned to coca crops due to pressure from armed groups that flourished by cause of historical state abandonment and the lack of viable economic alternatives. PMA has demonstrated that it is possible and necessary to transition to law-abiding ways of life. The male and female participants declare that most people prefer to be in a legal economy, but reluctantly accept coca crops as a last resort to the armed conflict and state abandonment. A participant from Caquetá told us: “The rural area [of the municipality] has been ravished by many factors, by the armed conflict, by illicit crops. Well, that helps people gain awareness. They say, ‘I am going to work legally, I am going to work well’, and I know that most people here are good people seeking to work legally.” Focus group beneficiaries, Caquetá THE PRODUCTIVE LEGAL OPTIONS OFFERED BY PMA ARE THE SUPPORTED VALUE CHAINS (COCOA, COFFEE, RUBBER, DAIRY PRODUCTS, AND FRUITS AND VEGETABLES). PMA concentrates its intervention in regions strongly affected by the illicit economy (Nariño, Caquetá, Meta, Bajo Cauca, and Cauca). Targeted municipalities historically have suffered from the presence of illegal armed groups. In the past, these groups used their power to set prices for all crops. Currently, they only focus their attention on coca production and illegal mining. They have no relationship with farmers sowing legal crops; however, they demand information about the projects implemented in areas of influence, impose restrictions on mobility, and oversee entry of foreign visitors. When the productivity and quality of the products increase, the possibility of consolidation of the licit economy increases. “As for the issue of legality, much has improved. I have seen that it is something very positive, because the municipality of El Tambo, which is known as one of the areas with most coca plantations (not only in Cauca but at the national level), many people see that such work there is more lucrative or easier. So thanks to these programs, to this support from USAID, it has improved a lot, not only on an economic level, but also from an educational standpoint, or the way of looking at life and, let's say, that they know that they are in a legal business that does not have to be hiding from anyone, or doing anything in secret. For me, that is priceless.” Commercial ally, El Tambo, Cauca 27 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV STRENGTHENED MARKETING CHANNELS ENHANCE THE SUSTAINABILITY OF LICIT AGRICULTURAL PROCESSES. The adoption of licit crops improves the security of a region while reducing the presence of illegal armed groups. Male and female participants in PMA highlight the perception of peace and tranquility that produces a licit crop. They consider it to be the main incentive for producers. It also allows them to feel proud of their work and livelihood, something that does not happen with illicit crops. A local official in Caquetá explains: “The farmer already understands that the best thing is to be legal and produce a product where he can walk with his [or her] head held high. There begins to be a peace of mind in the producer when he [or she] can radiate a positive example to his (or her) family and environment.” Semi-structured interview, Local official, Caquetá In the same sense, a PMA technical assistant in Caquetá told us: “The main strength of PMA in our area is the construction of peace, hope, development, and the positive change that we are currently having in our region.” Semi-structured interview, Rubber technical assistant, Caquetá THE IMPLEMENTATION OF PAC'S TECHNICAL MODEL (DEMONSTRATION PLOTS, TRAINERS LINKED TO ASSOCIATIONS, TECHNICAL VISITS, AND FIELD DAYS) INCREASES SOLIDARITY AMONG THE NEIGHBORS AS IT BRINGS PRODUCERS TOGETHER. “It seems to me that PMA applies a comprehensive model that changes the producer's mentality in terms of strengthening the families and community organization around the agricultural activity. All this has empowered the small farmer. Learning by doing, a methodology used in demonstration plots, field days where we all meet, and technical assistance, these activities strengthen ties between communities, ties that were previously weak, or did not exist.” Semi-structured interview, Demonstration plot, Cauca THE CONSTRUCTION OF REGIONAL ROADS STRENGTHENS THE COMMUNITY'S TRUST IN LOCAL AUTHORITIES AND PROMOTES A SENSE OF BELONGING. PMA’s infrastructure component has allowed for a coordinated interaction among the Community Action Boards, local governments, and state institutions such as ART or INVIAS. WITHOUT THE INVOLVEMENT OF YOUNG MALES AND FEMALES IN AGRICULTURAL ACTIVITIES, THE CONTINUITY OF THE SECTOR AND THE TRANSFER OF KNOWLEDGE ARE AT RISK, WHICH PUTS THE TEMPORARY SUSTAINABILITY OF THE INTERVENTION AT RISK. The research shows a decrease in the participation of young males and females in agricultural activities. The male and female beneficiaries describe a process of progressive aging of small producers, and there is no foreseeable generational change. It is worth mentioning that PMA is implementing actions that involve youth. We can refer to two of those initiatives. First, the work done with technicians mainly involves young local people; secondly, the activity cooperates with SENA to involve youth in the targeted municipalities. In this regard, a SENA official told us that, unfortunately, most young people do not enroll in agricultural programs; in some cases, participants are below 50 percent of the quota. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 28 Involving young males and females in agricultural work is crucial because it reduces young people's chances of ending up in illegal armed groups or illicit activities. Male and female participants from Caquetá and southern Meta mentioned this situation; in these departments, young people are the primary victims of forced recruitment by illegal armed groups, which is why they migrate to cities like Florencia or Neiva. Involving youth in fieldwork reduces youth migration to other regions or urban centers. In the south of Bolívar and Córdoba, participants point out that young people migrate to cities like Bucaramanga or Barrancabermeja because of the lack of technical or professional education opportunities in the region. Participants point out that the disconnection of young people with their parents' agricultural activities is worrying. A woman producing cocoa in Bolívar said: “On this topic, one looks with great concern at the number of young people leaving the fields. Thus, the towns and cities are filling up with young people. In my case, they were not university students, they finished high school and went to the city (Bucaramanga), and then insisted: ‘Mom sell that farm, what are you doing killing yourself there?’. I ask myself this question, if all young people leave for the city, what will be the future of the people living in the city? Where do the products that people in the city buy come from? Don't they come from the country?” Semi-structured interview, Demonstration plot, Bolívar STATE AGENCIES AND LOCAL GOVERNMENTS HAVE SEEN PMA AS A VIABLE MODEL OF AN AGRICULTURAL PROGRAM. PMA’s infrastructure initiatives demonstrate how to implement a community self-management process, and the PDETs can replicate this example. The local officials interviewed said that PMA’s regional liaisons have been interested in learning about and linking their work with the PDETs (Territorial-focused Development Programs). A local official said: “I think there is a relationship (between PMA and the mayor's office): PMA staff have been extremely interested in learning about the PDET issue, the development plans with a regional focus. I would think that they are very well versed on the subject. In the north of Cauca and Valle, PMA has been a good learning experience for the communities; we hope that the same approach can be used in the projects chosen by the PDETs.” Semi-structured interview, Local official, Valle del Cauca The implementation of viable production chains shows that it is feasible to shift over to legal crops; this is a lesson learned by PMA that can be imitated by the National Comprehensive Program for Crop Substitution. Male and female PMA participants highlight that establishing marketing channels with producers allows for processes to be sustainable over time, as this is a recurring failure in the plans to substitute illicit crops. If the growers do not find markets or the prices are not fair, they tend to return to illegal crops, where selling the product at a fixed price is guaranteed. A commercial ally of the coconut production chain in Nariño explains: “I think it is possible, if we can strengthen marketing issues, seeking to attract the coca farmers to switch to coconut. So, we must target the commercial aspect, to the extent that the coca farmers realize that the coconut or cocoa crops are doing well; in that case, he will go back to 29 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV licit products. We achieve that with a good-enough market price.” Semi-structured interview, Business partner, Nariño EFFECTS OF TERTIARY ROAD IMPROVEMENT Q6: WHAT SOCIAL AND ECONOMIC EFFECTS CAN BE IDENTIFIED FROM TERTIARY ROADS IMPROVEMENT DIFFERENT THAN CONNECTIVITY TO MARKET HUBS? PMA'S INTERVENTIONS WITH TERTIARY ROAD IMPROVEMENTS IN TARGETED MUNICIPALITIES HAS BROUGHT POSITIVE SOCIAL AND ECONOMIC EFFECTS. In general, building, improving, or periodic maintenance of roads brings quantifiable changes in people's lives, especially for those living in remote locations. Upgrading a road network usually contributes to advances in the production and marketing of agricultural goods and better security conditions. FARMERS REPORT DECREASES IN TRAVEL TIMES WHEN MOVING THEIR PRODUCTS THANKS TO THE IMPROVEMENT OF THE TERTIARY ROAD NETWORK. Due to the renovation of tertiary roads, in 16 municipalities producers reported decreases in their travel times between their plots and storage centers. The municipalities with the most significant reductions were Tumaco, Mesetas, Pradera, and San Vicente del Caguán, with decreases of 30 minutes in their times (see Annex 2, Question 6). In the other municipalities, the reduction ranged from five to 30 minutes. Transporting products faster benefits both male and female farmers because it improves efficiency in their value chains and allows an increase in product sales. PRODUCERS REPORT A REDUCTION IN TRAVEL PRICES AND FREIGHT RATES THANKS TO THE UPGRADES OF THE TERTIARY ROAD NETWORK. For instance, cocoa farmers declare a lower value in the cost of travel and freight charges due to improvements in the tertiary road network (see Exhibit 9 earlier). These reductions benefit the value chain because they can translate into lower production costs and better productivity. “The thing is, when you cut the time you also cut the freight; those are the benefits we have received from the Activity.” Semi-structured interview, Caquetá “It is a tertiary road that ostensibly improved connectivity (…) The savings are significant (…) To make a comparison, a producer paid 1,200 pesos to come here before with his motorcycle, and he now has to pay 500 pesos.” Semi-structured interview, Cauca PRODUCERS REPORT AN IMPROVEMENT IN THE QUALITY OF THEIR PRODUCTS AND DELIVERY TIMES DUE TO THE USE OF SMALL VEHICLES AND THE REDUCTION OF ACCIDENTS. The diminution of sharp curves and the drop in traffic flow reduced accidents on the roads that connect producers' farms with storage centers. With this enhancement, male and female farmers report increases in the quality of the transported products, especially in dairy products. (…) it improves the productivity of farmers when they transport their oranges, their plantain, the products do not have to be squished because the road is in bad shape, and they can get to the market, and people do not have to stop selling their products because of quality issues. It is USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 30 something like that.” Semi-structured interview, Cauca “With milk, I have seen that those tanks are very helpful because they preserve the milk’s quality, and the price can stay the same. I understand that Nestle, or whoever buys the milk, does a monthly test; if, let’s say, on February 2 they go and do the test and the milk had to wait 2 hours because the car couldn’t get in time, then they’ll only pay 900 pesos.” Semi-structured interview, Caquetá ENHANCEMENTS TO THE TERTIARY ROAD NETWORK HAVE ALLOWED THE USE OF THE ROADS DURING ANY SEASON OF THE YEAR AND PROVIDED ACCESS TO NEW TRANSPORTATION COMPANIES, INCREASING THE AVAILABLE OPTIONS. Improvements in road infrastructure allow greater use of land transportation in seasons such as winter. Increases in land transportation use, coupled with a surge of available transportation companies in the regions, allowed producers to have more options available to transport their products and, therefore, to market them. “If you could get out of there, you would be stuck, locked in, and couldn’t get out. Now, our families and relatives have small cars and come from the families and can get to our farms and visit us and everything is good.” Semi-structured interview, Meta PRODUCERS HAVE OBSERVED CHANGES IN THE TYPE OF VEHICLES THAT TRANSPORT PRODUCTS, FROM ANIMAL TRACTION TO MOTOR VEHICLES, OR FROM SMALL CARS TO LARGER TRUCKS. Motor vehicles, dumpers, or semitrailers trucks allow farmers to transport products faster and safer, compared to animal-traction vehicles (see Exhibit 12). This transition to better transport vehicles has positive consequences on travel times and connectivity with collection centers. “(…) even I have taken advantage of that infrastructure because we have beneficiaries in that area. The ease of access has improved 100 percent for us when we must travel to offer technical assistance. Before we had to travel by foot or mule, now we can use the motorcycles.” Semi-structured interview, Antioquia Exhibit 12: Type of Vehicle SOURCE: QUALITATIVE DATA COLLECTION INSTRUMENTS 31 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV AFTER ROAD IMPROVEMENTS, FARMERS CAN USE VEHICLES TO THEIR MAXIMUM CAPACITY; THESE VEHICLES WERE PREVIOUSLY UNDER-USED OUT OF FEAR OF DAMAGING THE MERCHANDISE, CAR, OR TRUCK. Growers do not use vehicles to their limit if the probability of product damage is high because of poor road conditions. For example, farmers prefer not to put their entire production at risk. However, after PMA's intervention on road infrastructure, growers and carriers increased vehicle capacity use. Additionally, male and female farmers perceived a reduction in the contribution of transportation costs to the total cost of their products. ROAD IMPROVEMENTS HAVE BROUGHT NEW ECONOMIC ACTIVITIES SUCH AS TOURISM. The improved traveling conditions for vehicles, bicycles, motorcycle taxis, and pedestrians to the municipalities increased tourism. The beneficiaries report that the roads' improvement also allowed the visit of relatives from other regions of the country (see Exhibit 13). THE COMMUNITY HAD RELEVANT PARTICIPATION IN CONSTRUCTING OR UPGRADING ROADS. The stakeholders interviewed report that the community had an essential involvement in infrastructure improvement projects. They say that labor was their foremost contribution. However, they were also associated with new capacities in oversight, inventory management, purchasing, and spending. The municipalities that reported the highest community participation were: Mesetas in Meta, Corinto-Miranda in Cauca, and San Vicente del Caguán in Caquetá (see Exhibit 14). “(…) in any case, in the road improvement, the community participated because they are very proactive. We are building the culvert, and as soon as we put in the wings and the walls, they would send one or two people to help shovel dirt. That is untrained labor that helps speed-up the process and sometimes leaves some savings. That way, we could use our workers somewhere else to make a hole or something and save time.” Semi-structured interview, Caquetá THE COMMUNITIES WERE COMMITTED TO MAINTAINING THE ROADS USING DIFFERENT MECHANISMS. The male and female stakeholders interviewed report that there is a commitment on the part of the communities to carry out periodical maintenance to the road improvements brought by PMA. In 2019, 28 percent of producers reported this commitment to benefit the PMAs efforts to improve roads (see Table 9). The mechanisms they use for such maintenance depend on each community; some schedule one day a month and carry out "mingas" to clean and repair the roads, while others hire road workers and carry out the maintenance every other month (see Exhibit 15). “(…) once you finish the construction, there is something called ‘road workers’ that are people from the community that do the maintenance to the road for six months. We offered that opportunity to the community so they could gain experience and then bid for that type of work. Exhibit 13: Tourism SOURCE: QUALITATIVE DATA COLLECTION INSTRUMENTS USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 32 And all the labor and resources were bought here, in Santander, including the materials.” Semi-structured interview, Cauca THE ENHANCEMENT OF THE TERTIARY ROAD NETWORK HAS STRENGTHENED RELATIONS BETWEEN THE COMMUNITY AND GOVERNMENT AGENCIES. Because roads are improved, the beneficiaries perceive a closer connection with local government institutions. The male and female beneficiaries report that health and social welfare entities, the police, and the army have an increased presence in the targeted areas. In 2019, 27 percent of producers reported that PMA's intervention motivates local governments to expand the road improvement network (see Table 9). Applying the Social Investment Foundation methodology can account for the improved relationship, as this methodology seeks to consolidate grassroots organizations and promote community work. “(…) the Activity inserts itself in other viable interventions, like reinforcing the things done by the ART and other government agencies. We worked on that site, but some things were still pending. For instance, some things were unfinished, like the coating, four culverts, and other connectivity things, which prompted PMA to come and say, ‘let us do it’.” Semi-structured interview, Cauca “From what I know about road improvement, that helps us institutions and helps growers move their product, which enables marketing processes. Some of the infrastructures will still need Exhibit 14: Community participation – infrastructure SOURCE: QUALITATIVE DATA COLLECTION INSTRUMENTS Exhibit 15: Road maintenance SOURCE: QUALITATIVE DATA COLLECTION INSTRUMENTS 33 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV fixing, those municipalities that, due to the conflict, had a significant lag (…) We have to keep our work with the commercial allies, the Rural Development Agency, all the organizations that come, and we as SENA, to achieve the required competitiveness for the municipality of Florida.” Semi-structured interview, Valle del Cauca MOST REGIONS WITH ROAD IMPROVEMENT PROJECTS REPORT GREATER CALMNESS, AS THEY SHIFT FROM ILLICIT TO LICIT CROPS. Some producers claim that road improvement is a fundamental change for the transition of some regions towards licit crops. They report that armed groups in these areas are not opposed to this positive change for the community. “In previous years, this corridor (Monteblanco-La Siberia) was controlled by one group pertaining to the FARC guerrilla. They left this region, and we saw the need to begin doing social investing. We also have there a big group of cacao growers that were benefited from this initiative from a productive standpoint. Obviously, this issue of road construction and what we did within the Activity, to have a road in fair conditions today, helps people strive towards development and reach National Route 25 that crosses our municipality.” Semi-structured interview, Valle del Cauca USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 34 V. EVALUATION RECOMMENDATIONS We prepared all the recommendations listed below for the implementing partner and USAID. The Recommendations Matrix (see Section VI: Recommendations Matrix) contains this list, a suggested period of implementation, and the respective responsible party or parties. It is vital to consider that some actions go beyond the lifetime of the PMA because the lessons learned are more useful for future projects and might be of USAID’s interest in their future programming The Recommendations Matrix also contains responses from the implementing partner, answering if they thought the implementation of those actions was feasible and timely; the answers for each case were either “Accepted”, “Partially Accepted” or “Rejected”. The table in Section VI23 contains the arguments offered by the implementing partner and discussed with us in the pertinent meetings. In bold letters, in front of each recommendation, appears the functional or structural area of the PMA that might benefit from its implementation. Technical work: Develop an operational manual for the PMA activity, with specific sections for each component and its services. Technical work: Write down the technical assistance model for producers; this document can be sorted by typologies of associations, municipalities, or production chains. Operation – Components I and II: Define a route to certify associations as Organizations in Charge of Agricultural Training (EPSEAS) and improve technical assistance in Good Agricultural Practices (GAP), Good Handling Practices (GHP), Good Farming Practices (GFP), and Good Manufacturing Practices (GMP) (including what has to do with certifications). PMA can also promote written commercial agreements. Operation – Components I and II: Strengthen the work done with commercial allies to guarantee the continuity of improvement once the PMA activity finishes. Operation – Component III: Strengthen the infrastructure component to include logistics; this component would have a significant impact on issues such as competitiveness and market opportunities. Consider reinforcing the concepts of tracing and tracking. Operation – Component III: Increase awareness and train male and female farmers and associations on the importance of transportation costs to increase the economic return from road improvements in the regions. Operation – Component III: Guarantee that all the tasks implemented by the infrastructure component strategically link to initiatives undertaken by the other two components. Institutions and governance: Create technical committees by region and value chain to follow-up on the agreements with commercial allies and associations. 23 Annex 1 presents this information in Spanish (to capture the original language). 35 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV Monitoring and evaluation: Review the methodological design and the sample of data compiled by the PMA activity to respond to its information needs. Monitoring and evaluation: For the farmer’s characterization of 2021, review and enlarge the instrument’s scope.24 Monitoring and evaluation: Consolidate and update a stakeholders' database. Monitoring and evaluation: Include indicators by component and create templates to record the follow-up results. Sustainability of the intervention: Encourage male and female youth as much as possible to participate in the PMA. Sustainability of the intervention: Strengthen the relations between the PMA and the Post-Conflict Office, the Regional Renewal Agency (ART), and local governments to implement Territorial-focused Development Programs (PDETs) and the National Comprehensive Program for Crop Substitution. Sustainability of the intervention: Exchange regional experiences and knowledge among value chains and types of associations. 24 The expansion in scope of the survey used by the PMA occurred as a result of discussions with USAID. These included questions on: Link the producer and the association information; Using the data collected to review the activity's management, process, and impact measurement indicators consistency; reviewing the characterization instrument to know the typologies of producers, associations, municipalities, services, and chains, and their relationship with each other; reviewing the quality of the data; redesigning the variable on association headquarters; including logistics and transportation variables (times, distances, and costs); including variables addressing gender issues. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 36 VI. RECOMMENDATIONS MATRIX The Recommendations Matrix lists future actions to undertake, based on the PMA evaluation team's recommendations. The activity evaluation team, the Implementing Partner, and the USAID/Colombia COR collectively drafted this matrix through a discussion process lead by the MEL Activity. On May 27, the evaluation team presented the recommendations derived from the activity's evaluation and discussed alternatives for their implementation, the stakeholders involved, and a possible timeframe (first, second, and third columns of the matrix). The IP then reviewed the proposed recommendations and gave an initial response to each one (accept, partially accept, or reject) and explained their reasons (fourth and fifth columns of the matrix). The MEL activity then held a workshop on June 19 in which we presented responses to the implementing partner's first impressions of each recommendation. In this meeting, we dialogued looking to reach a consensus regarding the Implementing Partner's and the Activity's COR future actions. Notes from that conversation are in columns 6, 7, and 8. Finally, the Implementing Partner and the USAID COR completed the matrix stating the concrete actions and the time frame to implement the accepted recommendations (columns 9 and 10). The matrix is in the following table: 37 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV TABLE 11: RECOMMENDATIONS MATRIX – ACTIONS FOLLOWING PMA EVALUATION NO . RECOMMENDA TION 27/05/2020 IMPLEME NTATIO N DATE SUGGES TED BY THE EVALUA TION 05/27/20 20 IP ACCEPT S - PARTIAL LY ACCEPT S - REJECTS 06/12/20 20 IP REASONS TO ACCEPT - ACCEPT PARTIALLY - REJECT 06/12/2020 IP REASONS TO ACCEPT - ACCEPT PARTIALLY - REJECT 06/19/2020 IMPLEME NTATIO N DATE SUGGEST ED BY THE IP (WHEN ACCEPTE D) 06/19/202 0 MISSION'S ROLE 06/26/2020 ACTIONS PROPOSED BY THE IP (ACCEPTED RECOMMENDATIONS) 06/19/2020 FEEDBACK TO PROPOSED ACTIONS FROM EVALUATION TEAM (ACCEPTED RECOMMENDATION S) 06/26/2020 1 Technical work: Develop an operational manual for the PMA activity, with specific sections for each component and its services. 2021 - First Semester Accepts Partially We want to wait and see further detail, including the manual proposed by the evaluation team. Although we understand the rationale to have an operational manual, this is not a contractual obligation. At this stage of the program (with more than 90% of funds committed), we don't perceive this resource's added value. However, we can incorporate some aspects of the proposal into Component 4 as learning contents. 2021 - First Semester COR follow￾up. Design short modules about technical and operational procedures that can include: a flowchart for requesting proposals; designing a commercial alliance; technical assistance methodologies for different regional contexts; basic technical plans per value chain; commercial strategies per value chain; and commercial strengthening programs. We consider that the concepts mentioned in the proposed actions fulfill the activities suggested in the recommendation. 2 Technical work: Write down the technical assistance model for producers; this document can be sorted by typologies of associations, municipalities, or production chains. 2021 - First Semester Accepts Partially We will wait for a meeting to accept or reject the recommendation. 2021 - First Semester As stated above, the logical path would be to sort the information by product. For each value chain, we could describe the tools offered to increase productivity and quality and the technical assistance methodology we use for each grower type. Although the IP mentions the technical assistance methodology, we think it would be convenient to include a timetable describing training steps, decisions, and activities suggested for each context. These actions would help improve the sustainability odds in the long run. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 38 3 Operation – Components I and II: Define a route to certify associations as Organizations in Charge of Agricultural Training (EPSEAS) and improve technical assistance in Good Agricultural Practices -GAP-, Good Handling Practices -GHP-, Good Farming Practices -GFP-, and Good Manufacturing Practices -GMP- (including what has to do with certifications). PMA can also promote written commercial agreements. 2020 - Second Semester Accepts Partially We will assess the viability of this certification. We want to explore this subject more. The activity is already strengthening GAP, GHP, and GMP. The certifications depend on buyer's demand and their funding. 2020 - Second Semester Using the submitted material as a starting point, PMA will draft a checklist with involved organizations to determine if they currently comply with EPSEA requirements. PMA will define a route to obtain the certification if it makes sense of its business model. We consider that the concepts mentioned in the proposed actions fulfill the activities suggested in the recommendation. 4 Operation – Components I and II: Strengthen the work done with commercial allies to guarantee the continuity of improvement once the PMA activity finishes. 2021 - First Semester Rejects Logistics is a central issue in the activity; traceability, from the origin to the destiny. The answer is NO to this recommendation. We understand the arguments for rejection. Although field evidence did not offer enough support to confirm those arguments, we accept that the IP is undertaking the proposed actions. 39 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV 5 Operation – Component III: Strengthen the infrastructure component to include logistics; this component would have a significant impact on issues such as competitiveness and market opportunities. Consider reinforcing the concepts of tracing and tracking. 2021 - First Semester Rejects The activity will continue to devise mechanisms to strengthen efforts to achieve sustainability. The activity has always focused its efforts on sustainability. We understand the arguments for rejection. Although qualitative evidence collected through fieldwork showed that some allies don't know the activity, we accept that the IP is undertaking the proposed actions. 6 Operation – Component III: Increase awareness and train male and female farmers and associations on the importance of transportation costs to increase the economic return from road improvements in the regions. 2021 - First Semester Rejects Currently, all of the actions related to infrastructure are linked to growers and brokers. At the beginning of the activity, we launched some infrastructure projects before having production initiatives in productive nuclei. Nowadays, the activity is working as suggested. For logistic indicators, recommendation 7 is more pertinent, and actions are found there. 7 Operation – Component III: Guarantee that all the tasks implemented by the infrastructure component strategically link to initiatives undertaken by the other two components. 2020 - Second Semester Accepts 2020 - Second Semester The baseline used to begin new infrastructure projects will include other indexes related to transportation and other logistic issues. This step aims to monitor changes and promulgate, among growers and the community, the importance and benefits of improving and maintaining the projects. We consider that the concepts mentioned in the proposed actions fulfill the activities suggested in the recommendation. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 40 8 Institutions and governance: Create technical committees by region and value chain to follow￾up on the agreements with commercial allies and associations. 2020 - Second Semester Addition al Analysis Necessar y USAID's COR suggests additional funding from the MEL activity to augment the information collected and the sample size. The sample size is designed to be representative by value chain, as explained in the activity's AMELP, approved by USAID. To also be representative by region would imply and additional and significative cost. The information collected by the activity suits the indicator's report's needs and is relevant to make decisions. The MEL activity will clearly define how to implement Omar's measurement and who should do it. To define the scope of the recommendation, it is necessary to carry out a detailed analysis of the current information. It would probably be helpful to do a verification that allows us to check if the existing data is useful to answer the evaluation questions and the Mission's new needs. 9 Monitoring and evaluation: Review the methodological design and the sample of data compiled by the PMA activity to respond to its information needs. 2020 - Second Semester Addition al Analysis Necessar y USAID's COR suggests additional funding from the MEL activity to augment the information collected and the sample size. Unify recommendation with number 8. The MEL activity will clearly define how to implement Omar's measurement and who should do it. To define the scope of the recommendation, it is necessary to carry out a detailed analysis of the current information. It would probably be helpful to do a verification that allows us to check if the existing data is useful to answer the evaluation questions and the Mission's new needs. 10 Monitoring and evaluation: For the farmer’s characterization of 2021, review and enlarge the instrument’s scope . 2020 - Second Semester Accepts Partially (pending changes in recomme ndation's wording) It is important to review the information and instruments provided by the activity. We already have a stakeholder database for the activity. We suggest writing the recommendation to include additional quality control checks. 2020 - Second Semester Include additional quality control checkups. To define the scope of the recommendation, it is necessary to carry out a detailed analysis of the current information. It would probably be helpful to do a verification that allows us to check if the existing data is useful to answer the evaluation questions and the Mission's new needs. 41 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV 11 Monitoring and evaluation: Consolidate and update a stakeholders’ database. 2020 - Second Semester Accepts Partially (pending changes in recomme ndation's wording) We already have indicators by component and the respective templates. This list was designed and agreed with the Mission to be agile for them and us. However, in some cases, the activity is allowed to strengthen current indicators. 2020 - Second Semester Design additional indicators for infrastructure and technical assistance; they will be part of the current monitoring systems (CIRIS and the annual surveys). The idea is to have an internal follow-up of these indicators, but they will not be included in the AMELP (they should be available to USAID upon request). To define the scope of the recommendation, it is necessary to carry out a detailed analysis of the current information. It would probably be helpful to do a verification that allows us to check if the existing data is useful to answer the evaluation questions and the Mission's new needs. 12 Monitoring and evaluation: Include indicators by component and create templates to record the follow-up results. 2020 - Second Semester Rejects The activity promotes direct relations between growers and commercial allies. The activity tracks products for each value chain. The activity is recording evidence of all of this and will share it with the evaluation team. We understand the arguments for rejection. Although field evidence did not offer enough support to confirm those arguments, we accept that the IP is undertaking the proposed actions. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 42 13 Sustainability of the intervention: Strengthen the relations between the PMA and the Post-Conflict Office, the Regional Renewal Agency (ART), and local governments to implement Territorial￾focused Development Programs (PDETs) and National Comprehensive Program for Crop Substitution (PNIS) . 2020 - Second Semester Accepts The activity is interested in strengthening existing relations. The activity will provide results from work done with these agencies. The next step is to look for the ART codes (and from other organizations). 2021 - First Quarter All the activities are coordinated with the proper government agencies; the model and its results will be shared in a new session. We will continue to support the PNIS in Tumaco (as agreed with USAID) contingent upon security conditions. 43 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV 14 Sustainability of the intervention: Encourage male and female youth as much as possible to participate in the PMA. 2020 - Second Semester We explained this was more a recomme ndation for USAID (Omar considers that this connects with the Mission's new goals). This subject can be explained in more depth and have its section or annex in the evaluatio n. The activity is interested in aiding a generational collaboration instead of displacement. The activity has a vulnerable population indicator that includes youth (12%) and assisted youth (18%). Between March 17 and May 31, youth participation was 13%. The activity already has a social inclusion strategy that covers youth issues, among other vulnerable groups. Although we recognize the importance of a generational replacement and follow-up, the recommendations are outside the activity's scope. They seem suited for the Mission and a more comprehensive strategy. We will continue to foster participation from young people. The Mission accepts this recommendat ion and points out the importance of having an annex that explains this issue's future programming. Youth issues will be included in the final report's annexes, as requested by USAID. 15 Sustainability of the intervention: Exchange regional experiences and knowledge among value chains and types of associations. 2020 - Second Semester Accepts This recommendation is in line with actions under implementation: use radio programs to divulge knowledge and experiences amongst regions. We will build a platform to share the activity's expertise. 2020 - Second Semester Promote exchanges according to the needs (virtual caravans, farmer's, and buyer's tours). Develop a platform to share learning materials among different stakeholders. Demonstrative sites already exist as an exchange mechanism. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 44 ANNEX 1: RECOMMENDATIONS MATRIX (SPANISH) The Recommendations Matrix lists future actions to undertake, based on the PMA evaluation team's recommendations. The activity evaluation team, the Implementing Partner, and the USAID/Colombia COR collectively drafted this matrix through a discussion process lead by the MEL Activity. On May 27, the evaluation team presented the recommendations derived from the activity's evaluation and discussed alternatives for their implementation, the stakeholders involved, and a possible timeframe (first, second, and third columns of the matrix). The IP then reviewed the proposed recommendations and gave an initial response to each one (accept, partially accept, or reject) and explained their reasons (fourth and fifth columns of the matrix). The MEL activity then held a workshop on June 19 in which we presented responses to the implementing partner's first impressions of each recommendation. In this meeting, we dialogued looking to reach a consensus regarding the Implementing Partner's and the Activity's COR future actions. Notes from that conversation are in columns 6, 7, and 8. Finally, the Implementing Partner and the USAID COR completed the matrix stating the concrete actions and the time frame to implement the accepted recommendations (columns 9 and 10). The matrix is in the following Table 12: NO RECOMENDAC IÓN 27/05/2020 FECHA SUGERI DA POR EL EQUIPO EVALUA DOR PARA LA IMPLEME NTACIÓ N 27/05/20 20 ACEPTA / ACEPTA PARCIAL MENTE / RECHAZ A (IP) 12/06/20 20 RAZONES PARA ACEPTAR / ACEPTAR PARCIALME NTE / RECHAZAR (IP) 12/06/2020 RAZONES PARA ACEPTAR / ACEPTAR PARCIALMENTE / RECHAZAR (IP) 19/06/2020 FECHA PROPUES TA POR EL IP (SI SE ACEPTA) 19/06/2020 ROL DE LA MISIÓN (EN RELACIÓN CON LAS RECOMEN DACIONES ACEPTADA S PARCIALME NTE/RECH AZADAS) 26/06/2020 ACCIONES PROPUESTAS POR EL IP (RECOMENDACIONES ACEPTADAS) 19/06/2020 RETROALIMENTA CIÓN DEL EQUIPO EVALUADOR EN RELACIÓN A LAS ACCIONES PROPUESTAS (RECOMENDACIO NES ACEPTADAS POR EL IP) 26/06/2020 TABLE 12: MATRÍZ DE RECOMENDACIONES - ACCIONES EVALUACIÓN PMA 45 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV 1 Marco técnico y diseño: Construir un manual operativo de la Actividad con manuales específicos por cada uno de los componentes y sus servicios. Primer Semestre - 2021 Acepta Parcialme nte Esperar a ver más detalle, incluyendo el manual propuesto por el equipo de evaluación. Aunque entendemos la lógica de tener un manual operativo, no es un requisito contractual y a estas alturas del programa (con 90+% de los fondos programados), no vemos el valor agregado para la implementación de PAC tener un manual formal. Sin embargo, sí hay aspectos de los manuales propuestos que vemos que podríamos incorporar como materiales de aprendizaje bajo nuestro Componente 4. Primer Semestre - 2021 Se recomienda seguimiento del COR. Desarrollar breves módulos sobre metodologías técnicas y operativas que podrían incluir un flujograma de procesos de convocatorias; la estructuración de una alianza comercial; metodologías de asistencia técnica de acuerdo a contextos regionales; paquetes tecnológicos básicos por cadena; estrategias comerciales por cadena; y la metodología de fortalecimiento comercial. Se considera que los elementos mencionados en acciones propuestas corresponden al contenido propuesto en la recomendación. 2 Marco técnico y diseño: Poner por escrito el modelo de asistencia técnica a productores; este modelo podría estar ordenado por tipologías de asociaciones, municipios o cadenas productivas. Primer Semestre - 2021 Acepta Parcialme nte PMA esperará al detalle de una reunión para aceptar o no la recomendaci ón, Primer Semestre - 2021 Igual que las acciones arriba. Lo más lógico sería por cadena productiva. Se podría presentar las practicas promovidas por cadena de valor que aumentan la productividad y calidad, y metodología de asistencia técnica según el presupuesto que tenemos por productor. Si bien se hace referencia a una metodología de asistencia técnica, el equipo evaluador considera necesario incluir un cronograma de fases, decisiones y actividades que explique la prestación de la asistencia técnica según el contexto; esto con el fin de garantizar la sostenibilidad de la intervención al finalizar la actividad. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 46 3 Operación e intervenciones – componentes I y II: Describir una ruta para certificar asociaciones como EPSEAS y fortalecer la asistencia técnica en BPA, BPG, BPO y BPM (certificaciones). Promover acuerdos comerciales escritos. Segundo Semestre - 2020 Acepta Parcialme nte El programa evaluará la factibilidad de esta certificación. Queremos ver en detalle este tema. El programa ya está trabajando en fortalecer BPA, BPG y BPO. Las certificaciones dependen de la demanda de compradores y su financiamiento. Segundo Semestre - 2020 Con base en el material presentado, PAC hará la lista de chequeo con sus organizaciones para determinar su estado actual en cumplimiento con requisitos EPSEA y determinará la ruta para certificación (EPSEA) en los casos en que hace sentido para el modelo de negocio de la organización. Se considera que los elementos mencionados en acciones propuestas corresponden al contenido propuesto en la recomendación. 4 Operación e intervenciones – componentes I y II: Fortalecer el trabajo con los aliados comerciales para garantizar la sostenibilidad del esfuerzo cuando la Actividad finalice. Primer Semestre - 2021 Rechaza El programa seguirá desarrolland o mecanismos para fortalecer este trabajo en pro de la sostenibilidad . El enfoque del programa siempre ha estado en pro de la sostenibilidad . Se entiende la razón de rechazo de la recomendación. Aunque La información cualitativa recolectada en el marco de la evaluación, mostró que algunos aliados no conocen o conocen poco la actividad, se entiende que el IP ya está realizando las actividades propuestas. 47 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV 5 Operación e intervenciones – componente III: Fortalecer el componente de Infraestructura, abarcando el concepto de logística; este componente tendría un impacto en temas de competitividad y oportunidades de mercado. Fortalecer los conceptos de trazabilidad y rastreabilidad. Primer Semestre - 2021 Rechaza La logística es central en el programa. La trazabilidad, desde la variedad hasta la custodia (rastreabilida d). La respuesta es NO a la recomendaci ón. Se entiende la razón de rechazo de la recomendación. Aunque la evidencia recogida en el marco de la evaluación no brindó suficientes elementos para constatar, se entiende que el IP ya está realizando las actividades propuestas. 6 Operación e intervenciones – componente III: Garantizar que las intervenciones del componente de infraestructura estén todas orientadas al apoyo de productores y comercializadore s de la Actividad. Primer Semestre - 2021 Rechaza Hoy en día todas las intervencion es de infraestructu ra están orientadas a productores y comercializad ores. Si bien a principios del programa algunas actividades de infraestructura arrancaron antes de establecer las actividades de producción en núcleos productivos, hoy en día el programa sí está trabajando de la forma sugerida. Para el tema de indicadores de logística, va más relacionada con la Recomendación 7 y está contemplada allí. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 48 7 Operación e intervenciones – componente III: Sensibilizar y capacitar a los productores y asociaciones sobre la importancia de los costos de transporte para lograr el mayor beneficio económico a partir del mejoramiento vial de la región. Segundo Semestre - 2020 Acepta Segundo Semestre - 2020 Dentro de la línea base que se toma al momento de arrancar nuevas obras, se incorporarán otros índices relacionados con el transporte y otros temas logísticos con el fin de monitorear los cambios y socializar ante los productores y a la comunidad sobre la importancia y los beneficios de las mejoras y mantenimiento de las mismas. Se considera que los elementos mencionados en acciones propuestas corresponden al contenido de la recomendación. 8 Evaluación y monitoreo: Revisar el diseño metodológico y el marco de la muestra de la información que recoge la Actividad, de manera que se adapte a sus necesidades. Segundo Semestre - 2020 Hace Falta Análisis Adicional El COR de USAID (Omar) propone la posibilidad de un apoyo financiero desde MEL Activity para revisar y eventualment e ampliar el marco de la muestra de la información que se recoge. El tamaño de la muestra está diseñado para ser representativa por cadena, tal y como esta descrito en el AMELP del programa aprobado por USAID. Obtener representatividad además por regional implicaría un costo adicional significativo. La información que PAC recoge se adapta a las necesidades tanto de reporte de indicadores como para la toma de decisiones. Definir claramente de parte de Panagora quién y cómo se realizaría la medición sugerida por Omar. Para definir este alcance, es necesario realizar un análisis muy detallado de la información existente. Posiblemente sería necesario realizar una revisión que permita verificar si la información existente permite contestar a las preguntas de evaluación y responder a las nuevas necesidades de la misión. 49 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV 9 Evaluación y monitoreo: Analizar y ampliar el instrumento de caracterización de productores para la medición del 2021. Segundo Semestre - 2020 Hace Falta Análisis Adicional El COR de USAID (Omar) propone la posibilidad de un apoyo financiero desde MEL Activity para revisar y eventualment e ampliar el marco de la muestra de la información que se recoge. Unificar sugerencia con la número 8. Definir claramente de parte de Panagora quién y cómo se realizaría la medición sugerida por Omar. Para definir este alcance, es necesario realizar un análisis muy detallado de la información existente. Posiblemente sería necesario realizar una revisión que permita verificar si la información existente permite contestar a las preguntas de evaluación y responder a las nuevas necesidades de la misión. 10 Evaluación y monitoreo: Consolidar una base de datos actualizada de actores participantes (todos los involucrados con la Actividad). Segundo Semestre - 2020 Acepta Parcialme nte (según cambios en la redacció n de la recomen dación) Se requiere revisar los instrumentos y la información que el Socio Implementad or va a proveer. Ya se cuenta con una base de datos de actores y beneficiarios del programa. Se sugiere redactar la recomendación orientada a incorporar chequeos adicionales de control de calidad. Segundo Semestre - 2020 Incorporar chequeos adicionales de control de calidad. Para definir este alcance, es necesario realizar un análisis muy detallado de la información existente. Posiblemente sería necesario realizar una revisión que permita verificar si la información existente permite contestar a las preguntas de evaluación y responder a las nuevas necesidades de la misión. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 50 11 Evaluación y monitoreo: Incluir indicadores por componente y elaborar formatos para el respectivo seguimiento. Segundo Semestre - 2020 Acepta Parcialme nte (según cambios en la redacció n de la recomen dación) Ya existen indicadores por componente y formatos correspondientes. Ese listado se diseñó y se acordó con la misión para que fuera ágil tanto para la misión como para el programa. Sin embargo, hay casos específicos que el programa podría fortalecer sus indicadores actuales. Segundo Semestre - 2020 Incorporar indicadores adicionales relacionados a infraestructura y asistencia técnica. Estos estarán incorporados a los sistemas de monitoreo actuales (tanto CIRIS como las encuestas anuales). Se propone un monitoreo interno de estos indicadores (y estarán disponibles para USAID según solicitud) pero no se incluirán en el AMELP. Para definir este alcance, es necesario realizar un análisis muy detallado de la información existente. Posiblemente sería necesario realizar una revisión que permita verificar si la información existente permite contestar a las preguntas de evaluación y responder a las nuevas necesidades de la misión. 12 Arquitectura institucional y gobernabilidad: Crear comités técnicos por región y cadena para hacer seguimiento a los acuerdos entre aliados comerciales y asociaciones. Segundo Semestre - 2020 Rechaza El programa genera relaciones directas entre productor y aliado comercial. El programa genera trazabilidad; hay un análisis detallado para cada cadena. La actividad está dejando evidencia de todo esto; la evidencia se compartirá con el equipo evaluador. Se entiende la razón de rechazo de la recomendación. Aunque la evidencia recogida en el marco de la evaluación no brindó suficientes elementos para constatar, se entiende que el IP ya está realizando las actividades propuestas. 51 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV 13 Sostenibilidad de la intervención: Fortalecer los vínculos de la Actividad con la Alta Consejería de Posconflicto, la ART y los gobiernos locales para el desarrollo de los PDET y PNIS. Segundo Semestre - 2020 Acepta Hay interés del Socio Implementad or de fortalecer estos vínculos, que ya existen. También se entregará información sobre el trabajo que se ha realizado con estas instituciones. El siguiente paso es buscar los códigos de la ART y las instituciones pertinentes. Primer Trimestre - 2021 Se vienen coordinando todas las actividades con los diferentes entes gubernamentales; se volverá a hacer una ronda nueva para mostrar el modelo y los resultados. Seguiremos apoyando a PNIS en Tumaco (según lo acordado con USAID) dependiendo de las consideraciones de seguridad. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT | 52 14 Sostenibilidad de la intervención: Propender por la mayor participación posible de los jóvenes en la Actividad. Segundo Semestre - 2020 El equipo evaluado r explica que es una recomen dación más para USAID (Omar considera que se liga con los nuevos propósit os de la misión, se puede profundiz ar más en este análisis y tener una sección o anexo en la evaluació n para comparti r con el equipo). El programa habla de empalme generacional, no de relevo. El equipo evaluador solicita más información, PMA tiene un indicador de población vulnerable que incluye jóvenes (12%); jóvenes asistidos (18%). Entre 17 de marzo y 31 de mayo, participación de jóvenes del 13%. El programa ya cuenta con una estrategia de inclusión social que abarca temas de jóvenes entre otras poblaciones vulnerables. Aunque se reconoce la importancia del relevo y empalme generacional, las sugerencias especificas quedan por fuera del alcance del programa y son más adecuadas para abordar en la estrategia más global a nivel de la misión. Continuaremos fomentando participación de los jóvenes. La Misión acepta la recomendaci ón y señala la importancia de contar con un anexo respecto a este tema para informar programació n futura. En los anexos del informe final se incluirá el tema de jóvenes como fue requerido por USAID. 53 | PMA ACTIVITY FINAL EVALUATION REPORT USAID.GOV 15 Sostenibilidad de la intervención: Intercambiar conocimiento y experiencias entre regiones por cadena productiva y tipología de asociaciones. Segundo Semestre - 2020 Acepta Esta recomendaci ón va en línea con lo que ya se hace; centralizar y acompañar los espacios radiales y virtuales para intercambiar conocimient o y experiencias entre regiones. Se construirá una plataforma que recoja las experiencias del programa. Segundo Semestre - 2020 Fomentar intercambios (caravanas virtuales; giras de productores y compradores) según necesidad. Se desarrollará una plataforma para compartir materiales de aprendizaje entre diferentes actores del programa. Los sitios demostrativos ya existen como un mecanismo de intercambio. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 54 ANNEX 2: SUPLEMENTAL ANALYSIS AND DATA QUESTION 3 ENTREVISTA SEMIESTRUCTURADA 1 “Las obras realizadas en la región de Santa Rosa del Sur fueron en primera instancia, la construcción de una placa huella de 15 metros de longitud entre San Cristóbal y el centro de acopio de cacao, ubicado en el área urbana (21 km). El segundo tramo de placa huella tiene una longitud de 135 km y se construyó entre Peñas Blancas y el casco urbano (25 km). En el primer tramo no se registran disminuciones en los tiempos de transporte, mientas que en segundo hay una reducción de 120 minutos a 90, un 25%.” (Entrevista semiestructurada, Bolívar) ENTREVISTA SEMIESTRUCTURADA 2 “En esta región se realizaron 2 obras. La primera de ellas, una estabilización de 3 km en la vereda La Esperanza y la segunda 3 alcantarillas en la vereda El Mirovalle. Desde la región de La Esperanza hasta el centro de acopio (25 km) en el área urbana, se redujo el tiempo de tránsito de 60 a 40 minutos, un 33%, mientras que en la otra ruta (22 km), que pasa por La Orquídea, no se produjeron cambios sustanciales.” (Entrevista semiestructurada, Caquetá) Exhibit 16: Organizational Capacity Index MDP: Manejo democrático y participativo, SEF: Situación económica y financiera, CGAG: Capacidad gerencial, administrativa y de gestión, SOA: Servicios ofrecidos a los asociados y HCDH: habilidades y capacidades en el desarrollo humano. FUENTE: ENCUESTA A ORGANIZACIONES 55 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV ENTREVISTA SEMIESTRUCTURADA 3 “La parte positiva del programa Alianzas Comerciales, es que quede una capacidad instalada en las cadenas productivas, que haya quedado un recurso para el tema de comercialización de los productos. Específicamente con la Asociación lo que buscábamos era que se quedará un recurso para el proceso de compra puntual hacia el productor y comercialización.” (Actor local, Caquetá) ENTREVISTA SEMIESTRUCTURADA 4 “El apoyo es muy bueno, hemos tenido muy acogida por parte de las asociaciones de productores, está dejando establecida una buena capacidad instalada en cada una de las organizaciones, para que luego ellos solos, cuando el programa termine, sigan marchando y sigan trabajando con el tema cacaotero.” (Aliado comercial cacao, Antioquia) ENTREVISTA SEMIESTRUCTURADA 5 “Un 185% de aumento en la capacidad de carga por hectárea, quiero decir que hemos pasado de 0,7 vacas por hectárea, unidad gran ganado por hectárea, a dos. sí, un 35% en mejora en la producción de leche, hemos pasado de 3,7 litros vaca/día, a 5 litros vaca/día. Sí, con las mismas vacas.” (Equipo Técnico, Caquetá) ENTREVISTA SEMIESTRUCTURADA 6 “Afortunadamente en Tumaco es muy pequeño y digamos ese tiempo de 6 meses, pues el árbol está digamos que muy bajo de cosecha, pero luego viene la cosecha y automáticamente se ve significativamente el aumento de la producción y hoy día cuando uno mira las ventas de Chocolate Tumaco, pues uno dice, definitivamente la productividad ha venido aumentando.” (Extensionista, Nariño) Exhibit 17: Changes in sales reported by organizations FUENTE: ENCUESTA A ORGANIZACIONES USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 56 ENTREVISTA SEMIESTRUCTURADA 7 “El productor pequeño si sale mal su café, le va mal, ellos le ponen mucho cuidado, las condiciones de suelo son más favorables que otras zonas. El Café del Cauca es un café con nombre y buena calidad, cualquier cliente que compra ese café le cumplen con los requisitos.” (Actor Local, Cauca) ENTREVISTA SEMIESTRUCTURADA 8 “No, nosotros lo que hacemos como asociación es apoyarlos en el tema de las ventas, como los ganaderos somos hartos, entonces se ha fortalecido la cadena láctea pues por núcleos, entonces se les ha apoyado con los tanques de frío y se ha garantizado pues la alianza comercial con ciertas empresas […]. Y se apoyan con los temas de los bancos bastante porque nosotros somos los que les certificamos al banco que es ganadero y que le hacemos la asistencia técnica, entonces ellos tienen un descuento también en sus, ¿cómo es que se llama? En los intereses, pues con esa certificación que les brindamos. Y somos garantes del tema de la aftosa aquí en el Municipio, entonces nos toca velar por la inocuidad y el bienestar de los animales y pues de la región como total.” (Actor Local, Caquetá). ENTREVISTA SEMIESTRUCTURADA 9 “Pero nos hacía falta infraestructura, podíamos también hacerle su infraestructura para mejorar calidad, todo en beneficio del agricultor que mejore calidad y si mejora calidad, mejora ingresos, mejora producción, mejora todo. Entonces son proyectos que se complementan unos con otros, de pronto ese proyecto no traía poda, pero el tema de alianzas comerciales daba la poda, o que el proyecto no traía análisis de suelo, pero aquí había. Entonces son proyectos que se complementan con un beneficio realmente.” (Actor Local, Bolívar) Exhibit 18: Access to productive assets FUENTE: ENCUESTA A ORGANIZACIONES 57 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV ENTREVISTA SEMIESTRUCTURADA 10 “La implementación de 6 sistemas de riego, de 6 parcelas en café. Pero allí como se dice, como todo no es color de rosa, porque uno cuenta lo bueno y lo malo, no es lo malo, son unos inconvenientes que se hay, pero esos inconvenientes, más que todo son por los tiempos, porque fue un proyecto muy chévere, pero fue muy rápido, porque era ‘tome esta plata y usted la tiene que gastar en 3 meses.” (Actor Local, Valle del Cauca) ENTREVISTA SEMIESTRUCTURADA 11 “También se hizo al aliado comercial que fue que Quesecar, uno de los comercializadores de queso, el que más compra acá en Cartagena. Se le dio un cuarto frío que, inclusive mañana, se va a hacer la entrega oficial del cuarto frío, ahí al lado de donde está lo de ChoCaguán, también ahí al lado, esa parte también se va a trabajar eso”. (Actor Local, Caquetá) Exhibit 19: Associations with purchase agreements FUENTE: ENCUESTA A ORGANIZACIONES USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 58 Exhibit 20: Associations with marketing agreements – 2018 FUENTE: ENCUESTA A ORGANIZACIONES Exhibit 21: Associations with marketing agreements – 2019 FUENTE: ENCUESTA A ORGANIZACIONES Exhibit 22: Associations satisfied with agreements FUENTE: ENCUESTA A ORGANIZACIONES 59 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV QUESTION 6 Exhibit 23: Associations that mention technical assistance topics FUENTE: ENCUESTA A ORGANIZACIONES Exhibit 24: Tumaco - Social Map USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 60 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 Pinal, Salado Centro de transformación Cacao Área Urbana Palmira 22 90 60 -30 Zona 2 Las Varas Centro de transformación Cacao Área Urbana Palmira 28 120 90 -30 ZONA ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) CAMBIO EN TIEMPO Zona 1 Montebello Centro de acopio Cacao 15 120 90 -30 Zona 2 Buenavista Centro de acopio Cacao 18 120 90 -30 TABLE 13: CARTOGRAFÍA SOCIAL EN TUMACO TABLE 14: CARTOGRAFÍA SOCIAL EN MESETAS Exhibit 25: Mesetas - Social Map 61 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 La Carbonera Centro de transformación Lácteos Área Urbana Palmira 41 120 90 -30 Zona 2 El Nogal Centro de transformación Lácteos Área Urbana Palmira 42 120 90 -30 TABLE 15: CARTOGRAFÍA SOCIAL EN PRADERA Exhibit 26: Pradera - Social Map USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 62 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 La Ilusión Centro de acopio cacao Área Urbana 28 90 60 -30 Zona 2 Las Lajas Centro de acopio cacao Área Urbana 33 120 90 -30 ZONA ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) CAMBIO EN TIEMPO Zona 1 La Pradera Centro de acopio Cacao 19 60 40 -20 TABLE 16: CARTOGRAFÍA SOCIAL EN SAN VICENTE DEL CAGUÁN TABLE 17: CARTOGRAFÍA SOCIAL EN BELÉN DE LOS ANDAQUÍES Exhibit 27: San Vicente del Caguán - Social Map 63 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Zona 2 Fragua delicias Centro de acopio Cacao 35 150 120 -30 ZONA ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) CAMBIO EN TIEMPO Zona 1 San Cristóbal Centro de Acopio Cacao 21 90 90 0 Zona 2 Peñas Blancas Centro de Acopio Cacao 25 120 90 -30 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 Las Guacas Centro de acopio Cacao Área Urbana 18 120 120 0 Zona 2 Los Alpes Centro de acopio Cacao Área Urbana 13 40 40 0 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 2.5 km del área Urbana Centro de acopio Café Área Urbana 2,5 20 10 -10 Zona 2 Uribe Centro de acopio Café Área Urbana 24 90 60 -30 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 San Francisco Centro de acopio Mora Área Urbana 6,5 20 15 -5 Zona 1 La Rivera Centro de acopio Mora Área Urbana 11 40 20 -20 TABLE 18: CARTOGRAFÍA SOCIAL EN SANTA ROSA DEL SUR TABLE 19: CARTOGRAFÍA SOCIAL EN CORINTO TABLE 20: CARTOGRAFÍA SOCIAL EN EL TAMBO TABLE 21: CARTOGRAFÍA SOCIAL EN FLORIDA USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 64 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 La Esmeralda y La Reina Centro de acopio Lácteos Área Urbana 44 90 70 -20 Zona 2 Reina Baja Centro de acopio Lácteos Área Urbana 58 120 90 -30 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 La Orquídea Centro de acopio cacao Área Urbana 22 60 60 0 Zona 2 La Esperanza Centro de acopio cacao Área Urbana 25 60 40 -20 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 San Cristóbal Centro de acopio cacao Área Urbana 21 90 90 0 Zona 2 Peñas Blancas Centro de acopio cacao Área Urbana 25 120 90 -30 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 Tigui Bajo Centro de Transformación Cacao Área Urbana 40 120 90 -30 Zona 2 Margarita Alta Centro de Transformación Cacao Área Urbana 25 100 100 0 TABLE 22: CARTOGRAFÍA SOCIAL EN LA MONTAÑITA TABLE 23: CARTOGRAFÍA SOCIAL EN PUERTO RICO TABLE 24: CARTOGRAFÍA SOCIAL EN SANTANDER DE QUILICHAO TABLE 25: CARTOGRAFÍA SOCIAL EN SIMITÍ 65 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 Guarumal Centro de Transformación Cacao Área Urbana 16 60 60 0 Zona 2 La Chica Centro de Transformación Cacao Área Urbana 24 120 120 0 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 Monte Blanco Centro de Transformación Cacao Área Urbana 43 150 120 -30 Zona 2 Colmenas Centro de Transformación Cacao Área Urbana 29 150 150 0 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 La Pradera Centro de acopio lácteos Área Urbana 7 40 20 -20 Zona 2 Fragua Delicias Centro de acopio lácteos Área Urbana 19 120 90 -30 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 Termales Centro de acopio cacao Área Urbana 25 90 60 -30 Zona 2 Agua Linda Centro de acopio cacao Área Urbana 36 120 90 -30 TABLE 26: CARTOGRAFÍA SOCIAL EN TIERRALTA TABLE 27: CARTOGRAFÍA SOCIAL EN VALDIVIA TABLE 28: CARTOGRAFÍA SOCIAL EN CARTAGENA DEL CHAIRA TABLE 29: CARTOGRAFÍA SOCIAL EN VISTA HERMOSA USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 66 ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) DELTA T Zona 1 El Reposito Centro de transformación cacao Área Urbana 11 40 20 -20 Zona 2 Vda. El Águila Centro de transformación cacao Área Urbana 38 90 60 -30 ENTREVISTA SEMIESTRUCTURADA 1-CAQUETÁ “El tema... al reducir tiempo, también reduce costos de transporte, eso es como lo que nos han favorecido a la zona del tema de infraestructura del programa.” ENTREVISTA SEMIESTRUCTURADA 1-CAUCA “Es una vía terciaria que mejoró ostensiblemente el tema de conectividad […]Y esos ahorros son muchos […] Por decirte un comparativo, mientras venir un productor antes acá le costaba 1200 pesos venir en su moto todos los días, hoy en día le cuesta 500 pesos.” ENTREVISTA SEMIESTRUCTURADA 3-CAUCA “…mejora la productividad de las personas, cuando saquen su naranja, saquen sus plátanos, no salgan todos apachurrados y lleguen al mercado porque la carretera está mal, llegó acá apachurrado y tenga que dejar de vender sus productos y no los puedan vender de calidad, entonces es algo ligado a eso.” ENTREVISTA SEMIESTRUCTURADA 4-CAQUETÁ “…con el tema de la leche he visto que esos tanques son de mucha ayuda porque ayudan a conservar la calidad de la leche y no varía el precio, tengo entendido que Nestlé o los que compran la leche, ellos hacen una prueba mensual, sí en esta prueba mensual digamos al inicio del 2 de febrero hacen la prueba de su leche van y le hacen y sí tiene digamos se le paso 2 horas que no paso el carro y perdió calidad, entonces le calculan a $900 pesos.” ENTREVISTA SEMIESTRUCTURADA 5-META “Si usted, se salía de ella ahí quedaba bloqueado, atascado y no podía salir. Entonces, ya las familias o los familiares nuestros ya tienen sus carritos pequeños que vienen de las ciudades y ya pueden venir a nuestras fincas a visitarnos y todo va bien.” TABLE 30: CARTOGRAFÍA SOCIAL EN VALENCIA 67 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 28: Type of Vehicle FUENTE: INSTRUMENTOS DE RECOLECCIÓN DE INFORMACIÓN CUALITATIVA Exhibit 29: Tourism FUENTE: INSTRUMENTOS DE RECOLECCIÓN DE INFORMACIÓN CUALITATIVA Exhibit 30: Community participation – infrastructure FUENTE: INSTRUMENTOS DE RECOLECCIÓN DE INFORMACIÓN CUALITATIVA USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 68 ENTREVISTA SEMIESTRUCTURADA 6-ANTIOQUIA “…yo hasta me he beneficiado de esa infraestructura, porque para nosotros, nosotros tenemos beneficiarios en esa zona y para nosotros ha mejorado un 100% la movilidad para ir a hacer asistencia técnica, antes íbamos a pie o en mula, ahora podemos ir en las motos.” El mapa presenta lo que se reportó en las entrevistas cualitativas* que hicieron referencia a la categoría de análisis “Participación de la Comunidad en los Proyectos de Infraestructura”. ENTREVISTA SEMIESTRUCTURADA 7 -CAQUETÁ “…en la obra de todas maneras la comunidad tuvo participación porque la comunidad aquí es muy inquieta, nosotros estamos construyendo la alcantarilla apenas hacíamos las aletas y los muros, la comunidad ellos en veces nos mandaban uno o dos para que nos ayudaran a echar tierra que eso es mano de obra no calificada para que nos rindiera y a ver si nos quedaba más plata porque el obrero que estaba ganando el sueldo pues que ya lo poníamos a hacer el hueco en otra parte, entonces la comunidad nos ayudaba para que nos rindiera.” ENTREVISTA SEMIESTRUCTURADA 8-CAUCA “…una vez finalizada la obra hay un término que usan que se llama camineros, que son las personas de la comunidad con la cual se le hace durante 6 meses más mantenimiento a la vía, entonces se le dio la oportunidad a la comunidad de ser la ejecutora de eso, tener la experiencia para poder seguir licitando en ese tipo de obras, y pues toda la mano de obra y el empleo y también los recursos fueron comprados acá en Santander, todos los materiales.” El mapa (exhibit 16) presenta lo que se reportó en las entrevistas cualitativas* que hicieron referencia a la categoría de análisis “Mantenimiento de la Obra por Municipios”. 69 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV ENTREVISTA SEMIESTRUCTURADA 9-CAUCA “…el PAC interviene en donde ya ha habido otras intervenciones que se puedan ligar, como reforzar lo que ha hecho ART y otras entidades del orden gubernamental. Y esa obra se había intervenido, pero habían quedado muchas cosas pendientes. Entonces había quedado pendiente la placa huella, 4 alcantarillas, el tema de conectividad, otras cosas, y eso hizo pues que el PAC dijera, “hagámoslo y ejecutémoslo.” ENTREVISTA SEMIESTRUCTURADA 10-VALLE DEL CAUCA “De lo que conozco en cuestión del arreglo de vías, eso nos ayuda a nosotros como instituciones y a los productores para poder movilizar su producto, y creo que eso ayuda a mejorar los procesos de comercialización. Aun, quedará faltando organizar parte de infraestructura, pero, pues esos municipios que, por los temas de conflicto, pues, tenían un abandono bastante grande […]. Habrá que seguir trabajando de la mano de Alianzas Comerciales, de la ADR, de todas las instituciones que lleguen y, nosotros como SENA, para, realmente, lograr la competitividad que merece y que debe de tener el municipio de Florida.” ENTREVISTA SEMIESTRUCTURADA 11-ANTIOQUIA “Este corredor (Monteblanco-La Siberia) fue dominado por el grupo de las FARC en años anteriores, ellos salieron de esta zona y se vio la necesidad de empezar a hacer inversión social allí. Ahí tenemos también un gran número de productores de cacao que fueron impactados por esta iniciativa desde lo productivo y Exhibit 31: Road maintenance FUENTE: INSTRUMENTOS DE RECOLECCIÓN DE INFORMACIÓN CUALITATIVA USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 70 obviamente desde este tema de apertura de vías, y lo que pudimos hacer también dentro del programa, fue bastante productivo para que hoy haya una vía en medianas condiciones donde la gente pueda reducir esas brechas hacia el desarrollo, hacia la troncal, hacia la ruta nacional 25 que es la que atraviesa nuestro Municipio.” 71 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV ANNEX 3: FINDINGS, CONCLUSIONS, AND RECOMMENDATIONS DOCUMENTO DE HALLAZGOS, CONCLUSIONES Y RECOMENDACIONES PREGUNTA 1: ¿QUÉ TAN EFECTIVOS SON LOS MODELOS USADOS POR LA ACTIVIDAD PAC PARA PROVEER ASISTENCIA TÉCNICA A LAS CADENAS DE VALOR APOYADAS POR USAID? Para las preguntas 1 y 2, tomar en consideración que los modelos técnicos usados por la Actividad incluyen (i) acciones de transferencia de tecnología, (ii) mejoramiento de prácticas agrícolas y (iii) el uso de varias tecnologías que abarcan la implementación de “parcelas demostrativas”, cuadrillas, capacitación de capacitadores, “mingas” y asistencia técnica directa. También se debe determinar los factores directos e indirectos que han contribuido a la efectividad de estos modelos. CONCLUSIONES P1. C1. La EFECTIVIDAD es la capacidad de las acciones para producir un resultado deseado. Los resultados identificados están enmarcados en los indicadores que usa la Actividad para medir su impacto o resultado frente a la asistencia técnica prestada. Los principales resultados deseados son: • Incremento en ventas de una asociación (pesos); • Incremento en la productividad de un productor (toneladas/litros por hectárea); • Incremento en la calidad del producto (certificaciones obtenidas). El MODELO es el conjunto de mecanismos y herramientas que utiliza la Actividad para prestar el servicio de Asistencia Técnica. (P1 H1) P1. C2. Productividad: Producción, rendimientos y ventas. La mayoría de los productores afirman es que se han aumentado los rendimientos y las ventas. (P1, H2) P1. C3. Calidad y certificaciones del producto: La percepción frente a la calidad de los productos ha mejorado a partir de la prestación del servicio de asistencia técnica, sin embargo, el número de certificaciones es bajo (P1, H3) USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 72 P1. C4. Consolidación de mercados: La asistencia técnica coadyuva a la creación, reactivación, consolidación y fortalecimiento de los mercados. (P1, H4) P1. C5 Procesos de transformación y valor agregado de los productos: La asistencia técnica prestada ha permitido que las asociaciones procesen sus productos para así generarles un valor agregado y poder vender sus productos a un mejor precio. (P1, H5) P1. C6. Acceso y uso efectivo de activos productivos: Permite que se brinde y se aplique el modelo de asistencia técnica y se vean mayores resultados. Promueve la asociatividad y el acceso a mercados. (P1, H6) P1. C7. Gestión ambiental. Si bien la gestión ambiental no es un propósito directo de la Actividad se evidencia una gestión ambiental positiva. Cuando se presta el servicio de asistencia técnica se incluye el tema de Buenas Prácticas Agrícolas y Ganaderas que trae como variables y módulos el tema ambiental. (P1, H 7) P1. C8. Los mecanismos usados por la Actividad se muestran, en general, efectivos para proveer asistencia a las cadenas de valor apoyadas por USAID. Puede haber unos mecanismos más efectivos que otros, pero esta Evaluación no hace una valoración individual de las herramientas, sólo una valoración colectiva. (P1, H8) HALLAZGOS P1. H1. PRINCIPALES EFECTOS DEL MODELO DE ASISTENCIA TECNICA Y SU EFECTIVIDAD Para poder determinar si el modelo de asistencia técnica es efectivo se debe definir qué se entiende por modelo y efectividad. El modelo tal y como se plantea en el anexo 1, es el conjunto de mecanismos y herramientas que utiliza la Actividad para prestar el servicio de Asistencia Técnica; y la efectividad se define como: en qué medida la Actividad logra cumplir los resultados planteados (capacidad de las acciones o intervenciones para producir un resultado deseado). Los resultados identificados a su vez están enmarcados en los indicadores25 que usa la Actividad para medir su impacto o resultado frente a la 25 Los principales indicadores de resultado e impacto que usa la Actividad que miden el efecto directo de la prestación de asistencia técnica son: 1. el incremento en el ingreso de los productores (Value of incremental net income of producers in promoted value chains $); 2. Incremento en ventas de los productores (Value of smallholder incremental sales generated); 3. Productividad de los productos de las cadenas productivas (Productivity of targeted value chain commodities has/kilos/litro); 4.Numero de organizaciones que recibieron asistencia técnica para lograr los estándares mínimos de calidad (Number of firms receiving technical assistance to comply with minimum national or international quality control standards); 5. Número de individuos que han recibido el servicio de asistencia técnica (Number of individuals who have received short-term agricultural sector productivity or food security training); 6. Número de organizaciones fortalecidas (Number of organizations with business performance strengthened). 73 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV asistencia técnica prestada. (El modelo de asistencia técnica es un medio para lograr los resultados del Programa), y el nivel de la efectividad se evaluará en términos de los datos recogidos. Teniendo en cuenta como marco estos indicadores de resultado, se definieron unas categorías de temas principales y secundarios según su nivel de importancia en términos de efectividad y tomando en cuenta la batería de indicadores priorizados por la Actividad, para así describir las conclusiones que llevan a determinar la efectividad del modelo de asistencia técnica. • Principales: Productividad: Producción, rendimientos y ventas; Calidad de producto; Apropiación del conocimiento de la asistencia técnica, desarrollo de capacidades y competencias; Acceso a certificaciones; Consolidación de mercados; y Procesamiento y valor agregado de producto. • Secundarios: Acceso a activos productivos; Gestión ambiental; Fortalecimiento nuclear Si bien en el presente documento se ilustran algunos resultados que requieren fortalecerse, se puede concluir que el conjunto de mecanismos usados por la Actividad, se muestran en general, efectivos para proveer el servicio de asistencia técnica a las cadenas de valor y sus respectivos productores. Pueden existir unos mecanismos más efectivos que otros, pero esta Evaluación no hace una valoración individual de las herramientas, sólo una valoración colectiva. P1. H2. PRODUCTIVIDAD: PRODUCCIÓN, RENDIMIENTOS(KILOS/LITROS/HAS), Y VENTAS (INGRESOS). • INDICADOR ASOCIADO: Value of incremental net income of producers in promoted value chains; Value of smallholder incremental sales generated); Productivity of targeted value chain commodities has/kilos/litro). Number of hectares of target crops supported by the program (custom) Uno de los principales factores que pueden medir qué tan efectivo es el modelo de la asistencia técnica en los productores, es el aumento de productividad de su cultivo o proyecto, y que esta a su vez se mide en términos de producción, rendimientos y ventas. A partir de esto se puede afirmar que si ha sido efectiva, dado que la mayoría de los productores han logrado aumentar sus rendimientos y ventas. En el caso de los productores afirman tener un incremento en el porcentaje de la producción que se vende, entre en 1 al 10% (para todas las cadenas). Así mismo, los productores de las cadenas de cacao, café y caucho perciben que el 90% de su producción ha sido vendida (Tabla 20). Sin embargo, la percepción frente cambios en producción, ventas y precio de ventas no es tan alto (Tabla 21). Cadena % vendido Cacao 94.8% Café 93% Caucho 91.9% Fuente: Encuesta a organizaciones TABLA 31: VENTAS PRODUCTORES INDIVIDUALES USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 74 Fuente: Encuesta a productores Por otro lado, la mayoría de las asociaciones afirman un aumento de ventas en sus cultivos, el 60% de las asociaciones afirman tener un incremento de ventas de en un 50% (entre 2018 y 2019), y por región se destaca la región de Córdoba donde el 80% de sus asociaciones lograron este mismo aumento (Tabla 22). REGION ASOCIACIONES Y VENTAS CÓRDOBA NARIÑO CAUCA CAQUETÁ INCREMENTO DE VENTAS EN UN 50% 80% 40% 63% 64% Fuente: Encuesta a organizaciones Si se analiza el comportamiento de las ventas (pesos) y de producción (kilos y litros) por región, el comportamiento varía y se evidencian algunas disminuciones porcentuales (Tablas 23-24). En el caso de cacao seco, para Cordoba se percibe una disminución en producción 23%, y en Caquetá de un 26% respectivamente, sin embargo, sus ventas totales en pesos aumentaron, esto puede deberse porque lograron vender su producto a mayor precio. En el caso de café pergamino, se evidencia una disminución de un 66% en producción y 37% en ventas en la región de Nariño. Frente la cadena de caucho sólo se percibe un incremento de ventas en la región de Caquetá, en un 62. REGION VENTAS TOTALES DE CACAO SECO ($) (2018-2019) CANTIDAD EN KILOS Córdoba 29% -23% Nariño -7% -35% Cauca 42% 12% Caquetá 31% -26% Fuente: Encuesta a organizaciones TABLA 32. CAMBIOS PERCIBIDOS CAMBIOS PERCIBIDOS % DE PROD CACAO 2019 % DE PROD CAFE 2019 % DE PROD CAUCHO 2019 % DE PROD LACTEOS 2019 Cambios en producción 52,2% 19,7% 31,9% 47,7% Cambios en ventas 10,3% 7,8% 10,0% 15,0% Mejor precio venta 2,6% 10,4% 2,5% 6,4% TABLA 33: INCREMENTO DE VENTAS DEL 50% TABLA 34. VENTAS Y PRODUCCIÓN POR REGION 75 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV REGION VENTAS TOTALES DE CAFÉ PERGAMINO ($) 2018-2019 CANTIDAD EN KILOS Córdoba 33% 14% Nariño26 -37% -66% Cauca 96% 16% Caquetá 0% 0% Fuente: Encuesta a organizaciones Adicionalmente, los principales beneficios percibidos van desde la mejora de ingresos y mejora de calidad de vida de los productores locales y localmente, y se empieza a reconocer un aumento en la rentabilidad de la producción agrícola y la diversificación productiva de la región. Esto se puede evidenciar en algunos municipios y cadenas tal como se ilustra a continuación: “En Belén de los Andaquies, los productores identificaron y afirman que, en una parcela de réplica, la producción ha mejorado en más de un 100: “Imagínese este resultado, duplicamos nuestra producción, si un productor producía 80 kilos antes del proyecto, hoy en día está produciendo 160, 220 kilos. Si se le pagaba 5000 pesos antes del proyecto, hoy en día se le está pagando 8000.”. P1. H3. CALIDAD Y CERTIFICACIONES DE PRODUCTO. • INDICADOR ASOCIADO: Number of firms receiving technical assistance to comply with minimum national or international quality control standards; Number of firms receiving USG assistance that have obtained certification with (an) international quality control institution(s) in meeting minimum product standards La percepción de los productores frente a la calidad de productos es que ha mejorado a partir de la prestación del servicio de asistencia técnica prestado, en la cadena de cacao en las regiones de Córdoba, Cauca, y Caquetá, en la cadena de café en Cordoba y Nariño, y en la cadena de lácteos en Cordoba y Cauca. Sin embargo, para la cadena de Mora/coco/plátano no se perciben ningún tipo de ventas de este tipo, esto debido al nivel de maduración de los proyectos (Tabla 25). Cuando se habla de calidad del producto es relativo dependiendo del uso que le vaya a dar el aliado comercial, la calidad no tiene que ver con el procesamiento del producto. REGION CACAO CAFÉ LACTEOS CAUCHO MORA/COCO/PLATANO Córdoba 86% 100% 50% 0% 0% 26 La actividad PMA nos ha reportado que tiene proyectos de café en Nariño; sin embargo, estos datos salen de las respuestas que dieron los entrevistados y por eso debemos reportarlo. TABLA 35. VENTAS Y PRODUCCIÓN POR REGION TABLA 36: ASOCIACIONES Y VENTAS DE PRODUCTOS DE PRIMERA CALIDAD USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 76 Nariño 50% 50% 0% 0% 0% Cauca 100% 29% 100% 0% 0% Caquetá 60% 0% 0% 50% 0% Valdivia 0% 0% 0% 0% 0% Fuente: Encuesta a organizaciones Así mismo esto se evidencia en lo que afirman los productores de Miranda que describen los efectos logrados por medio de la asistencia técnica en términos de calidad del grano del café (humedad), productividad y competitividad: “Cuando ya el PAC comienza a intervenir, pues ya comenzamos a educar al productor de cuando tiene que sacar un café con algunas prácticas y ya tenemos un centro de acopio donde también se educa al productor, realmente por qué tienen que sacar la humedad en el rango óptimo, que es el factor de rendimiento, qué beneficios le trae…. entonces ya los productores se van preparando…ya sabían cuál es la calidad, cuál es el procedimiento de protocolo de compra, y ya hoy en día los precios hasta mejoraron porque antes manejaban el pecio por debajo de lo que indicaba la Federación. La asistencia técnica prestada puede tener efectos en los productores en la medida que estos logren certificar sus productos, tal y como lo plantean los indicadores de la misma Actividad, frente a esto se presenta un vacío por parte de la Actividad. Existe un limitado número de asociaciones que actualmente cuentan con certificaciones, registros y marcas propias, sólo el 5% de asociaciones de productores de cacao, aseguran tener certificaciones, y un 9% de productores de café respectivamente (Tabla 26). Adicionalmente, un 15% del total de asociaciones cuentan con registro INVIMA y un 17% con marca registrada (Tabla 27). % DE ASOCIACIONES (TOTAL) QUE TIENEN CERTIFICADOS CADENA PRODUCTIVA 5% CACAO 9% CAFÉ 0% CAUCHO 0% LACTEOS 22% MORA-COCO-PLATANO Fuente: Encuesta a organizaciones REGISTRO Y MARCA % DE ASOCIACIONES (TOTAL) Proporción asociaciones con registro INVIMA 15% Proporción asociaciones con marca registrada 17% TABLA 37. ASOCIACIONES Y CERTIFICADOS TABLA 38. REGISTRO Y MARCA 77 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Fuente: Encuesta a organizaciones Ahora bien, desde la perspectiva de los productores, Se percibe un incremento del 2018 al 2019 en la exigencia de estándares de calidad para las cadenas de Cacao, Café y Caucho. En la cadena de Caucho las exigencias de calidad por parte del intermediario y el procesador aumentaron en un 100% mientras que en el caso de la cadena de lácteos las exigencias de calidad por parte del procesador disminuyeron en un 100% (Tabla 28). CADENA ASOCIACION INTERMEDIARIO PROCESADOR CACAO 13% -23% 44% CAFÉ 14% 30% 0% CAUCHO 10% 100% 100% LACTEOS -30% 25% -100% Fuente: Encuesta a organizaciones APROPIACIÓN DEL CONOCIMIENTO DE LA ASISTENCIA TECNICA, DESARROLLO DE CAPACIDADES Y COMPETENCIAS • INDICADOR ASOCIADO: Number of organizations with business performance strengthened.; Number of individuals who have received short-term agricultural sector productivity or food security training Laos productores reconocen la utilidad de la asistencia técnica que presta la Actividad, esto se evidencia mediante que un alto porcentaje de productores aseguran recibir servicio de asistencia técnica y se encuentran satisfechos con la calidad del servicio (Diagrama 32). TABLA 39. PRODUCTORES Y ESTANDARES DE CALIDADES DE CALIDAD Diagrama 32: Utilidad del Servicio de AT FUENTE: ENCUESTA A PRODUCTORES USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 78 Así mismo de evidencia la apropiación del respectivo conocimiento frente a las diferentes temáticas que se han impartido, esto se puede evidenciar a partir, que un alto porcentaje de asociaciones reconocen como temas relevantes de la prestación de asistencia técnica los siguientes: el manejo de cultivo (84%), buenas prácticas (93%), manejo del suelo (95%) y manejo de plagas y enfermedades (91%) en general para todas las cadenas (Tabla 29). TEMA DE ASISTENCIA TECNICA % DE ASOCIACIONES (TOTAL) Manejo del cultivo 84% Buenas prácticas 93% Manejo del suelo 95% Postcosecha 77% Manejo de plagas y enfermedades 91% Fuente: Encuesta a organizaciones Adicionalmente, se puede hacer una comparación por región, este análisis demuestra que las regiones de Córdoba, Nariño y Cauca, las asociaciones en su totalidad priorizan el tema de buenas prácticas y manejo de plagas y enfermedades (Tabla 30). La asistencia técnica se ha centrado básicamente en generar y desarrollar buenas prácticas agrícolas, ganaderas y manufactureras, para así lograr productos de buena calidad y cumplir con los estándares y condiciones de calidad pactadas con el aliado comercial. REGION ASOCIACIACIONES QUE RECIBIERON AT EN CÓRDOBA NARIÑO CAUCA CAQUETÁ Manejo del cultivo 100% 67% 91% 67% Manejo del hato 0% 33% 9% 33% Buenas prácticas 100% 100% 73% 100% Manejo del suelo 100% 83% 91% 100% Postcosecha 90% 67% 82% 67% Manejo de plagas y enfermedades 100% 100% 64% 100% Fuente: Encuesta a organizaciones Unos de los mecanismos aplicados como parte del modelo de asistencia técnica son las parcelas demostrativas y replica que generan en los productores una efectiva apropiación y aplicación del TABLA 40. TIPO DE ASISTENCIA TÉCNICA TABLA 41. TIPO DE ASISTENCIA TÉCNICA POR REGION 79 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV conocimiento, y es un mecanismo que a su vez permite lograr un mayor alcance en términos de llegada a más productores, dado que el equipo de asistentes técnicos de la Actividad es limitado. Las experiencias y los buenos resultados de los productores participantes se convierten en la motivación para que otros productores que no fueron incluidos en el programa quieran aplicar las técnicas y buenas prácticas agropecuarias en sus parcelas, y en ocasiones también motiva al productor no beneficiario de la Actividad. Los productores individuales perciben que las parcelas demostrativas han sido útiles para un aprendizaje efectivo (Diagrama 18). Por otro lado, mediante la estrategia de Formación a Formadores, se deja capacidad instalada en los territorios, y como medida para la renovación y rehabilitación de cultivos se ha dejado capacidad técnica instalada en personas del territorio que ahora cuentan con la preparación técnica necesaria para la realización de podas y otras labores que los califican como mano de obra calificada para el tratamiento de los cultivos ofreciendo incluso sus servicios a cultivadores que no pertenecen al programa. Esto se evidencia en que existe un alto porcentaje de asociaciones que prestan directamente servicio de asistencia técnica (el 72 por ciento de las asociaciones han prestado el servicio de asistencia técnica directamente en los 2 últimos años). P1. H4. CONSOLIDACION DE MERCADOS. La asistencia técnica prestada tiene una fuerte asociación en crear, reactivar, consolidar y fortalecer los mercados con los que contaban las asociaciones de productores, generar alianzas comerciales con otras asociaciones. Se percibieron algunos factores de mejora por parte del aliado comercial: Precios ofertados a los caficultores (precios definidos por la Federación de Cafeteros y el mercado), acortar el distanciamiento entre productor-aliado; y reconocimiento de valor agregado de procesos de transformación. El 49% de las asociaciones tiene acuerdos de compra vigentes y el 95% se encuentran satisfechos con estos contratos, sin embargo, el 38% de las asociaciones cuentan con acuerdos de compra verbales (Tabla 12) esto no permite que se logre formalizar las alianzas establecidas y hacerle un debido seguimiento. El porcentaje de satisfacción por parte de los productores demuestra una dinámica de Diagrama 33: Utilidad de las Parcelas Demostrativas FUENTE: ENCUESTA A PRODUCTORES USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 80 fidelización de los de los productores y asociados a las condiciones, requerimientos, normas y políticas que la organización establece para los procesos de comercialización con un aliado. ACUERDOS DE COMPRA % DE ASOCIACIONES (TOTAL) Acuerdos de compra vigente 49% Acuerdos de compra verbales 38% Satisfechas o muy satisfechas con acuerdos de compra 95% Alto o muy alto poder de negociación 74% Fuente: Encuesta a organizaciones Por otro lado, si se realiza un análisis por región se evidencia que en las regiones de Córdoba, Nariño y Caquetá el cien por ciento de las asociaciones se encuentran satisfechas o muy satisfechas con los acuerdos que tienen establecidos en el momento. La mayoría de las asociaciones de las cuatro regiones consideran que tienen un alto poder de negociación (Tabla 32). REGION ASOCIACIONES Y RELACION CON MERCADO CÓRDOBA NARIÑO CAUCA CAQUETÁ Acuerdos de compra vigente 67% 50% 58% 25% Acuerdos de compra verbales 20% 56% 57% 0% Satisfechas o muy satisfechas con acuerdos de compra 100% 100% 86% 100% Alto o muy alto poder de negociación 60% 78% 86% 50% Fuente: Encuesta a organizaciones P1. H5. PRODUCTOS PROCESADOS Y VALOR AGREGADO. La asistencia técnica prestada ha permitido que las asociaciones procesen sus productos para generar un valor agregado y así poder vender sus productos a un mejor precio. En el caso de la cadena del café se ha fortalecido la figura de microprocesadores donde por medio de estos se ha logrado la maduración del grano, y en el caso del cacao, el 40% de las asociaciones hacen el proceso de transformación del producto (Tabla 33). Para el caso de la región de Nariño, el 75% de las asociaciones de cadena de cacao realizan proceso de transformación a su producto, y el 67% en el caso de Cauca para la misma cadena. En Santa Rosa para la cadena del Café, se brinda asesoría para completar el proceso de transformación de café hasta el producto de consumo final (maquila, compra o renta de maquinaria, subcontratación para transformar el producto). TABLA 42: ASOCIACIONES Y ACUERDOS DE COMPRA TABLA 43: ASOCIACIONES Y ACUERDOS DE COMPRA 81 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV % DE ASOCIACIONES CADENA PRODUCTIVA TIPO DE PRODUCTO PROCESADO 40% CACAO Chocolate de mesa; Licor de Cacao; Confites barras de chocolate y chocolatina; otro 17% CAFÉ Café tostado en grano, Café molido; Licor de Café; Confites; Dulces o similares; otro 50% CAUCHO Caucho técnicamente especificado; Látex crepado; Látex Centrifugado; otro 15% LACTEOS Mantequillas; Queso; Yogurt; Leche en Polvo; Otro Fuente: Encuesta a organizaciones P1. H6. ACCESO Y USO EFECTIVO DE ACTIVOS PRODUCTIVOS. El acceso y uso de activos productivos permite que se brinde y se aplique el modelo de asistencia técnica y se vean mayores resultados, así mismo promueve la asociatividad y el acceso a mercados. Una vez puesto en marcha el uso de cada activo, el impacto de la asistencia técnica se potencializa, como es el caso de los procesos de transformación en productos. En el transcurso de la prestación del servicio de asistencia técnica se ha demostrado que los productores identifican como principal necesidad el acceso de activos para mejorar la productividad de su cultivo, luego han venido accediendo a dichos activos, la mayoría de las asociaciones cuentan con banco de herramientas y/o maquinaria (58%), centros de beneficio (83%) y centros de acopio (54%) (Tabla 34). ACTIVOS PRODICTIVOS % DE ASOCIACIONES (TOTAL) Banco de herramientas y/o maquinaria 58% Centro de beneficio 83% Centro de acopio 54% Fuente: Encuesta a organizaciones Adicionalmente, los productores perciben que la Actividad les ha suministrado en su mayoría insumos, herramientas y Cal (Tabla 35). En algunos casos, se ha logrado mantener una producción constante pese a los cambios climatológicos y regímenes de lluvia mediante, la implementación del sistema de fertirriego riego y de puesta en marcha de reservorio. Se evidencia que el 28% de las asociaciones han administrado sistemas de riego en los últimos dos años, este porcentaje es significativo sin embargo es muy bajo comparado a la cobertura total de todas las asociaciones que se benefician de esta Actividad. ACTIVOS RECIBIDOS % DE PROD CACAO 2019 % DE PROD CAFE 2019 % DE PROD CAUCHO 2019 % DE PROD LACTEOS 2019 TABLA 44. ASOCIACIONES Y PROCESAMIENTO DE PRODUCTOS TABLA 45. ASOCIACIONES Y TIPO DE ACTIVO TABLA 46. PRODUCTORES Y ACTIVOS PRODUCTIVOS USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 82 Insumos 38,0% 29,7% 18,0% 60,2% Herramientas 71,4% 30,7% 5,4% 32,9% Sistema riego 0,7% 1,1% 0,0% 0,0% Cal 76,0% 52,6% 32,3% 65,8% Fuente: Encuesta a productores P1. H7. GESTION AMBIENTAL. Si bien la gestión ambiental no es un propósito directo de la Actividad se evidencia una gestión ambiental positiva. Esto dado que cuando se presta el servicio de asistencia técnica se incluye el tema de Buenas Prácticas Agrícolas y Ganaderas que trae como variables y módulos el tema ambiental. Se han implementado prácticas de cuidado del medio ambiente a través de la selección adecuada de agroquímicos, controles fitosanitarios ecológicos, el cuidado de fuentes hídricas y especies nativas, así como la separación y el manejo de residuos orgánicos e inorgánicos. El manejo orgánico del cultivo de café ha disminuido los costos de sostenimiento, mediante el manejo y procesamiento de los residuos de la finca (granos de café no comercializables y residuos domiciliarios) reciclando y empleándolos para la preparación de los abonos orgánicos como bokachi. Frente al tema de ganadería la percepción de los productores es que mediante el servicio de asistencia técnica se ha logrado implementar prácticas de recuperación del suelo y cambiar de ganadería extensiva a intensiva, como es el caso de los ganaderos del municipio de Puerto Rico: “Pasar de la ganadería pasar de una ganadería extensiva a intensiva, es lo mejor que puede haber pasado en este sistema silvopastoril, que qué es lo que ojalá todo ganadero se puede implementar y es lo que hemos aprendido, división de potreros a potreros pequeños, de rotación diariamente 30, 40 potreros para que usted entre 40 días vuelva al potrero, eso es lo que tenemos qué hacer los ganaderos, ojalá todos los ganaderos del mundo de aquí del Caquetá y Puerto Rico. Sistema intensivo de ganadería, en sistema rotacional de silvopastoril”. P1. H8. CAUSAS Y FACTORES DE EFECTIVIDAD DEL MODELO Durante el análisis se identificaron causas y elementos que estaban presentes en la activad, ausentes y que se deben desarrollar, y otros que requerían para así lograr una mayor efectividad en el modelo (Tabla 36). La mayoría de los factores que se enuncian a continuación tienen hallazgos de muy poca frecuencia son soportados en algunos casos encontrados al aplicar los instrumentos cualitativos en los municipios, sin embargo, se considera importante resaltarlos dado que al fortalecerse pueden lograr una mayor efectividad del modelo de asistencia técnica. Estos elementos identificados al ser replicados o fortalecidos, en otros territorios o con otras asociaciones por lo general deben surtir el mismo efecto, a continuación, se enuncian cada uno de ellos. TIPO DE FACTORES FACTORES FACTORES QUE PERMITIERON LA EFECTIVIDAD DEL MODELO Requisitos de Entrada Mecanismos de Asistencia Técnica TABLA 47. TIPOS DE FACTORES 83 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV FACTORES NO CONTEMPLADOS EN LA ACTIVIDAD Modelo y metodologías de Asistencia técnica Alcance y temporalidad del servicio de asistencia técnica FACTORES QUE DEBEN FORTALECERSE Aliado comercial como actor prestador de asistencia técnica Mayor exigencia de mercado mayor necesidad de asistencia técnica Extensionistas productores Agrupación de asociaciones Fortalecimientos de asociaciones que contaban con acuerdos comerciales existentes Innovación de prácticas de asistencia técnica y cambios de mentalidad Articulación con otras entidades Activos productivos como insumo al modelo Planes participativos de asistencia técnica Precios diferenciales según valor agregado USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 84 PREGUNTA 2: EN CASO EN EL QUE LOS MODELOS TÉCNICOS USADOS POR LA ACTIVIDAD PAC PARA FORTALECER LAS CADENAS DE VALOR APOYADAS POR USAID RESULTEN EFECTIVOS, ¿CUÁLES SON LAS CAUSAS DE ESOS RESULTADOS? Para las preguntas 1 y 2, tomar en consideración que los modelos técnicos usados por la Actividad incluyen (i) acciones de transferencia de tecnología, (ii) mejoramiento de prácticas agrícolas y (iii) el uso de varias tecnologías que abarcan la implementación de “parcelas demostrativas”, cuadrillas, capacitación de capacitadores, “mingas” y asistencia técnica directa. También se debe determinar los factores directos e indirectos que han contribuido a la efectividad de estos modelos. CONCLUSIONES P2. C1. Requisitos de entrada: Los filtros y criterios de entrada permiten que la Actividad realice una selección adecuada, escogiendo participantes con características suficientes para desarrollar un proyecto productivo y aplicar el servicio de asistencia técnica. (P2. H1) P2. C2. Mecanismos de asistencia técnica: Se identificaron mecanismos que desarrolla la Actividad para prestar asistencia técnica a los productores. Se priorizaron temáticas de asistencia técnica que se desarrollan con asociaciones, aliados comerciales, y algunas certificaciones específicas que se otorgan en el marco de la prestación del servicio. Se clasifican los principales activos e infraestructura productiva por cadena, dado que estos son elementos que potencializan el desarrollo de la asistencia técnica y la apropiación de conocimiento. (P2. H2) Factores no contemplados en la actividad que deben desarrollarse: P2. C3. MODELO DE ASISTENCIA TECNICA POR TIPOLOGIAS DE ASOCIACIONES, CADENAS Y REGIONES. • No hay UN modelo de asistencia técnica a productores; hay una batería de mecanismos o herramientas para transferir conocimiento. (P2. H3.) • No hay un manual operativo o documento que explique (i) la secuencia para utilizar los mecanismos o (ii) los criterios para escogerlos. (P2. H4) • No existen metodologías ni material impreso • Limitado número de asistentes técnicos de la Actividad para prestar AT (pocas visitas o muchos productores por extensionista) • Temporalidad varía según cadena productiva (P2. H5.) 85 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Factores que deben ser fortalecidos: P2. C4. Aliado comercial como actor prestador de asistencia técnica: Que el aliado comercial se involucre en el proceso de asistencia técnica permite que los procesos de producción, transformación y venta se logren de una manera más eficiente y óptima. (P2. H6) P2. C5. Mayor exigencia del mercado, mayor necesidad de asistencia técnica: Las asociaciones con acuerdos con aliados comerciales que tienen marca propia, se someten a exigencias de compra más exigentes en cuanto a volumen, calidad y oportunidad de entrega. (P2. H7.) P2. C6. Extensionistas productores: Se escogieron productores que también son asistentes técnicos en otras zonas donde se desarrolla la Actividad, permitiendo así que la apropiación de conocimiento sea más efectiva. (P2. H8.) P2. C7. Agrupación de asociaciones: Al agrupar asociaciones lograban generar un mayor impacto con las visitas técnicas para prestar asistencia técnica, dado que se pueden desarrollar los mismos módulos para mismas condiciones de proyecto o exigencias de mercado, y así mismo logran negociar mejores condiciones de compra y mayores precios. (P2. H9.) P2. C8. Fortalecimiento de asociaciones que contaban con acuerdos comerciales existentes: Cuando las asociaciones ya venían desarrollando sus proyectos con anterioridad y contaban con un aliado comercial, la asistencia técnica se centra en fortalecer la relación existente y mejorar productividad y calidad. (P2. H10.) P2. C9. Activos productivos como insumo del modelo: Un factor de éxito identificado es el uso de activos e infraestructura para prestar asistencia técnica especializada en su uso para optimizar procesos, aumentar precio, lograr procesos de transformación del producto y fortalecer asociaciones. (P2. H11.; P2. H12.) HALLAZGOS. P2. H1. FACTORES QUE PERMITIERON LA EFECTIVIDAD DEL MODELO • REQUISITOS DE ENTRADA. Los requisitos de entrada a la Actividad, permiten que se realice un filtro, y los participantes que van a participar tengan las características mínimas para lograr desarrollar un proyecto productivo y aplicar el servicio de asistencia técnica a la medida a las necesidades de los productores y proyectos: Cultivo previo establecido; Asociaciones constituidas legalmente con antigüedad superior a 6 meses; Asociaciones sólidas, con recursos y preferiblemente numerosas; Número mínimo de hectáreas/árboles/cabezas por cadena; Viabilidad técnica; Disponibilidad de recurso humano; entre otros USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 86 P2. H2. MECANISMOS DE ASISTENCIA TECNICA. Como punto de partida, después de revisar la información recolectada mediante los instrumentos cualitativos, se identificaron mecanismos que desarrolla la Actividad para prestar asistencia técnica a los productores. Así mismo, se priorizaron temáticas de asistencia técnica que se desarrollan con asociaciones, aliados comerciales, y algunas certificaciones específicas que se otorgan en el marco de la prestación del servicio. Se clasifican los principales activos e infraestructura productiva por cadena, dado que estos son elementos que potencializan el desarrollo de la asistencia técnica y la apropiación de conocimiento. Las asociaciones, productores, extensionistas entrevistados y convocados a grupos focales coincidieron que existen mecanismos específicos por los cuáles se presta el servicio de asistencia técnica, estos se describen a continuación (Tabla 37). La capacitación/asistencia técnica directa es donde más se pudieron extraer ejemplos de temáticas por cadena productiva. 87 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV TEMA DESCRIPCIÓN ASISTENCIA TECNICA, ACOMPAÑAMIENTO, Y VISITAS TECNICAS ASPECTOS GENERALES • Se realiza de manera periódica y permite resolver dudas y problemáticas puntuales que presenten los productores participantes de la Actividad. • Se desarrollan capacitaciones teórico-prácticas • Se abordan temáticas como manejo agronómico, uso de sistema de fertirriego para lograr respuestas fisiológicas y nutricional de los cultivos • Los extensionistas realizan asistencia técnica continua a productores interesados y a las asociaciones de productores, generalmente, cada 15 días o una vez por mes. • Se realizan visitas técnicas y suelen realizarse por solicitud directa del productor, cuando este presenta alguna duda o problemática en específico sobre el manejo del cultivo, los animales o los potreros. CADENA DE LACTEOS • El extensionista realiza visitas por lo general cada 15 días a diversas fincas y es relacionada con las Buenas Prácticas Ganaderas -BPG- • Para el caso de lácteos las capacitaciones se realizan en temas como la rotación y división de potreros, manejo de praderas, encalamiento, ensilajes, buenas prácticas de ordeño, inseminación, sistema de riego por aspersión, manejo fitosanitario, elaboración de silos de maíz forrajero y sanidad animal. • También se desarrollan temas relacionados con bancos de proteínas, manejo de mastitis, manejo de potreros y praderas, higiene en el ordeño y mejoramiento de la calidad de la leche • Se hizo un protocolo, un plan de asistencia técnica en donde la idea era mejorar desde el suelo, planta, animal en orden secuencial CADENA DE CAFE • La asistencia técnica está orientada principalmente al manejo de podas, al encalamiento, las curvas de nivel, la evaluación de sistemas de riego por goteo en los cultivos de café, postcosecha, beneficio y microprocesadores, con el fin de hacer más eficiente y menos costoso el proceso de producción TABLA 48. MECANISMOS (MODELOS) PARA PRESTAR ASISTENCIA TECNICA USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 88 CADENA DE CACAO • Se ofrece asistencia técnica centrada en podas, manejo fitosanitario, manejo de malezas, injertos, manejo de residuos, calidad y humedad del grano y se presta a partir de extensionistas CAUCHO • Los temas tratados en la asistencia técnica son en manejo de cultivo por ejemplo la técnica de rayado principalmente, y algunas prácticas ambientales MORA • Los proyectos de Mora son pocos, pero se prioriza el apoyo de la actividad en asistencia técnica sobre productividad y competitividad del cultivo, se focaliza principalmente en manejo del cultivo, prevención de enfermedades, y cuidado del fruto, y mantener prácticas ancestrales indígenas. PLATANO • Los proyectos de plátano que abarca la Actividad hasta el momento están empezando, luego la asistencia técnica se centra en técnicas de establecimiento (con diferentes densidades de siembra) y manejo del cultivo. Así mismo, en la desfragmentación de la tierra y buenas prácticas agrícolas. PARCELAS DEMOSTRATIVAS • El mecanismo que más fue resaltado y priorizado sobre la prestación del servicio de asistencia técnica, son las Parcelas demostrativas, estas se montan con productores interesados, con disponibilidad de tiempo y sentido de responsabilidad. La Actividad realiza visitas a las fincas y da viabilidad técnica para el montaje del proyecto. Con este mecanismo se pretende suplir la deficiencia del alcance de un extensionista por productores, existe un limitado número de extensionistas por número de productores • Los productores lo definen como: • Un escenario de capacitación que funciona de ejemplo para los productores, debido a que son parcelas donde se aplican buenas prácticas agropecuarias enseñadas por el proyecto, y en la cual se evidencian las mejoras de la producción y/o unidad productiva; y sirven de referente para los demás productores/as del proyecto. (Florida) • Es una unidad productiva donde se aplican todas las técnicas, y se desarrollan las diferentes metodologías para un buen desarrollo en el cultivo, donde el productor asume el compromiso de implementación de las buenas prácticas agropecuarias para el buen funcionamiento de la unidad productiva. (Belén de los Andaquies). • Plataforma de intercambio entre productores para el aprendizaje de nuevas prácticas agrícolas y ganaderas que han mejorado su productividad y se desarrollan demostraciones de método (Cartagena del Chairá). 89 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV PARCELAS REPLICA • Un mecanismo complementario a las parcelas demostrativas son las parcelas replica, que son parcelas que han venido estableciendo algunos usuarios a partir de su participación en los días de campo realizados en las parcelas demostrativas. • Por lo general en las parcelas replicas se mantiene el aumento de producción (por lo general encima del 50%) y aumento de sus ingresos en un 30%, como el de las parcelas demostrativas. • Se han establecido “parcelas replica”, que nacen de la buena gestión y compromiso por parte de algunos productores que han replicado el ejemplo de prácticas implementadas en las parcelas demostrativas; estas parcelas replica, no cuentan con los mismos beneficios de las demostrativas, pero se da un impulso a través de la Actividad con recursos ahorrados o sobrantes de otros rubros ESCUELAS DE CAPACITACIÓN • Se definen como una técnica de enseñanza donde trata una temática específica del proceso productivo, se desarrollan de manera teórico-práctica, abordando una temática específica del proceso productivo, técnicas básicas y/o buenas prácticas agropecuarias. A través de esta se busca transmitir habilidades y reevaluar practicas agropecuarias, incentivando además la participación de un amplio número de productores y su núcleo familiar. • Los productores asisten a reuniones en las parcelas en las cuales los técnicos enseñan haciendo, los temas tratados en una primera jornada son variados de acuerdo con las características y necesidades de la parcela, y en una segunda jornada llevan a la práctica los conceptos tratados se establecen tareas y se exaltan las buenas prácticas agrícolas. CLUBES DE CALIDAD En Valdivia se mencionó el mecanismo de clubes de calidad, que consisten en capacitaciones grupales por cercanía geográfica para obtener un cacao de mayor calidad y por lo tanto de mejor precio de ventas. FORMACIÓN DE FORMADORES • Formación de formadores, se da mediante un profesional especializado en producción contratado por la Actividad, realiza capacitaciones con los extensionistas y coordinadores de forma mensual. • Es una estrategia para que los extensionistas y coordinadores se conviertan en formadores de sus comunidades e intercambien conocimientos y experiencias con los productores, y a su vez, como alternativa a la dificultad de ir a campo por parte de los profesionales debido a las condiciones de seguridad GIRAS NACIONALES Son un mecanismo de conocimiento y reconocimiento de experiencias de diferentes técnicas agropecuarias, organizacionales de productores de otras regiones, convirtiéndose en una experiencia motivacional e intercambio de saberes CAPACITACION AMBIENTAL La Actividad como parte del servicio de Asistencia Técnica, brinda una capacitación integral y transversal al desarrollo de proyectos, sobre temas ambientales, en producción limpia, uso de recursos naturales, fertilizantes orgánicos, siembra de árboles como cercas, y separación de residuos. (H28, H29, H30). USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 90 FORTALECIMIENTO ORGANIZACIONAL • Se brinda adicionalmente capacitaciones de fortalecimiento organizacional para generar una capacidad instalada que les permita a las asociaciones crecer y a futuro puedan ejecutar proyectos que les exijan mayor musculo financiero y organizacional. • El enfoque es integral se promueve la economía solidaria, la visión empresarial y la formalización de la empresa familiar, al igual que se brindan herramientas de gestión para la cooperación local y de cohesión social • Así mismo, las asociaciones reciben capacitaciones sobre la estructura asociativa y organizativa, mecanismos de toma de decisiones, contabilidad, revisión y ajuste de estatutos, levantamiento actualizado de datos sobre los asociados, y formulación e implementación de mecanismos de financiación -fondos rotatorios, bancos de herramienta • Se desarrolla la capacidad de negociación de las organizaciones con los aliados comerciales, para que los productores conozcan los estándares de calidad exigidos y la forma de identificar la calidad del producto que van a vender • Se brinda una capacitación contable con el fin de fortalecer la capacidad administrativa y el funcionamiento de la asociación reciben capacitación contable, software contable FORTALECIMIENTO A ALIADOS COMERCIALES Los procesos de capacitación de la Actividad se han centrado en el fortalecimiento de las asociaciones y productores más que al Aliado Comercial, sin embargo, en algunos casos se acompaña a la asociación en la negociación con el aliado para que aliado lograr condiciones justas de compra, sostenimiento de precios, prima por calidad, y seguro de compra de la producción. Así mismo, cuando el Aliado Comercial es pequeño (caso asociación de productores27) se brinda un fortalecimiento a la medida. ACCESO Y USO DE INFRAESTRUCTURA Y ACTIVOS PRODUCTIVOS CADENA MUNICIPIO TIPO CACAO BELEN DE LOS ANDAQUIES Secaderos, beneficiaderos, y bodegas de almacenamiento. TUMACO Herramientas como motosierra aérea para bajar la altura del árbol de cacao, guadaña, serrucho y horno. LACTEOS LA MONTAÑITA Baldes, cantinas, detergente, pruebas de mastitis, y tanque de enfriamiento. 27 QUESECAR. CARTAGENA DEL CHAIRA. LACTEOS y ACAMAFRUT. LA MONTAÑITA. CACAO 91 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV CARTAGENA DEL CHAIRA Cuarto frio para el almacenar del queso FLORIDA Paquete tecnológico se entregó a 127 productores 16 bultos de cal por productor y Centro de Acopio FLORIDA Paquete tecnológico relacionado con selección de semilla, encalamiento, fertirriego, distancias de siembra, preparación de suelos, ensilajes. MIRANDA Paquete tecnológico agronómico, que incluye distancias de siembra de pasturas, selección de semilla, preparación de suelos, fertirriego. El material vegetal (semilla de pasto y maíz) lo han tomado de lo que tienen los productores en la zona CAFE SANTANDER DE QUILICHAO Insumos (fertilizantes, cal, arena de río, melaza, salvado y otros materiales para biopreparados y bokachi) para el abonamiento del suelo. TAMBO Insumos (plástico, malla y alambre) para la construcción de parabólicas o secaderos en forma de invernadero para realizar el secado del café CERTIFICACIONES • Buenas prácticas agrícolas • Bunas prácticas ganaderas • Brucelosis y tuberculosis • Buenas prácticas manufactureras USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 92 FACTORES NO CONTEMPLADOS POR LA ACTIVIDAD Y QUE DEBEN DESARROLLARSE P2. H3. MODELO DE ASISTENCIA TECNICA POR TIPOLOGIAS DE ASOCIACIONES, CADENAS Y REGIONES. Mediante el análisis de la información si bien se presta un servicio de asistencia técnica a la medida por proyecto y asociación, no se evidenció la existencia de un modelo de asistencia técnica como tal diferenciado por región, municipio y asociaciones es por esto por lo que como producto de esta evaluación se hizo una aproximación para definir un modelo como tal a partir de la agrupación de mecanismos que desarrolla la Actividad. Así mismo, no se logró evidenciar que los modelos de asistencia técnica fueran acordes a tipologías de asociaciones, es de suma importancia lograr esa diferenciación por las características propias de cada uno de estos agentes y la maduración de proyectos, que pueden perpetuar o potencializar los modelos. Los criterios de gradualidad de asociaciones, a su vez permiten que la Actividad pueda atender a nuevas asociaciones de productores y lograr así escalar el impacto y no caer en servicios asistencialistas, y hacer uso efectivo de los recursos en cuestión de la prestación de un servicio acotado a una temporalidad (número de asistentes técnicos por número de productores por un tiempo determinado). Según la información cuantitativa se evidencia que la mayoría de las intervenciones de la Actividad son asociaciones con un alto grado de madurez, esta puede ser una de las tipologías a tomar en cuenta para definir el modelo. Así mismo las asociaciones lograron visibilizar estos aspectos. P2. H4. Si bien por medio de esta evaluación se pudo identificar los mecanismos por los cuales el modelo de asistencia técnica se desarrolla e implementa, no se evidenció material o metodologías existentes, sobre los modelos prestados de asistencia técnica, esto permite: • Un mejor entendimiento por parte del productor y asociación. • Mejor seguimiento y monitoreo a cada una de las actividades • Gasto y uso efectivo de recursos • Modelos presupuestales y eficiencia del gasto según desarrollo de actividades y metas. • Gestión del conocimiento para mejora de procesos • Transferencia de conocimiento a otras personas vinculadas a un territorio. • Comparación de modelos aplicados no solo por sistemas productivos, sino por territorios y tipos de asociaciones. • Continuidad de intervención por parte de otros actores que permanecen en el territorio una vez la actividad termine. P2. H5. ALCANCE Y TEMPORALIDAD DEL SERVICIO DE ASISTENCIA TECNICA. La asistencia técnica al ser un servicio sistemático y constante se puede redireccionar ante eventualidades o eventos que nos han sido previstos, pero requiere por lo general un asistente técnico para cubrir entre 20 a 30 93 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV productores al mes para poder así prestar un mejor servicio y realizar el correspondiente seguimiento. En el caso de esta Actividad se evidencia que este es número se supera poniendo en riesgo la calidad del servicio y el acompañamiento sistemático y continuo.: Para el caso de Simiti, existe un solo extensionista por 300 productores de cacao, si visita a uno diario en un año no alcanza a visitar a todos; Para el caso de Valdivia, La mayoría de los proyectos se realizan de a 20 a 30 visitas por productor en un lapso muy corto, eso hace que el técnico se mida es pro números, no de pronto por la calidad de la visita: “Nosotros lo que hemos tratado de hacer, inclusive, pues a veces nos toca correr para tratar de cumplir la meta porque siempre es muy pesada, pero de todos modos, hemos tratado de que la visita se realice de una manera integral, como lo dice Juan”. El modelo de operación de la Actividad es por demanda es por esto por lo que es importante fijar la temporalidad de intervención y los criterios de gradualidad por tipología de municipio y cadena, para poder así tener un mayor alcance y cobertura de asociaciones en el tiempo. En algunos casos como en el caso de cultivos de plátano y de caucho los efectos de asistencia técnica no se lograron percibir al momento de levantar la información de la evaluación, porque son cultivos recientemente instalados, luego se evidencia que el modelo de asistencia técnica requiere de tiempo para poder medir resultados directos, existen algunos proyectos que posiblemente se vean los resultados una vez terminado la operación de la actividad FACTORES CONTEMPLADOS POR LA ACTIVIDAD QUE DEBEN FORTALECERSE P2. H6. ALIADO COMERCIAL COMO ACTOR PRESTADOR DE ASISTENCIA TECNICA. El que el aliado comercial se involucre en el proceso de asistencia técnica permite que los procesos de producción, transformación y venta se logren de una manera más eficiente y óptima. Así mismo, cuando se dieron relaciones sincrónicas entre el fortalecimiento del productor y el fortalecimiento del aliado comercial, los resultados logrados generaban un mayor impacto en términos de productividad y competitividad. Los aliados comerciales juegan un papel clave en el proceso de asistencia técnica, la cual debe responder a los requerimientos del producto definidos por el aliado comercial, en aspectos como el volumen, calidad y oportunidad requerida en el agronegocio. En muchos casos el aliado comercial se vincula con capacitaciones y asesorías en temas de postcosecha y logística. Eventualmente aporta para estos fines bienes o servicios: Frente a esto BANEXPORT prestaban las carpas y ofrecieron un técnico según las recomendaciones de las cosechas del año. P2. H7. MAYOR EXIGENCIA DE MERCADO MAYOR NECESIDAD DE ASISTENCIA TECNICA. Muchas de las asociaciones que tienen acuerdos con aliados comerciales que tienen marca propia o no son maquiladores, se someten a exigencias de compra más exigentes en cuanto a volúmenes, calidades y temporalidades de entrega. Al acordar estas condiciones con los aliados comerciales, demandan una asistencia técnica más especializada, continua, permanente y a la medida: En el Tambo, los productores no les venden a empresas que no tengan marca propia o a maquiladores… Parmalat tiene su marca, Alpina tiene su marca… no le vendemos a maquiladores, entonces no le vendemos Alivar, no le vendemos a Míster Queen, no le vendemos a otras empresas que igual son grandes, pero no tienen marcas propias. P2. H8. EXTENSIONISTAS PRODUCTORES. Se escogieron productores que a su vez son asistentes técnicos de otras zonas donde se desarrolla el programa, permitiendo así que la apropiación de conocimiento sea más efectivo dado que el extensionista hacer parte de la comunidad y del mismo USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 94 territorio y conoce de cerca las prácticas de los sistemas productivos y las necesidades propias de cada uno de estos: En Florida, se creó una Epsagro denominada CIDESOC que firma los convenios agrupando las asociaciones Nasafrut y Aprogua para el convenio de mora, y Tecniganado y Agroferia del municipio de Pradera para el convenio de lácteos. P2. H9. AGRUPACION DE ASOCIACIONES. Al agrupar asociaciones lograban generar un mayor impacto con las visitas técnicas para prestar asistencia técnica, dado que se pueden desarrollar los mismos módulos para mismas condiciones de proyecto o exigencias de mercado, y así mismo logran negociar mejores condiciones de compra y mayores precios: Para el caso de Corinto, se unieron tres asociaciones de productores de café para establecer el convenio con ASPROCAM; En Pradera y Florida, el establecimiento de los convenios para las cadenas productivas de lácteos y mora se establecieron a través de CIDESOC debido a que las organizaciones en Florida y Pradera son muy pequeñas; esta corporación, a su vez, administra y ejecuta los recursos y acompañamiento. P2. H10. FORTALECIMIENTO DE ASOCIACIONES QUE CONTABAN CON ACUERDOS COMERCIALES EXISTENTES. Cuando las asociaciones ya venían desarrollando sus proyectos con anterioridad y contaban con un aliado comercial, la asistencia técnica se centra en fortalecer la relación existente y mejorar productividad y calidad. Así mismo, algunas de las asociaciones ya eran participantes de otros programas o proyectos de gobierno, agencias de cooperación, ONG u otros. Luego el modelo de asistencia técnica prestado por la Actividad se centra en fortalecer la relación existente entre el productor y el aliado, y en mejorar productividad, calidad y aumentar volúmenes: En Pradera, la asociación AGROFERIA, hace 5 años recibió el apoyo del programa Alianzas Productivas del MADR, y a través de este programa se construyó y equipó el Centro de Acopio que funciona desde ese entonces, y se estableció la Alianza Comercial con Alquería. MADUREZ % DE ASOCIACIONES (TOTAL) Asociaciones creadas hace 10 años o más 65% Asociaciones con estatutos 96% Asociaciones con sistema contable sistematizado 69% Asociaciones con plan de negocios 58% Sede propia 45% Fuente: Encuesta a organizaciones ARTICULACION CON OTRAS ENTIDADES. La Actividad promueve e incentiva a los extensionistas y productores a crear redes de apoyo para prestar el servicio de asistencia técnica conjuntamente, permitiendo así contar con una mayor cobertura y conocimiento sobre temas y problemas que se presenten en cada uno de los proyectos. Esto a su vez permite la sostenibilidad y continuidad de la intervención una vez la Actividad termine: Los técnicos extensionistas de Florida, mencionan la articulación con el Programa Integral Frutícola de Valle PIFV, de la Gobernación del Valle del TABLA 49. MADUREZ DE ASOCIACIONES 95 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Cauca, para acompañar a los productores y procurar la sostenibilidad de los procesos de producción y comercialización. P2. H11. ACTIVOS PRODUCTIVOS COMO INSUMO DEL MODELO. Un factor de éxito identificado es el uso de activos e infraestructura para prestar asistencia técnica especializada en su uso para optimizar procesos, aumentar precio de venta, lograr procesos de transformación de producto y el fortalecimiento de las asociaciones: En Tierra Alta se identificó la diferencia del uso de activo productivo al comparar dos proyectos vecinos de plátano. Se usó el renovador de pradera que ha sido de muy buena utilidad, La Actividad entrego esta herramienta para el uso de todo el que quisiera usarlo, para el arado y se aro la tierra porque estaba muy compactada, tenía muchos problemas de compactación allá porque eso no se usa, años tenía eso que no se les pasaba y se notó la diferencia en un cultivo que está, al lado que es mío también pero que no se tuvo el tiempo de pasarle renovador y o sea el tamaño es abismal casi lo duplica y se sembró al mismo tiempo que el otro. P2. H12. PRECIOS DIFERENCIALES SEGÚN VALOR AGREGADO. Se evidenció que cuando el aliado comercial paga un precio o porcentaje adicional por que reconocen el esfuerzo o el valor agregado del producto, se incentiva al productor a seguir aplicando los modelos de asistencia técnica aprendidos como es el caso de las Buenas Prácticas Agrícolas. La mayoría de las asociaciones reconocen que venden sus productos con precios diferenciados (Tabla 39). % DE ASOCIACIONES (TOTAL) VENTAS A PRECIOS DIFERENCIADOS CADENA PRODUCTIVA 93% CACAO 100% CAFÉ 100% CAUCHO 100% LACTEOS Fuente: Encuesta a organizaciones TABLA 50. VENTA A PRECIOS DIFERENCIADOS USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 96 PREGUNTA 3: HALLAZGOS Y CONCLUSIONES. ¿EN QUÉ MEDIDA LA ACTIVIDAD AYUDA A LOS PRODUCTORES A RESPONDER A LAS OPORTUNIDADES DE MERCADO Y A MEJORAR LA COMPETITIVIDAD DE LOS PRODUCTORES RURALES? En primer lugar, para evaluar la Oportunidad, se analizaron 6 variables de proceso que favorecen el acceso de productos agrícolas al mercado local, nacional o internacional: 1. Asociatividad 2. Asistencia técnica (fortalecimiento para consolidar el acceso a los mercados) 3. Infraestructura productiva (centro de acopio, transformación) 4. Infraestructura vial 5. Cumplimiento de estándares de mercado, acuerdos y condiciones de compra 6. Certificaciones de buenas prácticas (BPA, BPM, BPG) En segundo lugar, para evaluar Competitividad, se revisaron 3 variables de proceso que permiten consolidar y lograr permanencia de productos agrícolas en el mercado local, nacional o internacional: 1. Solidez de las asociaciones 2. Productividad y rendimiento 3. Estructura de costos Para responder a estas preguntas se utilizaron las fuentes de información cualitativa y cuantitativa. Con respecto a la información cuantitativa, se procesaron los datos de la Encuesta a Organizaciones 2020 y las Encuestas a Productores de 2018 y 2019. Es importante resaltar que las comparaciones entre estos dos periodos (2018 y 2019) no representan el progreso global de la Actividad, que comenzó antes. CONCLUSIONES. Oportunidad P 3. C 1. Asociatividad: Diferentes cadenas reconocen la asociatividad como medio para obtener asistencia técnica, participar en actividades de cooperación internacional, consolidar volúmenes de productos para acceder a mercado, y en algunos casos como soporte para solicitar créditos agrícolas. Sin embargo, la asociatividad no es requisito que garantice el acceso real a un mercado nuevo. (H2). P 3. C 2. En general los productores ven una oportunidad al pertenecer a una asociación. En 2019, una proporción importante de los productores afirma vender parte de la producción a la asociación a la que pertenece. 97 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Las cadenas de caucho, café y cacao son en las que se presenta una mayor fortaleza de la relación comercial con la asociación (H1). P 3. C 3. Asistencia técnica: La Asistencia Técnica es integral dado que va más allá de la producción y enfatiza en el proceso de postcosecha como enclave a acceso a mercados (H3). P 3. C 4. Asistencia técnica: Se evidencia que existe una apropiación por parte de las asociaciones del servicio de asistencia técnica en lo referente a postcosecha. En las cadenas de Caucho y Mora/Coco/plátano es en donde hay un mayor reconocimiento de este proceso (H4). P 3. C 5. Infraestructura productiva: Existen diferencias por cadena productiva en el acceso a los activos productivos. En el caso de beneficio, la Encuesta de Organizaciones muestra poco acceso a centros de beneficio mientras que el acceso a centros de acopio es más alto. Aunque la Actividad ha hecho un esfuerzo por garantizar el acceso a este tipo de activos, en las entrevistas los productores manifiestan que este acceso es una de las debilidades técnicas que se presenta (H5). P 3. C 6. Infraestructura productiva: Los procesos de transformación que realizan las asociaciones están relacionados con el uso de activos productivos, como es el caso de café para tostarlo y molerlo; y en el caso de la cadena de caucho se reporta que el 100% de las asociaciones realizan el proceso de transformación, dependiendo de la región (H6). P 3. C 7. Infraestructura vial: Los productores perciben beneficios en sus cadenas productivas, asociados al mejoramiento de las vías. La disminución en los tiempos de transporte es la dimensión que un mayor porcentaje de productores reporta. Asimismo, se reportan menores costos de transporte y valorización del predio. La mejora de la infraestructura vial en las regiones intervenidas trae consigo la posibilidad de acceder a nuevos clientes y/o a mejorar el servicio a los actuales. Así mismo, la reducción en los tiempos de tránsito, por ejemplo, en el sector lácteo, permite ofrecer productos más frescos y un alto nivel de calidad, generando también la posibilidad de llegar a mercados de mayor valor (H7). P 5. C 8. Estándares de mercado y acuerdos: Los estándares de mercado y los acuerdos establecidos son la principal variable para medir la oportunidad del acceso a mercados. Las organizaciones reconocen que estas dos variables son indicadores previos para definir el acceso a mercados. La mayoría de las asociaciones manifiestan estar satisfechas con los acuerdos de compra a proveedores y comercialización. (H8, H9, H10, H11, H12, H13, H14). Competitividad P 3. C 9. Solidez de las asociaciones: Las asociaciones apoyadas por la Actividad presentan 5 puntos porcentuales por encima del nivel ICO (Índice de Capacidad Organizacional) frente a las no apoyadas USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 98 (indicador de percepción). Cabe destacar que los componentes que apalancan ese avance porcentual son (H16): • Capacidad gerencial, administrativa y de gestión • Servicios ofrecidos a los asociados • Habilidades y capacidades en el desarrollo humano P 3. C 10. Solidez de las asociaciones: Algunos participantes resaltan que el programa ha dejado una capacidad instalada, especialmente en cuanto a asistencia técnica y comercialización, consideran que dicha intervención contribuye a la sostenibilidad de las asociaciones una vez salga el programa de operación (H17). P 3. C 11. Solidez de las asociaciones: Una variable importante para medir la solidez de las organizaciones es lograr que estas reporten ventas. El cambio más significativo en este sentido se dio en las cadenas de café y cacao, en contraste con la cadena de lácteos. Todas las organizaciones que lograron vender productos en el 2019 reportan incrementos mayores al 50% en ventas con relación al 2018 (H17). P 3. C 12. Productividad: En términos de percepción, un número importante de productores señala cambios positivos en producción, ventas y precios (H18, H19). Por otro lado, cuando se analizan los instrumentos cualitativos, los actores que más reportan mejoras, son los funcionarios de gobiernos locales y los actores del equipo técnico, en contraste con las entrevistas a los actores de parcelas demostrativas (H19). P 3. C 13. Estructura de costos: Para el caso del café, se observa que el fertilizante es el principal componente dentro de la estructura de costos de insumos y servicios, a diferencia del cacao en donde el transporte y otros costos tienen la participación más importante. (H21). P 3. C 14. Conclusión general: Es general se pudo evidenciar que las actividades implementadas por la PMA ayudan a los productores en la mejora de oportunidades de mercado y en el aumento de su competitividad. Sin embargo, al realizar el análisis por cadena se presentan desafíos en el apoyo de algunas variables que garantizan los procesos de sostenibilidad de las oportunidades de mercado y competitividad. HALLAZGOS. HALLAZGOS DE OPORTUNIDAD ASOCIATIVIDAD H.1 Una proporción importante de los productores afirma vender parte de la producción a la asociación a la que pertenece. Las cadenas de caucho, café y cacao son en las que se presenta una mayor fortaleza de la relación comercial con la asociación, en contraste con los productores de mora y lácteos. 99 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV “Nosotros en sí todavía asociación no, hasta ahora estamos empezando con CORPOAMOR y ellos también nos dicen que tienen las contratas para venderlo, pero hasta ahora se sembró.” (Parcela demostrativa plátano, Puerto Rico) “También otras instituciones como el SENA llegaron a capacitaciones de tipo ganadero en la región, para los productores. También llegaron entidades financieras como el Banco Agrario, Bancolombia a ofrecer créditos a los productores que estaban actualmente vinculados al proyecto.” (Lácteos, Cartagena del Chairá) “La asociación ya tiene el suficiente empoderamiento para continuar […]. Entonces no podemos decir que sí acaba el convenio, acaba los procesos […] el compromiso de la asociación es mantener los procesos vigentes, independientemente que haya o no haya proyecto.” (ASPROBELEN Cacao, Belén de los Andaquíes) H.2 Los productores perciben que la participación en la actividad ha tenido influencia importante en temas relacionados con la producción, cambios en ventas y nuevas tecnologías, entre otras. Sin embargo, el fortalecimiento de la asociación, así como el acceso a nuevos compradores son las dimensiones en las que perciben menor cambio. CAMBIOS PERCIBIDOS % DE PRODUCTORES CACAO 2019 % DE PRODUCTORES CAFE 2019 % DE PRODUCTORES CAUCHO 2019 % DE PRODUCTORES LACTEOS 2019 Cambios en producción 52,2% 19,7% 31,9% 47,7% Cambios en ventas 10,3% 7,8% 10,0% 15,0% Cambios en manejo finca 75,3% 80,5% 74,7% 78,2% Mejor asistencia técnica 44,7% 56,0% 42,7% 33,3% TABLA 51 Diagrama 34: Productores que Venden a la Asociación FUENTE: ENCUESTA A PRODUCTORES USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 100 Nuevas tecnologías 49,0% 66,4% 48,2% 56,0% A cerrar negocios 0,9% 0,9% 0,9% 1,1% Mejor precio venta 2,6% 10,4% 2,5% 6,4% A nuevos compradores 0,0% 3,2% 2,6% 0,3% Fortalecer organización 4,3% 25,8% 7,8% 2,0% Fuente: Encuesta a productores “También otras instituciones como el SENA llegaron a capacitaciones de tipo ganadero en la región, para los productores. También llegaron entidades financieras como el Banco Agrario, Bancolombia a ofrecer créditos a los productores que estaban actualmente vinculados al proyecto.” (Lácteos, Cartagena del Chairá) “La asociación ya tiene el suficiente empoderamiento para continuar […]. Entonces no podemos decir que sí acaba el convenio, acaba los procesos […] el compromiso de la asociación es mantener los procesos vigentes, independientemente que haya o no haya proyecto.” (ASPROBELEN Cacao, Belén de los Andaquíes) ASISTENCIA TÉCNICA H.3 Entre los principales temas que la actividad desarrolló, las organizaciones destacan haber recibido asistencia técnica en el tema de postcosecha. TEMA DE ASISTENCIA TECNICA % DE ASOCIACIONES Manejo del cultivo 84% Buenas prácticas 93% Manejo del suelo 95% Postcosecha 77% Manejo de plagas y enfermedades 91% Fuente: Encuesta a Organizaciones “Los cultivadores de cacao de Simití destacan la participación en ruedas de negocios, donde han buscado oportunidades, una concreta con un cliente en México, que compró 50 toneladas de cacao, este cliente se consiguió gracias al programa de PAC. Ellos se desplazaron a Bogotá a Corferias en 2019, para participar en la rueda, se reunieron con 12 clientes potenciales, posteriormente uno de ellos de México los contactó y les manifestó que quería comprarles. (Entrevista Asociación Cacao, Simití) “Los agricultores de Santa Rosa del Sur consideran que han recibido bastante apoyo del PAC desde el inicio, facilitando la participación en ruedas de negocios en Bogotá, con la asistencia de representantes de las TABLA 52 101 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Asociaciones, 3 miembros, con recursos del programa PAC. También viajaron a Segovia a una empresa que se llama Chocolate Colombia, que maquila chocolate para exportación.” (Grupo focal, Santa Rosa del Sur) H.4 Las cadenas de Cacao, Café, Caucho, Mora/Coco/Plátano reportan haber recibido asistencia técnica en postcosecha. El 100% de las organizaciones de Caucho y Mora, coco y plátano afirman haber recibido fortalecimiento en este tema. Los agricultores de Santa Rosa del Sur consideran que han recibido bastante apoyo del PAC desde el inicio, facilitando la participación en ruedas de negocios en Bogotá, con la asistencia de representantes de las Asociaciones, 3 miembros, con recursos del programa PAC. También viajaron a Segovia a una empresa que se llama Chocolate Colombia, que maquila chocolate para exportación. (Grupo focal, Santa Rosa del Sur) INFRAESTRUCTURA PRODUCTIVA H.5 Las organizaciones reportan gran heterogeneidad y bajo acceso a activos productivos. En general, las organizaciones reportan mayor acceso a banco de herramientas y centros de acopio, que a centros de beneficio. “pero nos hacía falta infraestructura, podíamos también hacerle su infraestructura para mejorar calidad, todo en beneficio del agricultor que mejore calidad y si mejora calidad, mejora ingresos, mejora producción, mejora todo. Entonces son proyectos que se complementan unos con otros, de pronto ese proyecto no traía poda, pero el tema de alianzas comerciales daba la poda, o que el proyecto no traía análisis de suelo, pero aquí había. Entonces son proyectos que se complementan con un beneficio realmente.” (Cacao, Simití-Bolívar) “La implementación de 6 sistemas de riego, de 6 parcelas en café. Pero allí como se dice, como todo no es color de rosa, porque uno cuenta lo bueno y lo malo, no es lo malo, son unos inconvenientes que se hay, pero esos inconvenientes, más que todo son por los tiempos, porque fue un proyecto muy chévere, pero fue muy rápido, porque era ‘tome esta plata y usted la tiene que gastar en 3 meses” (Café, Pradera-Valle del Cauca) “También se hizo al aliado comercial que fue que Quesecar, uno de los comercializadores de queso, el que más compra acá en Cartagena. Se le dio un cuarto frío que, inclusive mañana, se va a hacer la entrega oficial del cuarto frío, ahí al lado de donde está lo de ChoCaguán, también ahí al lado, esa parte también se va a trabajar eso.” (Lácteo, Cartagena del Chairá) Diagrama 35: Asistencia Técnica FUENTE: ENCUESTA A ORGANIZACIONES USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 102 “La implementación de 6 sistemas de riego, de 6 parcelas en café. Pero allí como se dice, como todo no es color de rosa, porque uno cuenta lo bueno y lo malo, no es lo malo, son unos inconvenientes que se hay, pero esos inconvenientes, más que todo son por los tiempos, porque fue un proyecto muy chévere, pero fue muy rápido, porque era ‘tome esta plata y usted la tiene que gastar en 3 meses” (Café, Pradera-Valle del Cauca) “También se hizo al aliado comercial que fue que Quesecar, uno de los comercializadores de queso, el que más compra acá en Cartagena. Se le dio un cuarto frío que, inclusive mañana, se va a hacer la entrega oficial del cuarto frío, ahí al lado de donde está lo de ChoCaguán, también ahí al lado, esa parte también se va a trabajar eso.” (Lácteo, Cartagena del Chairá) H.6 A lo largo de las diferentes cadenas, algunas asociaciones reportan realizar transformación del producto. Las asociaciones pertenecientes a las cadenas de caucho, cacao y café son las que reportan en mayor medida este tipo de prácticas. Por ejemplo, en la cadena de cacao, el 47,1% de las organizaciones afirman realizar este tipo de prácticas, en particular, el 87.5% de estas, señalan realizar transformación del cacao hasta convertirlo en chocolate de mesa. Diagrama 36: La Organización tuvo acceso a… FUENTE: ENCUESTA A ORGANIZACIONES Diagrama 37: Cacao FUENTE: ENCUESTA A ORGANIZACIONES Diagrama 38: Caucho FUENTE: ENCUESTA A ORGANIZACIONES 103 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Infraestructura vial H.7 Un alto porcentaje de productores asocia las mejoras de infraestructura vial realizadas por el programa con beneficios en diferentes dimensiones. En particular, la disminución en los tiempos de viaje se percibe como un beneficio del mejoramiento de las vías entre un alto porcentaje de productores. En 2019, la valorización del predio, la disminución en los tiempos de viaje, el mayor acceso a la finca y la disminución de los costos de transporte, fueron las dimensiones que un mayor porcentaje de productores reportó. CON LAS VÍAS DE ACCESO MEJORADAS O POR MEJORAR POR EL PROGRAMA, ¿QUÉ BENEFICIOS ADICIONALES HA TENIDO O TENDRÁ? 2019 1. Disminución de los tiempos de viaje 38,1 2. Disminución de los costos de transporte 33,6 3. Mayor oferta de medios de transporte 32,0 4. Los productos llegan frescos y menos estropeados a los mercados locales (mantener la calidad de los productos del campo al mercado) 29,5 5. Valorización del predio 45,9 6. Mejora/facilita el acceso a la finca 34,0 7. Motiva a hacer mayor inversión en su finca 29,0 8. Motiva a la comunidad a continuar con los mantenimientos viales 27,6 9. Motiva a los gobiernos locales a ampliar la red de mejoramiento vial 27,4 Fuente: Encuesta a productores TABLA 53 Diagrama 39: Café FUENTE: ENCUESTA A ORGANIZACIONES Diagrama 40: Lácteos FUENTE: ENCUESTA A ORGANIZACIONES USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 104 “Las obras realizadas en la región de Santa Rosa del Sur fueron en primera instancia, la construcción de una placa huella de 15 metros de longitud entre San Cristóbal y el centro de acopio de cacao, ubicado en el área urbana (21 km). El segundo tramo de placa huella tiene una longitud de 135 km y se construyó entre Peñas Blancas y el casco urbano (25 km). En el primer tramo no se registran disminuciones en los tiempos de transporte, mientas que en segundo hay una reducción de 120 minutos a 90, un 25%.” (Cacao, Santa Rosa del Sur-Bolívar) “En esta región se realizaron 2 obras. La primera de ellas, una estabilización de 3 km en la vereda La Esperanza y la segunda 3 alcantarillas en la vereda El Mirovalle. Desde la región de La Esperanza hasta el centro de acopio (25 km) en el área urbana, se redujo el tiempo de tránsito de 60 a 40 minutos, un 33%, mientras que en la otra ruta (22 km), que pasa por La Orquídea, no se produjeron cambios sustanciales.” (Lácteos, Puerto Rico-Caquetá) ESTÁNDARES DE MERCADO Y ACUERDOS H.8 Un número importante de asociaciones indica tener acuerdos de compra con proveedores vigentes. Las cadenas de Lácteos, Cacao y Mora/coco/plátano reportan estos acuerdos en mayor medida para 2019 y 2018. H.9 Un número importante de las organizaciones indica tener acuerdos de comercialización vigentes. Vale la pena señalar que para 2018, 15 asociaciones intervenidas reportaron ventas (8 Cacao, 4 café y 3 en lácteos). De estás 15, 11 reportaron contar con acuerdos comerciales (8 Cacao-100%, 2 Café-50% y 1 en lácteos-33%). Diagrama 41: Asociaciones con Acuerdos de Compra FUENTE: ENCUESTA A ORGANIZACIONES 105 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV H.10 En lo que respecta al total de acuerdos de comercialización reportados por las asociaciones, se observa que la proporción de estos que son de carácter formal es similar entre 2018 y 2019. Un número significativo de los acuerdos de comercialización son de carácter verbal. Diagrama 42: % de Asociaciones con Acuerdos Comerciales en 2018 y 2019 FUENTE: ENCUESTA A ORGANIZACIONES Diagrama 43: Asociaciones con Acuerdos de Comercialización Verbales FUENTE: ENCUESTA A ORGANIZACIONES USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 106 H.11 En las cadenas de café y caucho el total de las organizaciones afirma realizar verificación a los productores de que cumplan los estándares de calidad. Así mismo, cacao y lácteos presentan niveles de verificación por encima del 90%, mientras la cadena de mora se ubica alrededor de 60%. “Nosotros nos habíamos dedicado a ejecutar recursos y a sacar café tradicional, o estándar, El programa apoyó en hacerle lotes al café después de la recolección, solamente recolectar granos maduros, no dejar tanto tiempo el café después de retirado de la planta, todas esas cosas se trabajaron con la gente y se hicieron las primeras personas lograron sacar 84 puntos, hasta 86 puntos en tasa entonces eso es algo muy bueno porque de 84 para arriba ya es café especial, pero por otro lado también mejoró significativamente la calidad del café en el tema de café regional Bolívar, el que logramos comercializar con CAFI COSTA.” (Asociación productores café, Santa Rosa del Sur) “Para la trazabilidad a los productores, se han entregado formatos, pero ha sido un poco complicado -porque no son muy juiciosos, pero entonces el tema de llenar formularios, como que no les gusta mucho-. Entonces yo estoy pendiente, incluso, se compra el cacao en baba y se va finca a finca, se les da las bolsas, se verifica que estén haciendo los procesos bien, separación de granos sanos dañados, todo. Se pasa, se recoge, se registra toda la Diagrama 44: Proporción (%) de Acuerdos Comerciales Formales (Firmados FUENTE: ENCUESTA A ORGANIZACIONES Diagrama 45: Proporción de las Asociaciones que Verifican que los Productores Cumplan con los Estándares de Calidad FUENTE: ENCUESTA A ORGANIZACIONES 107 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV información productor a productor, cuántos kilos sanos, cuántos dañados, cuántos, se lleva a central de beneficio y se lleva toda como su historia clínica de cada proceso.” (Extensionista cacao, Simití) Ahora lo mencionábamos con los clubes de calidad, también tratábamos ese tema de buenas prácticas agrícolas y eso conllevaba a que Asocaval está vendiendo toda la producción del 2018 la vendió como cacao Premium, nada de cacao corriente. (ASOCAVAL cacao, Valdivia) H.12 En general, las organizaciones que poseen acuerdos de comercialización vigentes señalan estar satisfechas o muy satisfechas con estos acuerdos. H.13 Las asociaciones que cuentan con acuerdos y contratos señalan tener un alto o muy alto poder de negociación en el marco de estos acuerdos. En particular, la totalidad de las organizaciones con acuerdos en las cadenas de caucho, lácteos y mora/coco/plátano referencian este nivel de poder de negociación. Diagrama 46 Asociaciones Satisfechas o Muy Satisfechas con Acuerdos de Comercialización FUENTE: ENCUESTA A ORGANIZACIONES Diagrama 47: Asociaciones Satisfechas o Muy Satisfechas con Acuerdos de Comercialización FUENTE: ENCUESTA A ORGANIZACIONES USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 108 H.14 El total de las organizaciones con reporte de ventas en las cadenas de cacao, café, caucho y lácteos señalan haber vendido producto a precios diferenciados. TABLA 54 CADENA ASOCIACIONES VENDEN A PRECIO DIFERENCIADO Cacao 100% Café 100% Diagrama 48: Asociaciones con Alto o Muy Alto Poder de Negociación de Acuerdos, Contratos o Convenios FUENTE: ENCUESTA A ORGANIZACIONES Diagrama 49: Asociaciones con Alto o Muy Alto Poder de Negociación de Acuerdos, Contratos o Convenios FUENTE: ENCUESTA A ORGANIZACIONES 109 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Fuente: Encuesta a Organizaciones Fuente: Encuesta a Organizaciones HALLAZGOS DE COMPETITIVIDAD SOLIDEZ DE LAS ASOCIACIONES H.16 Con base en el ICO y sus componentes28, se observa que las organizaciones que han sido intervenidas por el programa presentan mayores niveles en los componentes de capacidad gerencial, administrativa y de gestión, servicios ofrecidos a los asociados y habilidades y capacidades en el desarrollo humano que las asociaciones no intervenidas. Así mismo, se observan mayores niveles en el índice agregado (ICO). En lo que respecta a la comparación entre las diferentes cadenas intervenidas, se observa que las organizaciones pertenecientes a las cadenas de caucho, cacao y café son las con mayores niveles de capacidad organizacional. 28 MDP: Manejo democrático y participativo, SEF: Situación económica y financiera, CGAG: Capacidad gerencial, administrativa y de gestión, SOA: Servicios ofrecidos a los asociados y HCDH: habilidades y capacidades en el desarrollo humano. Caucho 100% Lácteos 100% Mora, coco, plátano 0% Mixtas 0% TABLA 55 REGIÓN ASOCIACIONES VENDEN A PRECIO DIFERENCIADO Córdoba 100% Nariño 100% Cauca 88% Caquetá 100% Valdivia 0% USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 110 “El apoyo es muy bueno, hemos tenido muy acogida por parte de las asociaciones de productores, está dejando establecida una buena capacidad instalada en cada una de las organizaciones, para que luego ellos solos, cuando el programa termine, sigan marchando y sigan trabajando con el tema cacaotero.” (Aliado comercial cacao, Medellín) “La parte positiva del programa Alianzas Comerciales, es que quede una capacidad instalada en las cadenas productivas, que haya quedado un recurso para el tema de comercialización de los productos. Específicamente con la ASOHECA lo que buscábamos era que se quedará un recurso para el proceso de compra puntual hacia el productor y comercialización.” (ASOHECA caucho, Puerto Rico) H.17 A través de las diferentes cadenas, el grueso de las organizaciones reporta incrementos en ventas superiores al 50%. La totalidad de las organizaciones correspondientes a la cadena de mora/coco/plátano y mixtas señalan incrementos superiores al 50%. “La parte positiva del programa Alianzas Comerciales, es que quede una capacidad instalada en las cadenas productivas, que haya quedado un recurso para el tema de comercialización de los productos. Específicamente con la ASOHECA lo que buscábamos era que se quedará un recurso para el proceso de compra puntual hacia el productor y comercialización. (“ASOHECA caucho, Puerto Rico) Diagrama 50: Media ICO y Components por Condición de Intervención FUENTE: ENCUESTA A ORGANIZACIONES Diagrama 51: Valor de ICO por Cadena (Solo Organizaciones Intervenidas) FUENTE: ENCUESTA A ORGANIZACIONES 111 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV “El apoyo es muy bueno, hemos tenido muy acogida por parte de las asociaciones de productores, está dejando establecida una buena capacidad instalada en cada una de las organizaciones, para que luego ellos solos, cuando el programa termine, sigan marchando y sigan trabajando con el tema cacaotero.” (Aliado comercial cacao, Medellín) PRODUCTIVIDAD Y RENDIMIENTO H.18 La información de productores revela altos niveles de producción y rendimiento en 2019. Por ejemplo, para el caso del cacao y la leche en verano, se observan altos niveles de productividad por hectárea (por vaca). Diagrama 52: Incremento en Ventas de 50% o Más Entre 2018 y 2019 FUENTE: ENCUESTA A ORGANIZACIONES Diagrama 53: Cacao FUENTE: ENCUESTA A PRODUCTORES Diagrama 54: Leche en Verano FUENTE: ENCUESTA A PRODUCTORES Diagrama 55: Leche en Invierno FUENTE: ENCUESTA A PRODUCTORES USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 112 “Un 185% de aumento en la capacidad de carga por hectárea, quiero decir que hemos pasado de 0,7 vacas por hectárea, unidad gran ganado por hectárea, a dos. sí, un 35% en mejora en la producción de leche, hemos pasado de 3,7 litros vaca/día, a 5 litros vaca/día. Sí, con las mismas vacas.” (Florencia, Equipo Técnico) “afortunadamente en Tumaco es muy pequeño y digamos ese tiempo de 6 meses, pues el árbol está digamos que muy bajo de cosecha, pero luego viene la cosecha y automáticamente se ve significativamente el aumento de la producción y hoy día cuando uno mira las ventas de Chocolate Tumaco, pues uno dice, definitivamente la productividad ha venido aumentando.” (Cacao, Tumaco-Entrevista a extensionista) P3. H.19 En lo que a percepción de los productores se refiere, un número importante percibe cambios en la producción como producto de la participación en la actividad. Por ejemplo, el 52.2% de los productores de cacao perciben cambios en producción, así como el 31.9% de los productores de caucho. En contraste, los productores perciben en menor medida cambios en ventas y mejoras de precios, con un promedio de 10% y 6% respectivamente a lo largo de todos los productores. TABLA 56 CAMBIOS PERCIBIDOS % DE PRODUCTORES CACAO 2019 % DE PRODUCTORES CAFE 2019 % DE PRODUCTORES CAUCHO 2019 % DE PRODUCTORES LACTEOS 2019 Cambios en producción 52,2% 19,7% 31,9% 47,7% Cambios en ventas 10,3% 7,8% 10,0% 15,0% Mejor precio venta 2,6% 10,4% 2,5% 6,4% Diagrama 56: Mora Producción FUENTE: ENCUESTA A PRODUCTORES 113 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Afortunadamente en Tumaco es muy pequeño y digamos ese tiempo de 6 meses, pues el árbol está digamos que muy bajo de cosecha, pero luego viene la cosecha y automáticamente se ve significativamente el aumento de la producción y hoy día cuando uno mira las ventas de Chocolate Tumaco, pues uno dice, definitivamente la productividad ha venido aumentando. (Cacao, Tumaco￾Entrevista a extensionista) Un 185% de aumento en la capacidad de carga por hectárea, quiero decir que hemos pasado de 0,7 vacas por hectárea, unidad gran ganado por hectárea, a dos. sí, un 35% en mejora en la producción de leche, hemos pasado de 3,7 litros vaca/día, a 5 litros vaca/día. Sí, con las mismas vacas. (Lácteos, Florencia-Caquetá- Entrevista a equipo técnico) “ENTREVISTADORA (0:17:54): ¿Ha mejorado la productividad de sus vacas con esa asistencia técnica? ENTREVISTADA (0:18:01): Pues no, es lo mismo, la misma cosa. ENTREVISTADORA (0:18:04): Los costos de producción han disminuido con las enseñanzas que le trae Andrés, ¿en qué se ha mejorado entonces? ENTREVISTADA (0:18:22): ¿En qué será? Yo creo que es lo mismo.” (Lácteos, Florida-Valle del Cauca￾Entrevista en parcela demostrativa) “Que se espera que la productividad aumente más cuando las plantaciones nuevas empiecen a dar cosechas, entonces vamos a empezar a generar dinámicas de producción más altas que las que se estaban presentando en el departamento” (Otros, Puerto Rico-Caquetá - Entrevista a extensionista) ESTRUCTURA DE COSTOS P3.H.21 Para el caso del café, se observa que el fertilizante es el principal componente dentro de la estructura de costos de insumos y servicios, a diferencia del cacao en donde el transporte y otros costos tienen la participación más importante. Diagrama 57: Cambios Percibidos FUENTE: ENCUESTA A PRODUCTORES USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 114 Diagrama 58: Cacao – Composición (%) Costos de Insumos y Servicios FUENTE: ENCUESTA A PRODUCTORES Diagrama 59: Café – Composición (%) de Costos de Insumos y Servicios FUENTE: ENCUESTA A PRODUCTORES 115 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV PREGUNTA 4: ¿EN QUÉ MEDIDA SE PUEDE COMPARAR EL DESEMPEÑO DE LA ACTIVIDAD PAC (REFLEJADO EN VENTAS, PRODUCTIVIDAD Y EXPORTACIONES DE LOS PRODUCTORES APOYADOS) CON EL CONTEXTO LOCAL, REGIONAL Y NACIONAL? CONCLUSIONES. P4. C1. Cultivos Ilícitos. A pesar del incremento generalizado de cultivos de coca que se ha presentado en el país, los municipios intervenidos por PMA presentan una mejora en relación con el resto de los municipios del país. Los beneficiarios del programa identifican la intervención de PMA como una alternativa viable a los cultivos ilícitos. (P4. H1. P4. H2.) P4. C2. A pesar del incremento generalizado de cultivos de coca que se ha presentado en el país, los municipios intervenidos por PMA presentan una mejora en relación con el resto de los municipios del país. (P4. H3. P4. H4.) P4. C3. Los productores beneficiados por PMA ven el programa como una alternativa viable a los cultivos ilícitos. El programa parece estar desplazando la economía ilegal. (P4. H5. P4. H6. P4. H7. P4. H8.) P4. C4. Seguridad. Uno de los efectos que trae consigo la reducción de los cultivos ilícitos es la seguridad en las zonas donde habitan los beneficiarios de PMA. De este modo, la intervención no solo afecta el contexto productivo de la población, sino también el contexto social puesto que esto se sienten más seguros al desempeñar una nueva actividad que los distancia de los actores armados. La reducción en los cultivos ilícitos trae como consecuencia una sensación de seguridad para la población. (P4. H9. P4. H10) P4. C5. Conectividad. La mejora en la conectividad (casi la totalidad de los beneficiaros tienen acceso a una vía a menos de 1 kilómetro cuadrado de su lugar de residencia) influye no solo en logística de comercialización, sino también en materia de seguridad. (P4. H11. P4. H12. P4. H13.) P4. C6. Comparación otras regiones. Los beneficiarios de PMA presentan rendimientos menores a los del resto del país y a los de los municipios PDET. Aunque han mejorado ostensiblemente entre 2018 y 2019. (P4. H14) P4. C7. Efectos adicionales. Un resultado que se encuentra sistemáticamente en las entrevistas con los beneficiarios es el reconocimiento de estos con las actividades realizadas por USAID. Los participantes del programa no solo reconocen la presencia prolongada de la misión en el territorio, sino que también son capaces de diferenciar el apoyo particular de esta a PMA. (P4, H15. P4. H16. P4. H17. P4. H18.) HALLAZGOS. P4. H1. Los beneficiarios del programa identifican la intervención de PMA como una alternativa viable a los cultivos ilícitos. Cuando se analiza la incidencia que puede tener el contexto en el funcionamiento del USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 116 Programa Alianzas Comerciales y los efectos que puede tener este en sus beneficiarios, el primer elemento que sale a relucir son los cultivos ilícitos. Lo anterior, dado que el programa opera en regiones qué han sido históricamente afectadas por esta problemática, y programas como PMA resultan una alternativa legal para las personas. Esta situación es reconocida por los productores quienes manifiestan: P4. H2. “Yo quiero aportar algo, nuestra asociación es una asociación que nació después de los cultivos ilícitos, fue como la alternativa que vimos los campesinos para salir adelante, entonces el de asociarnos.” “entonces es algo chévere que uno ve en la gente que venía cultivando coca, que ahora quiere, uno le habla del cacao, (sí, y mi hijo está estudiando técnico en cacao), entonces uno ve como ese entusiasmo de la gente y que quieren trabajar en lo lícito”. P4. H3. Lo anterior se corresponde con las cifras de hectáreas cultivadas de coca a nivel municipal en el país. En la diagrama se observa qué en 2015 (previo a la intervención de PMA) la densidad promedio de hectáreas cultivadas de coca en los municipios que terminaron siendo intervenidos por el programa era superior al promedio qué presentaban los demás municipios que tenían cultivos de coca en el país en ese año. De otro lado, la situación en 2018 parece haber cambiado, dado que para este año los promedios de hectáreas cultivadas de coca tanto en los municipios intervenidos por PMA como en aquellos municipios en los cuáles la actividad no tuve intervención es similar. Lo que se observa es un aumento generalizado de las hectáreas cultivadas de coca en el país, pero una mejora de los municipios intervenidos por PMA en relación con los municipios no intervenidos. P4. H4. Además de las densidades, al realizar una prueba de diferencias de medias de las hectáreas de coca cultivadas entre municipios PMA y no PMA se observa que en 2015 los municipios PMA tenían en promedio más hectáreas de coca cultivadas que los municipios no PMA, y que la diferencia entre ambos era estadísticamente significativa. De otro lado, en 2018 si bien los municipios PMA siguen con un promedio de hectáreas cultivadas mayor que el resto de los municipios del país, para este año, la diferencia deja de ser significativa, lo cual confirma la mejora relativa de los primeros en relación con el total del país. 0 .05 .1 .15 .2 Density 0 2 4 6 8 10 Logaritmo natural hectáreas de coca Municipios PMA 2015 Municipios No PMA 2015 Diagrama 60: Hectáreas cultivadas de coca municipios PMA Vs. Resto 2015 y 2018 FUENTE: CÁLCULOS PROPIOS CON BASE EN SIMCI 117 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV AÑO LOGARITMO HECTÁREAS CULTIVADAS DE COCA MUNICIPIOS PMA MUNICIPIOS NO PMA DIFERENCIA 2015 5.417 4.133 -1.284** 2018 5.690 4.834 -0.856 P4. H5. Sin embargo, lo realmente importante es qué este tipo de cambios sean sostenibles en el tiempo y qué a la primera dificultad los productores no regresen al cultivo ilegal. En este sentido, los beneficiarios de PMA parecen haber adoptado el cambio de actividad de manera permanente y como nueva opción de vida. Al respecto la evidencia cualitativa muestra qué el cambio la actividad productiva se viene dando hace ya varios años con lo cual, si bien el efecto no puede atribuirse directamente al programa, si ratifica la necesidad de este tipo de iniciativas. P4. H6. “nosotros llevamos aproximadamente 14 años, después de que se erradicó acá la coca, que fue finalizando la zona de distensión y de ahí para acá, nació una asociación Agroavi, que fue la primera asociación que son familias guardabosques del Municipio de Vista Hermosa, yo estuve ahí participando desde que se fundó y pues desde ahí se empezó a implementar este programa, lo que fue cacao” “Pensaría que la mayoría de los beneficiarios que están en PAC el compromiso era no tener ilícitos, o si los tenían irlos erradicando”. P4. H7. “entonces pues, nosotros dijimos ¡Dios mío! Cacao, a los cuántos años del cacao, cuando eso no sabíamos nada, no sabíamos sino producir y transformar coca y por ahí escasamente ordeñar una vaca lechera que era lo que hacía. Entonces bueno, sin embargo nos arriesgamos, vamos a arriesgarnos, nos arriesgamos 30 familias, él nos montó el proyecto, organizó todo, nosotros le recogimos los documentos y nos presentamos a la bendita Alianza Productiva y nos la ganamos, nos la ganamos entonces pues listo, nosotros que de ser coqueros para coger la plata, pasar a ser cacaoteros, entonces dijimos ¡Dios mío!, esto es un reto muy grande ¿no?, pero bueno, lo hicimos” P4. H8. Adicionalmente, la Figura 1 muestra la evolución de los cultivos de coca en las zonas en las cuáles habitan los beneficiarios de PMA. Lo qué se observa es qué en departamentos como Caquetá y Meta los cultivos de coca han sido abandonados o han existido ocasionalmente (las marcas verdes) en el periodo 2016-2018 en las zonas donde habitan los beneficiarios del programa (representados por los puntos negros). De otro lado, en los departamentos de Cauca y Antioquia si bien también se observan cultivos abandonados en el periodo de análisis, todavía se evidencia la existencia de cultivos permanentes de coca (representados por las marcas rojas) colindantes con la zona donde viven los beneficiarios de PMA. TABLA 57 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 118 Por último, en la zona de Tumaco, lo que se observa es que los beneficiarios viven en contacto permanente con cultivos de coca, lo que podría dificultar aún más la operación del programa (ver Diagrama 61). En este sentido, y si bien no es el objetivo primordial del programa, el efecto que ha tenido PMA en los cultivos ilegales es evidente. No solo los mismos productores lo perciben como una alternativa para sustituir la actividad legal por una legal, sino qué pareciera presentarse un desplazamiento de cultivo de coca en las zonas donde el programa opera. El mayor reto en este campo es que este comportamiento pueda ser sostenible en el tiempo, para lo cual el programa debería articularse con otras iniciativas qué tengan como objetivo la reducción de los cultivos ilícitos. Uno de los efectos que trae consigo la reducción de los cultivos ilícitos es la seguridad en las zonas donde habitan los beneficiarios de PMA. De este modo, la intervención no solo afecta el contexto productivo de la población, sino también el contexto social puesto que esto se sienten más seguros al desempeñar una nueva actividad que los distancia de los actores armados. La reducción en los cultivos ilícitos trae como consecuencia una sensación de seguridad para la población. P4. H9. “pues legalidad pues ya, y seguridad sí no hay cultivos ilícitos para poner un ejemplo, la verdad no van a ver actores armados interesados en la región o en la zona donde esté la asociación, que eso es lo más llamativo, cuando hay cultivo ilícito o hay minería ilegal y todo eso fácil, eso llama a todos los actores armados que estén ahí pendientes a ver cómo también le sacan provecho a eso, al no haber eso no va a ver esa dificultad con los actores armados, entonces va a ver seguridad”. Diagrama 61: Evolución de cultivos de coca en las zonas habitadas por beneficiarios de PMA 119 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV P4. H10 Esta sensación se puede corroborar cuando se analizan los eventos de terrorismo en 2016 y 2019 en las zonas en las cuales opera PMA. Al respecto, en la diagrama se muestra una disminución importante en los actos de terrorismo en los departamentos de Antioquia y Nariño pasando de XX en 2016 a XX en 2019 en el primero, y de XX a XX en el segundo. De otro lado, en los departamentos de Cauca y Meta no se evidencia un cambio significativo en los eventos de terrorismo, mientras que en Caquetá se evidencia un ligero incremento. P4. H11 Lo anterior se refuerza el efecto que tienen las inversiones en vías de acceso en las zonas de incidencia de PMA, lo cual no solo tiene un efecto en lo relacionado con la logística de comercialización de los productos (como se presentó en la sección XX) sino que también afecta lo relacionado con el tema de seguridad. Ante esto, los beneficiarios sienten que tener una mejor conectividad reduce el marco de acción de los grupos ilegales, y por ende cambia el contexto en el cual estos se desempeñaban antes de la intervención. P4. H12. “la seguridad en la zona pues mejora debido a la penetración, cuando hay pues vías y accesos a las comunidades pues se le hace más fácil a todos los procesos, entonces por eso ha tenido impacto en cómo es…, en la seguridad, ahora si hay muchas vías que de pronto no tienen ese acceso digamos, entonces por eso se debilita esos temas” Diagrama 62: Actos de terrorismo 2016-2019 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 120 “En el tema de vías, se pudo impactar lo que fue el corredor Monteblanco – La Siberia, que es un corredor estratégico en el Municipio, estratégico también en la búsqueda de seguridad y de consolidar todo el tema de la paz. Este corredor fue dominado por el grupo de las FARC en años anteriores” P4. H13. En este sentido, el hecho de que para el 2019 casi la totalidad de los beneficiaros de PMA tengan acceso a una vía a menos de 1 kilómetro cuadrado de su lugar de residencia (ver Diagrama 63), Tiene efectos importantes no solo en la comercialización y ventas de sus productos (como se presentó en la sección XX), sino que mejora el tema de seguridad y facilitará el acceso a servicios sociales tales como educación, salud, entre otros factores que mejoran la calidad de vida de la población. Diagrama 63: Distancia beneficiarios PMA a una vía de acceso 121 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV P4. H14. EFECTOS ADICIONALES Un resultado que se encuentra sistemáticamente en las entrevistas con los beneficiarios es el reconocimiento de estos con las actividades realizadas por USAID. Los participantes del programa no solo reconocen la presencia prolongada de la misión en el territorio, sino que también son capaces de diferenciar el apoyo particular de esta a PMA. P4. H15. “Si, nosotros desde el 2003 venimos haciendo beneficiados, haciendo parte de los diferentes programas que ha desarrollado USAID, con por ejemplo en 2017, habíamos ejecutado un proyecto también con programa Colombia Responde, antes 2015-2016 también habíamos en bajo Cauca Colombia Responde, aquí con Fupad en su momento que fue digamos que fue como el que impulso todo el tema del cacao en la región, en 2003, Diagrama 64: Cacao Diagrama 65: Café USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 122 2004, 2005, digamos que esta es como la continuidad a todos esos procesos que ha tenido USAID durante estos 16-17 años que ha estado haciendo intervención, pues me imagino que en Colombia” P4. H16. “El programa de Alianzas Comerciales, para mí el programa de Alianzas Comerciales es un apoyo que da la USAID, que da Estados Unidos, el gobierno de Estados Unidos a los campesinos de Colombia, apoyándonos en temas de cultivos lícitos y apoyándonos en el tema de vías, es un aporte muy valioso para nosotros” P4. H17. “el tema del PAC ha sido fundamental en el tema institucional y el fortalecimiento a cada una de las instituciones que sí lo vemos cuando se inició el tema de la intervención pues no fue solamente a productores y a los cultivos, también se hizo intervención en cada uno de los comités Municipales encontrando dificultades en la parte administrativa, digamos en contabilidad, en la parte de Cámara de Comercio con la DIAN, no estaban al día en algunos temas por desconocimiento porque no tenían la fortaleza la capacidad desconocían como eran los planes de todo esto, y entonces el programa les dio un fortalecimiento en capacitación en estos temas” P4. H18. “nosotros fuimos beneficiados por el programa de Patrimonio Natural. Con recursos de USAID, se construyeron tres centrales de acopio. Anteriormente con el programa Colombia Responde, también estuvimos unas donaciones y las consultorías de proyectos, y algunos proyectos de fortalecimiento en labores culturales, todo el tema de asistencia técnica” 123 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV PREGUNTA 5: ¿CÓMO SE VE AFECTADA LA INTERVENCIÓN DE LA ACTIVIDAD PAC POR LAS ECONOMÍAS ILÍCITAS LOCALES Y REGIONALES EN LOS MUNICIPIOS SELECCIONADOS? ¿CÓMO AFECTA LA INTERVENCIÓN DE LA ACTIVIDAD PAC A ESAS ECONOMÍAS? CONCLUSIONES. P 5. C 1. Desde el año 2017 a hoy los cultivos ilícitos se encuentran concentrados mayoritariamente en la región del pacífico nariñense, el Catatumbo, y el alto Putumayo. Una presencia importante de cultivos ilícitos en el norte del Cauca, el Nudo de Paramillo, Bajo Cauca antioqueño, y la serranía de San Lucas. En menor medida, pero en un proceso expansivo en la región de la Macarena, el río Ariari, el Guaviare y la zona sur del Caquetá. El Programa de Alianzas Comerciales realiza su intervención en siete regiones priorizadas: Tumaco, Cauca, Caquetá, sur del del Meta, bajo Cauca antioqueño, sur de Córdoba y sur de Bolívar. Vale la pena señalar que las regiones del alto Putumayo y Catatumbo no fueron tenidas en cuenta para este programa (P5. H 35.) Los núcleos de intervención de PAC, sí bien están en municipios con presencia de cultivos ilícitos, se dan en zonas donde existe una economía lícita consolidada, en un esfuerzo por fortalecer cadenas productivas presentes en la región. P 5. C 2. Las regiones de intervención de PAC han sido afectadas por los cultivos ilícitos durante años, en muchos casos los campesinos, colonos e indígenas se vieron abocados a los cultivos de coca por presión de actores armados, por el histórico abandono estatal y la falta de alternativas económicas viables (H 4). El programa les ha mostrado que es posible y necesario realizar un cambio hacia economías y formas de vida legales. P 5. C 3. Sí bien el Programa de Alianzas Comerciales no interviene directamente sobre sustitución de cultivos ilícitos, gran parte de los beneficiarios fueron en su momento cultivadores de coca que se acogieron a programas de sustitución (H 15). Las asociaciones de las cuales hacen parte los beneficiarios, en algunos casos, hicieron parte de programas de cooperación como MIDAS o Colombia Responde (H 10). P 5. C 4. En la medida que las cadenas productivas intervenidas por PAC mejoran su productividad, calidad y valor del producto en el mercado (H 3), se genera una dinámica regional donde los habitantes ven que es posible vivir de una economía legal, motivando a más productores para que se vinculen (H 2, H 6, H 13). P 5. C 5. Además de los factores económicos, dedicarse a cultivos legales como el cacao o café, hace posible que mejore la seguridad y tranquilidad en las veredas, se establece relaciones de confianza con los vecinos y las autoridades (H 12). Desde un punto de vista subjetivo tener una actividad lícita les permite recuperar su sentido de propia valía al sentirse orgullosos de ser agricultores (H 5). El programa se basa en propiciar cambios técnicos y comerciales en los productores, pero su alcance va más allá al producir cambios culturales en la mentalidad de la población, sobre la posibilidad e importancia de generar una economía legal en la región (H 9). P 5. C 6. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 124 Los participantes resaltan que establecer canales de comercialización con los productores permite que los procesos sean sostenibles en el tiempo, pues esta es una falla recurrente en los planes de sustitución de cultivos ilícitos (H 7). Sí los cultivadores no encuentran mercados, o los precios no son justos, puede darse el fenómeno que migren nuevamente a los cultivos ilícitos, donde la compra del producto y su precio están garantizados (H 8). P 5. C 7. Un tema que aparece de manera recurrente es la importancia de vincular a los jóvenes en el programa, ya que la mayoría de los cultivadores son personas de avanzada edad, se necesita establecer un relevo generacional y fortalecer el núcleo familiar. Igualmente, los jóvenes son la población más vulnerable, pues por la falta de oportunidades laborales pueden caer fácilmente en las economías ilícitas (H 14). P 5. C 8. Uno de los principales retos del programa ha sido afrontar los problemas de seguridad en cada una de las regiones, teniendo en cuenta que existen diferentes actores y dinámicas locales que deben ser tenidos en cuenta. Los funcionarios de PAC han manejado el tema con bastante responsabilidad y coordinación con el nivel central. Las diferencias regionales según actores armados se pueden resumir del siguiente modo: • Bajo Cauca: la región ha sido afectada por prácticamente todos los grupos armados que se disputan los cultivos ilícitos, la minería ilegal y las rutas del narcotráfico, principalmente “el Clan del Golfo” (H 36) y el ELN (H 38), aunque se encuentran igualmente grupos delincuenciales minoritarios como “los Caparrapos”, “Los Pachely” y la “Oficina de Envigado” (H 40), haciendo la región bastante compleja por las disputas entre bandas rivales. • Cauca: en esta región hace presencia prácticamente todos los actores armados sin que ninguno predomine, por lo cual se ha vuelto bastante inestable. Se ha visto afectada principalmente por las disidencias de las FARC (H 37) y el ELN (H 38)en la zona de cordillera central al oriente del río Cauca, el Clan del Golfo (H 36) en la salida al pacífico caucano, y el EPL en el Tambo y la zona sur (H 39). Vale la pena señalar que en algunos de estos municipios (Corinto, Caloto) en programa no pudo continuar, y en Miranda solo pueden visitar el casco urbano, pero no la zona rural; • Caquetá: el departamento se ve afectado por las disidencias de las FARC (H 37), quienes lo consideran una zona histórica de influencia; • Sur del Meta: las disidencias de las FARC hacen presencia en todos los municipios del programa (H 37), el Clan del Golfo afecta los municipios de Mesetas, Vistahermosa, San Juan de Arama y Puerto Rico, en las cuencas del río Ariari, Guayabero y los límites del PNN la Macarena (H 36). • Sur de Córdoba: hace una fuerte presencia el Clan del Golfo (H 36) en toda la región incluyendo el Nudo de Paramillo, así como las cuencas de los ríos Sinú y San Jorge, las disidencias de las FARC hacen presencia en el occidente sobre la cordillera cerca a región de Urabá, el ELN en el Nudo de Paramillo (H 38). • Sur de Bolívar: se ve afectado principalmente por el ELN (H 38), en la región de la Serranía de San Lucas controlando actividades relacionadas con los cultivos ilícitos y minería ilegal. El Clan del Golfo 125 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV ha hecho presencia minoritaria entre la ciénaga y el río Magdalena en el municipio de San Pablo (H 36). • Tumaco: el municipio y en general en la costa del Pacífico nariñense ha sido afectada gravemente por diferentes grupos armados las disidencias de las FARC (H 37), el Clan del Golfo (H 36) y el ELN (H 37), quienes disputan la región del alto Mira, la frontera con Ecuador sobre el río Mataje, y la salida al mar en la desembocadura del Patía. P 5. C 9. Las zonas donde se desarrolla el programa han sido afectadas por la presencia de grupos armados, en el pasado fijaban los precios de compra de los productos (H 17), actualmente centran su acción en el control de la producción de coca y minería ilegal (H 19, H 21, H 22). Con los agricultores de productos legales no tienen mayor relación, ni han sido víctimas de coacción, sin embargo, exigen conocer los proyectos que se desarrollan, imponen restricciones en cuanto a la movilidad, así como el ingreso de personal que no sea de la región (H 16, H 18). P 5. C 10. El proceso de paz ha contribuido a mejorar la seguridad, principalmente en el Caquetá y sur del Meta, donde existía una fuerte presencia de las guerrillas (H 20). En otras regiones, por el contrario, como Cauca o Tumaco se ha dado una reorganización de actores armados, quienes entran en conflicto por el control de las economías ilegales generando una fuerte presión sobre la población (H 21). P 5. C 11. Las obras de infraestructura realizadas por el programa han permitido que mejore la seguridad en las zonas debido a que se encuentra una mayor presencia institucional que antes no existía (H 23, H 24). P 5. C 12. Los funcionarios locales que participaron en el estudio, consideran mayoritariamente, que la experiencia del Programa de Alianzas Comerciales representa un valioso aprendizaje para los programas de sustitución de cultivos ilícitos, opinan que el modelo de asistencia técnica y comercialización puede ser replicado en los PNIS (H 25), señalan que el acompañamiento para los proyectos productivos debe ser a largo plazo, de cuatro a seis años para que sea sostenible (H 27). Resaltan que este aprendizaje debe aplicarse a la mayor brevedad, pues existe una inconformidad creciente por parte de la población con los PNIS, pues quienes se acogieron al programa consideran que el Gobierno Nacional no ha cumplido sus compromisos (H 26). P 5. C 13. Todos los municipios intervenidos por PAC se encuentran en zonas PDET, la mayoría de los planes de desarrollo con enfoque territorial han sido formulados y socializados con la comunidad. Sin embargo, su ejecución va muy lenta y consideran que el PAC podría contribuir en desarrollarlos y fortalecerlos (H 28, H 29, H 30). P 5. C 14. En algunos casos, principalmente en el componente de vías e infraestructura, se ha dado una articulación entre el programa con los Gobiernos locales y la ART (H 32), sin embargo, consideran que debería existir mayor comunicación y colaboración sobre todo en el tema de proyectos productivos (H 33). Aunque reconocen que los funcionarios de PAC se han mostrado interesados en conocer cada uno de los PDET regionales para colaborar -en la medida de lo posible- en su implementación (H 34). USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 126 P 5. C 15. El programa ha permitido fortalecer asociaciones de productores y Juntas de Acción Comunal en el tema de ejecución de proyectos y veedurías ciudadanas, dejando una capacidad instalada que puede ser replicada en los proyectos que surjan en el marco de los PDET (H 31). HALLAZGOS. P5. H1. Los datos cualitativos utilizados para responder la pregunta corresponden a los códigos de actividades económicas (101 citas), conflicto armado y seguridad (43 citas), construcción de paz y legalidad (76 citas), y mejoramiento de la calidad de vida (82 citas). Vale la pena señalar que sobre el tema de cultivos ilícitos y conflicto armado no se indagó directamente a los participantes, sino que fue un tema emergente. Las citas a su vez fueron segmentadas según dificultades, fortalezas y recomendaciones, como se aprecia en la gráfica. Encontramos que las principales fortalezas se ubican en el tema de mejoramiento de la calidad de vida, mientras que el mayor número de recomendaciones se refieren a las actividades económicas. En el caso del conflicto armado y seguridad encontramos que el 80% de las opiniones (16 citas), refieren dificultades, como la presencia de grupos armados, o cultivos ilícitos, concentradas en regiones como Cauca, Tumaco y el Bajo Cauca. En el caso de construcción de paz y legalidad encontramos un resultado opuesto, pues prácticamente el 60% de las opiniones se refieren a fortalezas o aspectos positivos (16 citas) frente al 20% que señalan dificultades. La mayoría de las opiniones positivas se concentran en las regiones de Caquetá y sur del Meta, antigua zona de influencia de las FARC. Diagrama 66: Consulta de la Matriz de Codificación: Vista Preliminar de Resultados 127 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV PASADO PRESENTE FUTURO Actividades económicas 27 70 4 Conflicto armado-Seguridad 10 30 3 Construcción de Paz-Legalidad 2 72 2 Mejoramiento en calidad de vida 5 75 2 CULTIVOS ILÍCITOS. P5. H 2. Los productores de Cacao y autoridades locales de Cartagena del Chaira, La Montañita, y Belén de los Andaquíes, coinciden en señalar que el aumento en la productividad que han tenido los cultivos con la intervención del PAC se convierte en una motivación para que otros productores se vinculen a la economía licita. P5.H 3. En igual sentido se manifiesta un aliado comercial de cultivadores de café en el Tambo (Cauca), considera que el trabajo con cafés especiales a permitido una mejora en el precio, por lo cual las personas que se encuentran en las economías ilícitas lo pueden ver como una alternativa. [En cuanto al tema de la legalidad] eso si es bastante , yo he visto que es algo muy positivo , porque en el municipio de el Tambo es conocido como una de las zonas que más coca tiene sembrada, no solamente en Cauca sino a nivel nacional, y muchas personas pues ven que ese trabajo allá es más lucrativo o es más fácil de hacerlo, porque en el café , cuando se maneja el café de forma convencional, pues de pronto los ingreso del café lo son llamativos comparando con los otros. Entonces gracias a estos programas , a este apoyo que han tenido, pues se ha ido mejorando mucho, no solamente lo que es a nivel económico , porque eso ayuda, pero también les ayudado desde el puntos de vista de , digamos como de educación, o la forma de ellas de ver al vida y digamos que ellos saben que están en un negocio licito que no tiene que estar escondiendo de nadie, ni haciendo nada a escondida, entonces par mi pues es no tiene precio , y que con los hijos de ellos, como ellas mismas decían " no yo quiero seguir con el café porque esto es bonito , esto me gusta y no irse por ahí a otras partes a hacer otras cosas" entonces desde ese punto de vista me parece algo muy positivo. (Aliado comercial, El Tambo) P5.H 4. Los participantes manifiestan que la mayoría de las personas buscan estar en una economía legal, pero debido al conflicto armado y el abandono estatal se vieron a abocados a los cultivos de coca. Sin embargo, programas como PAC les han mostrado que es posible realizar un cambio. Un participante de San Vicente del Caguán, Caquetá, nos dice: Pues mira uno de qué pues está invistiendo realmente los productores en el área rural, que ha sido un área tan vulnerada por muchas cosas por conflicto, por cultivos ilícitos, y todo pues eso ayuda a que la TABLA 58 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 128 gente como que, y ya la gente ha tomado conciencia , dice “yo voy a trabajar en lo licito, voy a trabajar bien”, y sé que la mayoría de personas he aquí son personas de bien, que buscan trabajar bien, sino que pues es que hay muchos factores que inciden para que esto, pero si claro. (Grupo beneficiarios, San Vicente del Caguán) P5. H 5. La seguridad y tranquilidad que produce tener un cultivo lícito es el principal incentivo para los productores, igualmente les permite sentirse orgullosos de su forma de trabajo, cosa que no ocurre con los cultivos ilícitos. El Secretario de Gobierno de San Vicente del Caguán nos dice: Cuando se empieza a trabajar con productos lícitos, con productos legales, pues estamos cerrando esa brecha de hacer las cosas mal o estar pensando en producir productos que son ilegales y desde ese punto de vista pues estamos contribuyendo ya a la paz. El productor ya entiende que lo mejor es estar legalmente que producir un producto donde pueda caminar con la frente en alto cuando lo está llevando, que no esté escondiendo, ahí ya empieza a ver una tranquilidad en el productor y de ahí irradiar un buen ejemplo, alrededor de su familia y de su entorno a donde este, porque eso cala en el impacto de la gente y a fulano de tal, le está yendo bien con este producto, hace tiempos era coquero y ahora mírelo cómo está, produciendo esto y le está yendo mejor que antes, ya no se tiene que estar escondiendo ahí es un tema que hace que encontremos la paz. (Funcionario local, San Vicente del Caguán) En el mismo sentido se refiere un extensionista en Cartagena del Chairá: La principal fortaleza del programa en nuestra zona es la construcción de paz, de esperanza, de desarrollo, y el cambio positivo que estamos teniendo actualmente en nuestra región. (Extensionista caucho, Cartagena del Chairá) P5. H 6. Para dos productores de Miranda el PAC les ha colaborado a través de sus parcelas y capacitaciones para que continúen con los cultivos de café porque antiguamente sus ingresos provenían del trabajo en cultivos ilícitos. Miranda y Corinto los productores mencionan que el apoyo realizado por el PAC para el mejoramiento de la producción y comercialización del café, ha contribuido a que los productores vuelvan a creer en el cultivo como una forma de percibir ingresos, favoreciendo la continuidad de la actividad lícita; de lo contrario, los cultivos ilícitos se convierten en la fuente de ingresos más atractiva. Pensaría que la mayoría de los beneficiarios que están en PAC el compromiso era no tener ilícitos, o si los tenían irlos erradicando, al comienzo sí fue muy complicado porque a veces los programas son muy radicales, tiene o tiene, pero hay gente que tiene y está intentando mejorar su caficultura para quitarse eso de encima, entonces al comienzo el programa los sacaba, no yo diría que el programa tiene que tratar de buscar gente con la intención de retirarse de los ilícitos, darle la oportunidad y en el transcurso irlos retirando porque si hoy para mucha gente el café está allí pero el principal cultivo es el ilícito y lo que él tiene es la intención de volver al café, lo que hay que es apoyarlo, en la medida que le podamos retirar un productor de los ilícitos es darle a ese agricultor y a su familia, tranquilidad, paz, legalidad, porque el que cultiva ilícitos está sometido a mucha presión a muchas cosas, entonces sí la gente ve que cultivando café adecuadamente tiene mejor producción, que si tiene mejor calidad, tiene 129 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV mejor precio, pues tal vez no gane lo mismo que gana con los ilícitos pero van a mejorar sus ingresos y pueden mejorar su calidad de vida pero lo más importante es su tranquilidad, su seguridad, su paz poder andar tranquilos sin miedo de nada, creería que ese es el punto clave. (Funcionario local, Santander de Quilichao) P5. H 7. Un punto de vista recurrente tiene que ver con establecer canales de comercialización que hagan posible el proceso de sustitución de cultivos ilícitos, pues en dichos cultivos el mercado está asegurado. En ese sentido el PAC apunta a un camino que debe ser tenido en cuenta por otros programas para que sean sostenibles en el tiempo. Un funcionario local de Miranda, Cauca, explica: La persona que va a hacer un cultivo, que va a hacer una siembra o va a producir un cultivo siempre está pensando a quién venderlo, cómo venderlo, entonces, no llegar en el momento de que haya la cosecha y no tenga definido a quién venderlo o cómo o a qué precio se va a vender, y que no tenga esa…Como se dice, la mentalidad de que va a producir a pérdida, que ese es el miedo del campesinado hoy día, entonces por eso es que recurren a los cultivos ilícitos, del cual el mercado nunca va a estar en…mal el mercado de ese cultivo, o sea, van a ir hasta allá, hasta la zona y le van a cosechar y le van a transportar, sin necesidad de él moverse, entonces tenemos esa gran…Como dicen, tenemos que enfrentarnos a esa gran problemática. (Funcionario local, Miranda) P5. H 8. Uno de los mayores temores que tienen los cultivadores es no encontrar mercados para sus productos o que los precios no sean suficientes, por lo cual se puede dar una migración nuevamente a los cultivos ilícitos, un participante de Tumaco nos dice: Yo pienso que sí se lograr fortalecer más la parte comercial, porque en alguna ocasión alguien me decía que se pensaban sembrar no sé cuántas hectáreas más, buscando atraer al sembrador de coca al coco. Y yo le dije “acá lo que tenemos que apuntarle es a la parte comercial”. En la medida que el sembrador de coca se dé cuenta que, al cocotero, que al cacaotero le está yendo bien, obviamente él va a soltar eso que tiene y se va a volver a sus productos legales, y eso lo logramos con un buen precio en el mercado; eso lo logramos con controles externos, porque es que Venezuela, Panamá, este otro, nos invaden, Perú, nos invaden con el coco y hace que, también Filipinas, y hace que el mercado Nacional se vea, en muchas oportunidades, afectado, eso pasa con el coco, el cacao no sé de dónde entra, poco conozco del tema, pero entonces lo cierto es que los mercados internacionales nos invaden y entonces el industrial por precio, porque no pagan aranceles para entrar a Colombia, prefieren lo exterior y a nosotros nos dejan allí estancados. Eso hace que muchos comiencen a migrar del coco a la coca, del cacao a la coca, porque le apostó a eso como su proyecto de vida y ahora que ya está produciendo, ya no es rentable, ya no lo compran, ya el precio no es atractivo y eso es lo que hace que se vuelva ese círculo vicioso y la coca pues traiga la violencia. (Aliado comercial coco, Tumaco) P5. H 9. El Programa de Alianzas Comerciales busca realizar un cambio técnico en cuanto a la productividad de los cultivos, pero sobre todo requiere un cambio en la mentalidad de la población, al pasar a una economía ilegal a una legal. El ex alcalde de Mesetas explica: La guerrilla siempre ha estado [en el municipio], toda la vida, y está todavía. Entonces que paso, ya se acabó el café, entonces cual fue digamos la línea productiva, la coca entonces cambiaron las culturas el USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 130 café, tocaba mano de obra constante, cosecha de diciembre y la mitaca de junio, la coca era un cultivo de cada 40 días, entonces ya la cultura fue cambiando, ya la gente se volvió floja porque era cada 40 días, era la platica en efectivo un kilito no más no era un bulto o arroba sino un kilito y ya, se acabó la coca, entonces la gente que le tocó buscar otra alternativa, entonces la leche, entonces pasaron a la leche, y otros pasaron al café otra vez pero en las partes altas sí, y otros les tocó pasarse al cacao, entonces y cambiar la mentalidad del coquero, esa mentalidad de que antes las cosas se daban más fáciles que ahora, yo no le digo mentiras. (Funcionario local, Mesetas) P5. H 10. En cuanto al Cacao si podemos estar hablando de un detrimento en pequeña proporción de las economías ilícitas tanto en Bajo Cauca Antioqueño, como Tumaco puesto que representa un producto con características atractivas en los mercados internacionales y posibilidades de transformación innovadoras. Las variedades que desde el PAC se han fortalecido representan productos de calidad que poco a poco se abren paso en mercados internacionales. En Valdivia representa el apalancamiento y fortalecimiento a proyectos que inicialmente se dieron como alternativa a la sustitución en Valencia y Tierralta como evidencia que el post conflicto trae seguridad y garantías para realizar una apuesta a la economía legal y en Tumaco se abre espacio y las comunidades ganan respeto por parte de los actores al margen de la ley dicho por los mismos productores. P5. H 11. Para el Coco en Tumaco se evidencia un interés por mantener y fortalecer este cultivo como también el proceso de transformación, al igual que el cultivo de cacao, aunque para este en una de las parcelas demostrativas la cual está representada por el núcleo familiar del representante legal de ASPROCAT manifestaba: Ha sido una lucha y una resistencia, pues al ver el regreso [de los actores armados] se imaginan que esto deja mucho dinero y han querido extorsionarnos, nosotros no hemos cedido y por ahora las cosas están un poco calmadas (Parcela demostrativa coco, Tumaco). P5. H 12. Al aplicar el PAC un modelo integral que incide en el cambio de mentalidad del productor cabe reconocer que a través de la sensibilización en cuanto al valor subjetivo como la tranquilidad, el fortalecimiento de la familia en nuestra sociedad, la organización familiar y comunitaria a razón del emprendimiento, ha generado empoderamiento en el pequeño productor, "aprender haciendo" metodología aplicada en las parcelas demostrativas y la cualificación de la asistencia técnica estrechan los vínculos entre las comunidades y la institucionalidad. P5. H 13. Con la incursión del PAC en el cultivo y comercialización de camarón en Tumaco, se esperaría tener una incidencia en el fortalecimiento de una economía licita con enfoque de género, pues145 mujeres víctimas del conflicto armado trabajan y creen en esta empresa que las agrupa. Con el mejoramiento de la productividad de la empresa proyectado en un 20-30% aproximadamente se beneficiarán más cultivadores. P5. H 14. Para cualquier producto en la región de Tumaco se hace necesario el fortalecimiento en términos de relevo generacional pues son los jóvenes los actores más llamativos y vulnerables en las dinámicas de las prácticas de las economías ilícitas. 131 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV P5. H 15. En los municipios de Simití y Santa Rosa del Sur, los cultivos de cacao fueron implementados con el proceso de sustitución de cultivos de coca, por lo tanto, son muy anteriores a la llegada del PAC. Muchos de los productores tienen otros cultivos para comercializar como el café y el plátano, además de cultivos de auto sostenimiento. En el municipio de Vistahermosa, según productores y extensionista, los cultivos de cacao son anteriores a la llegada del PAC porque fueron implementados voluntariamente mediante el proceso de sustitución de cultivos ilícitos. Muchos de los productores cacaoteros también trabajan con ganado y frutales, además de los cultivos de pan coger. SEGURIDAD Y CONFLICTO ARMADO. P5. H 16. El representante legal de CHOCAGUAN, relató que los actores armados que existían y los que aún persisten en la región exigen tener conocimiento de los proyectos desarrollados en el municipio de Cartagena del Chairá, y determinaban si permiten su desarrollo o no, para el caso de PAC no se presentó ninguna restricción. P5. H 17. Quesecar, el aliado comercial de Cartagena del Chairá, señaló que los grupos armados antes de la firma de los Acuerdos de Paz ocasionalmente fijaban los precios de compra a los productores de leche y queso, situación que incidía negativamente en la cadena de comercialización. P5. H 18. En el municipio de Florida, Valle del Cauca, la operación del PAC en la cadena de mora se ve restringida por las condiciones de seguridad presentadas en las Veredas Las Brisas, las Guacas, La Rivera, en las que habitan productores de las Asociaciones Nasafrut y Aprogua. Restringida especialmente en cuanto a: horarios de entrada y salida de los territorios, actores que visitan los territorios (deben estar acompañados de líderes o miembros de las organizaciones), los extensionistas y coordinadores deben subir en sus vehículos y sin casco para que se les identifique. Para los productores, la actividad de producción no se ha visto directamente afectada, aunque cómo comunidades indígenas han tenido que negociar (y en algunos casos, enfrentarse) con grupos armados presentes en la zona para poder trabajar tranquilos. P5. H 19. En el municipio de Santa Rosa del Sur, manifiestan que los grupos armados ilegales están replegados y que se están ocupando del negocio de la minería ilegal, por lo que no han tenido inconvenientes con sus cultivos de café. En algunas veredas, el ELN ha intentado hacer presencia violentamente porque hay estaciones de Policía, pero el despliegue del ejército ha disuadido a este grupo de volver a aparecer en los centros poblados. P5. H 20. En el municipio de Vistahermosa los participantes manifiestan que el proceso de paz con las FARC ha contribuido a disminuir la presencia de grupos violentos en la región, aunque también se ha visto la ampliación de las fronteras extractivas (especialmente por la ganadería extensiva), ya que hoy por hoy no hay control sobre ese asunto. En general, la población manifiesta estar tranquila porque USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 132 actualmente Vistahermosa es un municipio seguro donde se pueden realizar varias actividades más allá de la producción de coca. P5. H 21. Cuando las comunidades se dedican a productos legales, los actores armados no entran en la zona, pues están interesados en actividades como la coca o la minería ilegal que les generan ingresos. El Secretario de Gobierno de San Vicente del Caguán nos dice: Pues la seguridad, pues legalidad pues ya, y seguridad sí no hay cultivos ilícitos para poner un ejemplo, la verdad no van a ver actores armados interesados en la región o en la zona donde esté la asociación, que eso es lo más llamativo, cuando hay cultivo ilícito o hay minería ilegal y todo eso fácil, eso llama a todos los actores armados que estén ahí pendientes a ver cómo también le sacan provecho a eso, al no haber eso no va a ver esa dificultad con los actores armados, entonces va a ver seguridad. (Funcionario local, San Vicente del Caguán) P5. H 22. En el mismo sentido se manifiesta un extensionista en Florida, Valle del Cauca, cuando explica que sin cultivos ilícitos los actores armados se retiran de la zona, refiriéndose a las comunidades indígenas del municipio dice: Claro, no te puedo decir quién, pero uno cuando uno lo hizo. Entonces, por dar ejemplo a sus hijos y eso ha contribuido a que la guerrilla ya no esté ahí. Si no tiene cocaína ni marihuana ¿para dónde se van? Y es por principio de ellos, no desde el Estado, ni de USAID, son principios de ellos como indígenas, están diciendo, somos dueños de nuestro territorio y cuidamos el ecosistema y el medio ambiente. (Extensionista frutales, Florida) P5. H 23. Las obras de infraestructura realizadas por el programa han permitido que mejore la seguridad en las zonas debido a que se encuentra una mayor presencia institucional que antes no existía. Uno de los veedores de la obra en Valencia, Córdoba, explica: Bueno, yo pienso que sí, la seguridad en la zona pues mejora debido a la penetración, cuando hay pues vías y accesos a las comunidades pues se le hace más fácil a todos los procesos, entonces por eso ha tenido impacto en cómo es…, en la seguridad, ahora si hay muchas vías que de pronto no tienen ese acceso digamos, entonces por eso se debilita esos temas [cultivos ilícitos]. (Entrevista infraestructura, Valencia) P5. H 24. En el mismo sentido las obras de infraestructura desarrolladas por el Programa de Alianzas Comerciales permiten conectar regiones que anteriormente eran dominadas por los actores armados. El secretario de Gobierno de Valdivia, Antioquia, nos dice: En el tema de vías, se pudo impactar lo que fue el corredor Monteblanco – La Siberia, que es un corredor estratégico en el Municipio, estratégico también en la búsqueda de seguridad y de consolidar todo el tema de la paz. Este corredor fue dominado por el grupo de las FARC en años anteriores, ellos salieron de esta zona y se vio la necesidad de empezar a hacer inversión social allí. (Funcionario local, Valdivia) 133 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV PROGRAMAS PDET Y PNIS. P5. H 25. La forma como se ha desarrollado el PAC representa un aprendizaje para los programas de sustitución de cultivos ilícitos, algunos funcionarios consideran que el modelo de asistencia técnica y comercialización puede ser aplicado en los PNIS. Un funcionario de Puerto Rico, Caquetá, explica: [En el tema de paz y legalidad el programa] Si claro, eso aporta bastante, pero no solo lo de infraestructura. Sobre todo, en cuanto a los programas agrícolas o de fortalecimiento productivo. Por lo menos lo que es lo de la sustitución, pues hay mucha gente inconforme con el PNIS, se sienten abandonados, les dieron la plata y no hicieron ningún programa como para decir: "Bueno, venga cultivemos esto y esto va a ser vendido en tal lado" y todavía no, como que no se ha implementado esa idea todavía: eso lo digo porque hace ocho días fui a una reunión del plan de desarrollo donde estuvimos con toda la comunidad y ellos me estaban expresando eso prácticamente. Que necesitaban, por parte del Gobierno Nacional, de acá también local, departamental y de pronto con entidades no gubernamentales; mirar a ver qué los ponen a hacer a ellos que necesitan ser productivos, que muy bien la vía, pero qué estamos sacando. (Funcionario local, Puerto Rico) P5. H 26. Un aspecto que impacta negativamente es la inconformidad de las comunidades con el PNIS, consideran que el Gobierno nacional no ha cumplido con los compromisos, los programas de seguridad alimentaria y proyectos productivos no se han desarrollado. El Secretario de Desarrollo de la Montañita nos dice: Si tenemos pues un sabor amargo y hay que decir, que la preocupación de las comunidades frente a los compromisos que firmó el mismo Gobierno con la sustitución de cultivos, porque hay si tenemos, hay una gran inconformidad especialmente en la parte de los compromisos que se firmaron, no ha sido muy fácil al estado cumplirle a los campesinos que firmaron ese pacto. Primero porque los recursos que se prometieron no llegaron en el momento dado, han sido muy tarde, ¿sí? por lo menos, por ejemplo, fortalecimiento a la seguridad alimentaria primero llegó a la capacitación y dos años después llegan los insumos, entonces tuvimos ahí un gran problema frente a eso. Entonces los campesinos consideran que el gobierno no les ha cumplido con lo que se comprometieron. (Funcionario local, La Montañita) P5. H 27. Los participantes consideran que el cultivo de cacao puede ser una buena alternativa para la sustitución de cultivos ilícitos. Sin embargo, consideran que debe existir un acompañamiento técnico a largo plazo (4 a 6 años) hasta que el cultivo sea productivo. Consideran que en el corto plazo se debe sembrar cultivos de ciclo corto y que permitan una subsistencia alimentaria. Yo tengo en mi correo, “siembre paz, siembre vida, siembre cacao” ¿por qué? Porque gracias al cultivo de cacao voy teniendo una calidad de vida mejor. Eso es lo que tiene el cultivo de cacao, va desplazando a los cultivos ilícitos hacia un cultivo lícito en el país. No es fácil muchas veces ingresar a una persona que está en un cultivo ilícito, de una vez entrar al cultivo de cacao porque cuando usted ingresa con el cacao, no empieza a recibir, usted empieza a recibir a partir del año que empieza a darle los primeros frutos. El éxito de un programa de cacao es enseñarles también que no es solamente sembrar cacao, sino sembrar algo para consumo plátano, yuca que pueda ser de subsistencia. Yo soy convencido que un programa exitoso para cacao cambiar cultivos ilícitos es decirle al productor: “vamos a entregarle un cultivo productivo”, pero no es entregarle las plantas, los fertilizantes no, es un acompañamiento USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 134 mínimo por 4 años. Porque muchos programas son por 1, 2 años, sino hasta que ya empieza su ciclo de producción para que él ya no tenga que pensar “me toca ir a sembrar cultivos ilícitos porque este todavía no me da”. Entonces es un acompañamiento integral, no solamente es cacao sino sembrar otros cultivos que le permita a él comercializar, pero siempre teniendo cacao, lo busca uno es eso. El cacao lo que busca es eso específicamente. Y nuestra apuesta en cacao es de una en cualquier parte del país. (Aliado comercial cacao, Mesetas) P5. H 28. Algunos funcionarios locales consideran que el programa PAC puede ser de gran utilidad para implementar los PDET que acaban de ser formulados. En ese sentido se manifiestan funcionarios de Mesetas (Meta): E: Perfecto, sí ya que hablamos como, claro, posconflicto, digamos, como este es uno de los municipios priorizados por el posconflicto, qué tanta vinculación cree usted que puede haber entre el programa y los PDET. Funcionario local: Muchísimo, yo pienso que. E: Lo PDET ya fueron formulados. Funcionario local: Sí, ya tenemos los PDET formulados, en este momento, ya tenemos inclusive las acciones ya definidas, solo PDET para el territorio y acciones a nivel regional también. Yo pensaría que es un compromiso muy grande, municipal y más que municipal tal vez nacional y de tipo cooperación para poder cumplir esos PDET que se aprobaron y que fueron hechos a través de las instituciones, y con el apoyo de las instituciones. (Secretario de Agricultura, Mesetas) P5. H 29. Opinión similar tienen en Tierralta (Córdoba): Funcionario local: Sí, estamos con los PNIS, con los PDET. E: Todo se enlaza. Funcionario local: Todos, sí. E: PNIS y ¿cuál es el otro? Funcionario local: Y los PEDT. PNIS es el Programa de Sustitución de cultivos y los PDET son los Planes de Desarrollo Territorial. E: Y se articulan con el programa de alianzas comerciales. Funcionario local: Exacto, así es, es que ninguno de esos programas puede entrar sin que tenga el enfoque a los PDET, o sea, todo tiene que ir coordinado. (Secretaria Desarrollo, Tierralta) P5. H 30. En igual sentido se manifiestan en Valdivia (Antioquia): 135 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Bueno, en este momento pues hay una nueva dirección del área de desarrollo rural, pero es un profesional también que viene de un municipio con unas condiciones muy similares al municipio de Valdivia, donde también debió haber trabajado todo el tema de los PDET y también se ejecutó una alianza comercial que fue acá en el municipio de Briceño, entonces creemos que va a ser un punto de apoyo bastante importante para que en futuras intervenciones de este tipo de programas, se lleven a feliz término. Estos PDET, fueron entregados a la administración actual en forma digital para que ellos lo tuvieran muy en cuenta, que en sí va a ser un insumo fundamental para que ellos elaboraran su plan de desarrollo y ahí estaban plasmadas, porque la metodología fue muy participativa, estaban plasmadas todas las peticiones de la comunidad. (Funcionario local, Valdivia) P5. H 31. El programa PAC ha permitido fortalecer las asociaciones de productores, especialmente en el tema de formulación de proyectos dejando capacidad instalada con los extensionistas. En el caso de Asocafé, en Santa Rosa del Sur, la asociación ha logrado formular proyectos para el fondo Colombia en paz, en el marco de la implementación de los PDET. Un extensionista relata: Sí, mi contrato es financiado por el programa [PAC], pero es directamente contratado por la organización. Entonces, yo, lo que ellos plasman en el contrato como ASOCAFE es lo que (inaudible, sigla 00:01:40) yo también debo regirme. Entonces, está el apoyo a la formulación de proyectos, para nuevos proyectos, en eso ya pues se ha cumplido, porque los proyectos presentados, los proyectos se han salido seleccionados uno con la Unión Europea y el otro fue con el Fondo Colombia en Paz con recursos PDET, qué es el que está a punto de arrancar. Y toda la parte de organización de documentación, base documental de la organización porque ellos no tenían nada de eso cuando yo llegué. Entonces, pues, se ha ido montando todo para que se tenga la base técnica y la base documental de todos los (inaudible 00:02:26) de la organización. (Extensionista Asocafé, Santa Rosa del Sur) P5. H 32. En los proyectos de infraestructura desarrollados por el Programa Alianzas Comerciales se ha dado coordinación con instituciones del Estado como el Invías y la ART en el marco de los PDET. También se han dado alianzas con privados como en el programa de “Obras por impuestos”. Un funcionario del equipo técnico de PAC en Cauca nos cuenta: Nosotros vamos del Crucero a Las Guacas [veredas], para hacer mayor área, además porque nuestros productores están allá arriba, pero de todas maneras todos se benefician de la vía, entonces tenemos una alianza con ellos. Las gobernaciones también, por ejemplo, ese que vamos a ver de Pradera, allí fue una alianza con la Gobernación del Valle. Y estamos también adelantando conversaciones con la gobernación del Cauca también. Pero también hemos hecho proyectos donde las contrapartidas son de Invías, el gobierno nacional el año pasado y antepasado ejecutó una seria de proyectos a través de Invías en los municipios PDET, donde el ejecutor era el comité de cafeteros, entonces también hacemos alianza con ellos para ejecutar proyectos. Entonces normalmente intervienen, las alcaldías, un ente de nivel nacional que puede ser la ART, o las gobernaciones, o el Invias, la comunidad y el PAC, pero también tenemos proyectos donde está el sector privado, por ejemplo este Corinto Toribío en un proyecto con la ART en una cosa que no se si has oído que se llama Obras por Impuestos donde los empresarios en vez de darle plata al estado ejecutan obras, allí ASOCAÑA, con una seria, con otras empresas que estamos trabajando. (Equipo técnico PAC, Miranda) USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 136 P5. H 33. Algunos funcionarios señalan que debería existir una mayor articulación entre PAC, los Gobiernos locales y la ART, para que los proyectos que se desarrollen se articulen en el marco de los PDET que fueron formulados. Un funcionario local de Cartagena del Chairá explica: Funcionario: Pues debería estarlo haciendo con la ART que es la que estamos… por ser municipio PDET es la que está más cercana a nosotros en este momento, más el resto de las entidades del gobierno. E: Y ¿qué otro programa de gobierno está digamos…? Funcionario local: ¿Actualmente en el municipio? E: …en el municipio. Funcionario local: Pues todo lo estamos centrando a través de ART y del programa de PDET… E: ¿El PNIS tiene también…? Funcionario local: Sí claro, pues todos ellos son… hacen parte del programa, pero nos centramos con el desarrollo de PDET, como quiera que se hizo un ejercicio con todas las comunidades. Se hizo ya una planeación comunitaria y supieron las… lo que la gente considera que necesita, se concilió eso y de ese ejercicio de conciliación ya sacamos un reducido de lo que podemos hacer con nuestros recursos y lo que tenemos que ir a buscar fuera. (Funcionario local, Cartagena del Chairá) La articulación con la ART también se ha dado para proyectos productivos un ejemplo se encuentra en el municipio de Pradera, Valle del Cauca, con cultivos de frutales, nos cuentan: E: ¿Qué articulación tienen con estos planes, el Plan de Desarrollo con Enfoque Territorial, el PDET, el Plan Integral de sustitución de cultivos ilícitos, ¿PNIS?, ¿La ART o la Unidad de víctimas? ¿Hay articulación con estos planes? Funcionario local: De hecho, aquí hubo una reunión donde estuvo el funcionario de la ART con el programa como tal. Desde los proyectos, el proyecto de mora y el tema de comercialización, y el tema de transformación de los productos frutícolas, están contemplados en los Planes de desarrollo con enfoque territorial que desde la misma comunidad se hizo el ejercicio y están priorizados para seguir apoyando este tipo de proyectos. (Funcionario local, Pradera) P5. H 34. Manifiestan que los funcionarios del Programa Alianzas Comerciales han estado interesados en conocer y articular su trabajo con los PDET, nos dicen: Pero con la ART se está coordinando, la funcionaria estuvo, tratando de mirar qué se puede hacer, se va a hacer un proyecto de infraestructura en un tramo de Lomitas-San Isidro, y allí hay la posibilidad de que el PAC haga una intervención en el tema de infraestructura, de la construcción de alcantarillas en ese tramo de vía. Entonces pienso yo que hay articulación, los funcionarios del PAC han estado muy interesados en conocer el tema del PDET, los planes de desarrollo con enfoque territorial y yo pensaría que ellos están como muy empapados, porque en el norte del Cauca, se maneja mucho más el tema de, tiene como más proyectos el PAC, entiendo, entonces hay más, pero aquí en Pradera también se está 137 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV haciendo y ellos conocen el plan de desarrollo con enfoque territorial y ya hay algunos proyectos que ya desde la misma visión de la comunidad a través de los PDET, ya están priorizados para el tema PDET. (Funcionario local, Pradera) HALLAZGOS INFORMACIÓN GEOGRÁFICA. P5. H 35. Relación geográfica cultivos ilícitos y PAC. Como se aprecia en los siguientes mapas, los cultivos ilícitos se encuentran concentrados mayoritariamente en la región del pacífico nariñense, la región del Catatumbo, y el Putumayo. Una presencia importante de cultivos ilícitos en el norte del Cauca, el Nudo de Paramillo, Bajo Cauca antioqueño, la serranía de San Lucas. En menor medida, pero en un proceso expansivo en la región de la Macarena, el río Ariari, el Guaviare y Caquetá. El Programa de Alianzas Comerciales inicia en el año 2017 localizando su actividad en Tumaco, norte del Cauca, Caquetá y sur del Meta, y bajo cauca antioqueño. Para el año 2018 se nota un considerable aumento de beneficiarios en todas las zonas, incluyendo nuevos municipios y e ingresando al sur de Bolívar. En 2019 consolida las regiones establecidas y aumenta el número de beneficiarios. Diagrama 67 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 138 Diagrama 68 Diagrama 69 Diagrama 70 139 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV P5. H 36. El grupo armado de “El clan del Golfo”, antes conocidos como “los Urabeños”, hace presencia en algunas zonas del Programa Alianzas Comerciales. Se ven afectados los municipios del sur de Córdoba y bajo cauca antioqueño, Tumaco y el sur del Meta. Como se aprecia en el siguiente mapa: P5. H 37. Las disidencias de las FARC afectan al Programa de Alianzas Comerciales en sus antiguas zonas de influencia, principalmente en el Caquetá, sur del Meta, Nariño y Cauca. Una menor presencia encontramos en la región del Nudo de Paramillo. P5. H 38. El grupo armado del ELN afecta al Programa Alianzas Comerciales principalmente en Nariño y Cauca, el sur de Bolívar, así como el bajo cauca antioqueño y el Nudo de Paramillo. Diagrama 71 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 140 P5. H 39. El grupo armado del EPL- Los Pelusos concentra sus acciones en la región del Catatumbo, ha incursionado en el norte del Cauca afectado municipios donde interviene el Programa de Alianzas Comerciales. Diagrama 72 Diagrama 73 141 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV P5. H 40. Otros actores armados minoritarios que hacen presencia en las regiones PAC son los “Libertadores del Nordeste Presente” (LDNP), “Los Caparrapos”, “La oficina de Envigado”, y “los Pachely”, quienes hacen presencia ocasional en municipios del bajo Cauca, dedicados principalmente a los cultivos ilícitos y la minería ilegal. Diagrama 74 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 142 Diagrama 75 Diagrama 76 Diagrama 77 Diagrama 78 143 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV PREGUNTA 6: ¿QUÉ EFECTOS SOCIALES Y ECONÓMICOS, DIFERENTES A LA CONECTIVIDAD CON LOS CENTROS DE MERCADO, SE PUEDEN OBSERVAR PRODUCTO DE LA MEJORA DE LAS VÍAS TERCIARIAS? CONCLUSIONES. P6. C1. Tiempos de desplazamiento: El cálculo de isócronas a partir del ejercicio de la cartografía social (P6. H1.) reporta una reducción en el tiempo de desplazamiento al centro de acopio más cercano (P6. H6). En 2019 el 39% de los productores reportaron menores tiempos de viaje gracias al mejoramiento de las vías. Casos para resaltar: Belén de los Andaquíes (P6. H3), Santa Rosa del Sur (P6. H4), Mesetas (P6. H5), Tumaco (P6. H2.), (Para consultar las isócronas de los 16 municipios ver P6. H16) P6. C2. Costos de Transporte: Para la cadena de cacao, la comunidad y los productores identifican menores valores en los pasajes de transporte de pasajeros y, en ocasiones, reducciones en los costos de flete de la carga (P6. H7). La impresión que tienen los agricultores es que los transportadores de carga no consideran que estas obras deban generar reducciones en los costos y manifiestan que estos menores costos sólo se verán cuando el cambio en las vías sea de una mayor envergadura. P6. C3. Calidad: En la cadena de lácteos, las comunidades manifiestan que los cambios generados son entre otros, la reducción de accidentes al mejorar curvas pronunciadas, el menor tiempo de tránsito, la disminución en el atascamiento de vehículos, la facilidad para el acceso de vehículos pequeños, el mejoramiento de la calidad de la leche y el cumplimiento en las entregas (P6. H8.). P6. C4. Oferta de Viajes y Transporte: Las mejoras realizadas han permitido el uso de las vías en cualquier momento del año, así como el ingreso de nuevas empresas transportistas, generando una mayor de frecuencia de viajes y una mayor variedad en el tipo de vehículos que ingresan a la región. De esta manera se aumenta la posibilidad de distribución y entrega de productos (P6. H9). P6. C5. Tipo de vehículo: Se han generado cambios en los tipos de vehículos, en muchos casos pasando de la tracción animal a motos, o incluso vehículos de gran tamaño como volquetas o tracto mulas. Con la mejora en las vías, se ha llegado a la plena utilización de los vehículos que antes no se lograba llenar por el temor a daños en la mercancía o en el vehículo (P6. H10) P6. C6. Turismo: La construcción y/o el mejoramiento en vías ha traído resultados indirectos positivos como, por ejemplo, en el turismo, ya que se logró el acceso de vehículos, así como de bicicletas, moto-taxis e, incluso, de caminantes. También se informa que gracias a las nuevas vías los habitantes de la región ahora reciben más visitas de los familiares de otras regiones del país (P6. H11). P6. C7. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 144 Empleos temporales: En términos generales se observa que la comunidad tuvo una participación muy reducida en la formulación de los proyectos, pero una participación mayoritaria en la ejecución de la obra, entre otras cosas, por la generación de ingresos en la región y el ahorro de gastos e impuestos (P6. H12.) Se crearon cargos de veeduría y fiscalía, aumentando conocimientos en temas contables, manejo de inventarios, compras, control del gasto y diligenciamiento de formatos. Sin embargo, se observa falta de planeación, conocimiento y método de trabajo. P6. C8. Mantenimiento de obras: Las comunidades quedaron comprometidas en el mantenimiento de las obras a través de diferentes mecanismos que cada localidad escoge. Algunas programan un día del mes y convocan “mingas” para realizar los trabajos de limpieza y reparación. Otras contratan “camineros” y llevan a cabo el mantenimiento de manera bimensual. En 2019 el 28% de los productores reportaron que el mejoramiento de las vías “motiva a la comunidad a continuar con los mantenimientos viales” (P6. H13). P6. C9. Vínculo entre comunidad y gobierno: El PAC y/o USAID son reconocidos en las regiones por haber apoyado con la estabilización de tramos de vías y en la construcción de alcantarillas. El PAC, aplicando la metodología participativa FIS, ha buscado el fortalecimiento de las organizaciones de base, generando credibilidad en el trabajo comunitario. Al mejorar las vías, se comienza a observar un vínculo entre la comunidad y las instituciones locales. La comunidad está viendo como entidades de salud y bienestar social hacen presencia en la zona, así como la policía y el ejército. Por lo anterior, ahora solicitan alguna representación por parte de la registraduría para la expedición y entrega de cédulas y registros civiles. (P6. H14) P6. C10. Seguridad: En la mayoría de las regiones en donde se construyeron obras se reporta tranquilidad, aunque los habitantes son conscientes de que las buenas vías no necesariamente garantizan seguridad. Algunos agricultores manifiestan que se encuentran en una transición de cultivos ilícitos a lícitos y las vías son parte fundamental del cambio; perciben que los grupos armados de estas regiones no se oponen a este cambio positivo para la comunidad. (P6. H15) HALLAZGOS. INTRODUCCIÓN La participación del programa PAC en el mejoramiento de vías terciarias busca fortalecer corredores económicos de actividades agrícolas y de esta manera poder sacar sus productos con mayor rapidez al mercado, con precios más competitivos por la disminución del transporte de insumos y los traslados de los sitios de producción, lo cual es permitirá reducir sus costos y, por lo tanto, aumentar sus retornos. Los proyectos en general se caracterizan por requerir una baja inversión financiera, una activa participación de la comunidad que se beneficia con la conectividad vial y la integración de las instituciones regionales que afianzan la responsabilidad entorno a la red vial. 145 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV El esquema de sostenibilidad de las vías terciarias busca garantizar el mantenimiento rutinario por parte de las comunidades, en cabeza de las organizaciones comunitarias de base, tales como las juntas comunales, asociaciones de productores y organizaciones dedicadas al mantenimiento vial. Adicionalmente, el PAC busca la integración de la alcaldía o la gobernación con la organización encargada de implementar la fase de sostenibilidad, para establecer un compromiso entre las partes para el suministro anual de maquinaria que realiza el trabajo en la vía. Las actividades por implementar para garantizar la sostenibilidad vial no requieren de maquinaria pesada y se realizarán con aporte de mano de obra no calificada por parte de la comunidad. Con recursos del programa se compran herramientas tales como carretillas, palas, picas y también equipos de señalización preventiva y elementos de seguridad industrial que, una vez finalizada la obra, el ejecutor entrega a la comunidad para su mantenimiento rutinario. Pregunta: ¿Qué efectos sociales y económicos, diferentes a la conectividad con los centros de mercado, pueden derivarse del mejoramiento de vías terciarias? A continuación, se describen los principales temas que se considerarán en la respuesta: • Efectos económicos o Tiempos de desplazamiento o Costos de transporte o Calidad o Frecuencia de viajes/transporte o Tipo y capacidad de los vehículos o Turismo • Efectos sociales o Capacitación y participación de la comunidad o Presencia y articulación institucional o Seguridad Efectos del mejoramiento de las vías terciarias Las siguientes intervenciones fueron reportadas en los municipios visitados en la presente evaluación: El siguiente cuadro muestra en detalle cada una de las intervenciones realizadas: USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 146 Para la presentación al socio implementador y al cliente, se destacaron las siguientes obras: • El mantenimiento vial se concentró en Tumaco-Nariño, donde se reportan 11.500m intervenidos y la construcción de un puente de madera. • En Puerto Rico-Caquetá se reportan 3.000m de obras de estabilización. • En San Vicente del Caguán-Caquetá se reportan 400 gaviones intervenidos. • En Santander de Quilichao-Cauca se intervino una batea. • En Valdivia-Antioquia se reporta un muro de contención intervenido. DURACIÓN DE LAS OBRAS Las obras fueron ejecutadas en periodos entre 3 y hasta 6 meses. Las condiciones climáticas tuvieron una gran incidencia en el cumplimento del tiempo y también algunas comunidades que originalmente se oponían a la obra tuvieron que ser sensibilizadas. En algunos casos y debido principalmente al compromiso y la participación de la comunidad, se logró hacer el proyecto en un tiempo menor al que inicialmente se había presupuestado. “nosotros estábamos construyendo las alcantarillas, como al mes comenzó a trabajar el peón caminero y terminamos esa alcantarilla y duró como otros 2 o 3 meses trabajando […]ya la comunidad descansó un poco en el tema de alcantarillas, cunetas, descole que se hizo en 12 kilómetros del caserío Reina Baja a la entrada allá de la Y La Reina.” (La Montañita, Entrevista Infraestructura) EFECTOS ECONÓMICOS • Tiempos de desplazamiento • Costos de transporte Alcantarillas (und.) Batea (und.) Estabilización (m) Gaviones (und.) Mantenimiento vial (m) Muro contensión (und.) Placa Huella (m) Punte de Madera (und.) Belen Andaquíes 397 Cartagena Chaira 12 El Tambo 4 100 Florida 2 300 La Montañita 7 278 Mesetas 4 235 Pradera 2 Puerto Rico 3 3.000 San Vicente del Caguan 3 400 Santa Rosa del Sur 150 Santander de Quilichao 9 1 Simití Tumaco 11.500 1 Valdivia 1 Valencia 4 Vista Hermosa 8 Total 58 1 3.000 400 11.500 1 1.460 1 Municipio Obras 147 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV • Calidad • Frecuencia de viajes/transporte • Tipo y capacidad de vehículo • Turismo De la encuesta de productores realizada por el socio implementador, se muestra a continuación el porcentaje de productores que reportan beneficios de las mejoras en las vías: CON LAS VÍAS DE ACCESO MEJORADAS O POR MEJORAR POR EL PROGRAMA, ¿QUÉ BENEFICIOS ADICIONALES HA TENIDO O TENDRÁ? 2019 1. Disminución de los tiempos de viaje 38,1 2. Disminución de los costos de transporte 33,6 3. Mayor oferta de medios de transporte 32,0 4. Los productos llegan frescos y menos estropeados a los mercados locales (mantener la calidad de los productos del campo al mercado) 29,5 5. Valorización del predio 45,9 6. Mejora/facilita el acceso a la finca 34,0 7. Motiva a hacer mayor inversión en su finca 29,0 8. Motiva a la comunidad a continuar con los mantenimientos viales 27,6 9. Motiva a los gobiernos locales a ampliar la red de mejoramiento vial 27,4 P6. H1. Tiempos de desplazamiento: El cálculo de isócronas a partir del ejercicio de la cartografía social reporta reducción en el tiempo de desplazamiento al centro de acopio más cercano. En 2019 39% de los productores, reportaron menores tiempos de viaje, gracias al mejoramiento de las vías. Encuesta a productores, Socio Implementador • Cartografía Social Es un instrumento de información cualitativa para la captura de información de las cadenas de valor: TABLA 59 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 148 • Producción (localización parcela) • Distribución (vías, medio de transporte, tiempos, precios, asociaciones, centros de acopio) • Transformación (centro transformación, empaque) • Comercialización (localización mercados) • Sistematización GIS Captura de la información consignada en los planos: • Digitalización elementos de las cadenas. • Registro de tiempos de desplazamiento. • Velocidad promedio del vehículo. • Costos de transporte • Lugares de intervención con mejoramiento vial. • Tipo de obra realizada. Cálculo de Isócronas • Se define como el desplazamiento realizado (origen – destino) en un intervalo de tiempo constante: • Se utiliza la velocidad promedio registrada de los vehículos antes de la obra en toda la red vial. • Se consideran los retrasos en tiempo antes de la obra. • Se calcula la isócrona después de la obra. • Productos • Mapas Muestran las isócronas después la obra, la zona donde se realizó el mejoramiento vial, la localización de los productores (origen) y lugares de destino (centros de acopio, centros de transformación y lugares de mercado) • Recorridos interactivos Se registra la evidencia del trabajo “in situ” realizado. (Fotografías y su localización geográfica) Metodología para el cálculo de isócronas • Convocatoria Grupo Focal 149 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV • Cartografía social • Cálculo de desplazamientos en la red vial (isócronas) • Obtención del tiempo de ahorro generado por la obra GRUPO FOCAL En el grupo focal se realizaron entrevistas a los productores de cada cadena y posteriormente se realizó un ejercicio de cartografía social para capturar información de la cadena productiva. CARTOGRAFÍA SOCIAL Con este Instrumento de captura de información cualitativa y usando planos previamente elaborados se le solicitó a cada grupo (por cadena) ubicar la siguiente información: • Producción (localización Parcela) • Distribución (vías, medio de transporte, tiempos desplazamiento, precios, asociaciones, centros de acopio) • Transformación (Centro transformación, empaque) • Comercialización (localización mercados) • METODOLOGÍA PARA EL CÁLCULO DE ISOCRONAS- diapositiva 15 P6. H2. Cartografía social de Tumaco Los grupos focales reportan una reducción de 30 minutos después del mejoramiento de la infraestructura vial en Tumaco. Nota: Diagrama 79 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 150 Zona 1: mayor zona de concentración de productores de cacao Zona 2: segunda mayor zona de concentración de productores de cacao El tiempo es reportado por los grupos focales en el ejercicio de cartografía social Tipo intervención: Mantenimiento vial ZONA ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) CAMBIO EN TIEMPO REPORTADO Zona 1 Piñas, Salado Centro de Transformación Cacao 22 90 60 -30 Zona 2 Las Varas Centro de Transformación Cacao 28 120 90 -30 P6. H3. Cartografía social en Belén de los Andaquíes Los grupos focales en Belén de los Andaquíes reportan una reducción entre 20 y 30 minutos después del mejoramiento de la infraestructura vial. Nota: TABLA 60 Diagrama 80 151 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Zona 1: Mayor zona de concentración de productores de cacao Zona 2: Segunda mayor zona de concentración de productores de caucho y cacao El tiempo es reportado por los grupos focales en el ejercicio de cartografía social. Tipo intervención: Placa huella 122 y 80 m respectivamente ZONA ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) CAMBIO EN TIEMPO Zona 1 La Pradera Centro de acopio Cacao 19 60 40 -20 Zona 2 Fragua delicias Centro de acopio Cacao 35 150 120 -30 P6. H4. CARTOGRAFÍA SOCIAL EN SANTA ROSA DEL SUR Los grupos focales en Santa Rosa del Sur reportan una reducción de 30 minutos después del mejoramiento de la infraestructura vial en la zona 2 Nota: Zona 1: Mayor zona de concentración de productores de café y cacao Zona 2: Segunda mayor zona de concentración de productores de café y cacao El tiempo es reportado por los grupos focales en el ejercicio de cartografía social. TABLA 61 Diagrama 81 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 152 Tipo intervención: Placa huella 15 y 35 m respectivamente ZONA ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) CAMBIO EN TIEMPO Zona 1 San Cristóbal Centro de Acopio Cacao 21 90 90 0 Zona 2 Peñas Blancas Centro de Acopio Cacao 25 120 90 -30 P6. H5. CARTOGRAFÍA SOCIAL EN MESETAS Los grupos focales en Mesetas reportan una reducción de 30 minutos después del mejoramiento de la infraestructura vial. Nota: Zona 1: Mayor zona de concentración de productores de café y cacao Zona 2: Segunda mayor zona de concentración de productores de café y cacao El tiempo es reportado por los grupos focales en el ejercicio de cartografía social TABLA 62 Diagrama 82 153 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Tipo intervención: Alcantarilla y placa huella respectivamente ZONA ORIGEN DESTINO DISTANCIA (KM) TIEMPO ANTES (MIN) TIEMPO DESPUÉS (MIN) CAMBIO EN TIEMPO Zona 1 Montebello Centro de acopio Cacao 15 120 90 -30 Zona 2 Buenavista Centro de acopio Cacao 18 120 90 -30 El ejercicio de cartografía social con participación de la comunidad se realizó en un total de 16 municipios. Para efectos de la presentación ante el socio implementador y el cliente, se seleccionaron 4 regiones. Los demás mapas aparecen al final de este documento a manera de anexo. P6. H6. Tiempos de desplazamiento Con respecto a los tiempos de desplazamiento la comunidad en general manifiesta una disminución, tal y como se puede observar en la siguiente cita: la placa huella, se hizo una placa huella muy extensa y, o sea, 235 metros y eso, aparte era más crítica donde ahí se demoraba más los carros o tocaba con mucho cuidado. En cambio, ahorita ya sube uno con más confianza, más tranquilidad. Entonces ya, siempre disminuyó en 10 minutos que en una trocha de estas es bastante tiempo.” (Mesetas, entrevista Infraestructura) El 32% de los reportes sobre disminución de tiempos, se mencionan en Meta. TABLA 63 Diagrama 83 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 154 “Uno de aquí a San Vicente se gastaba una hora, y en la moto se gasta hora y media, y en el carro dos horas, antes eran tres horas, tres horas y media, cuatro que se gastaba en el carro subiendo y bajando, entonces uno mira que realmente puede llegar más temprano porque encuentra la vía en mejor estado.” (San Vicente, entrevista Infraestructura) El 27% de los reportes sobre disminución de tiempos, se mencionan en Caquetá. Costos de transporte Con respecto a los costos de transporte también se observaron frecuentes comentarios acerca de la disminución en pasajes y en el movimiento de carga. Para la cadena de cacao, la comunidad y los productores identifican menores valores en los pasajes de transporte de pasajeros y en algunas ocasiones reducciones en los costos de flete de la carga. La impresión que tienen los agricultores es que los transportadores de carga no consideran que estas obras deban generar reducciones en los costos y manifiestan que estos menores costos solo se verán cuando el cambio en las vías sea de una mayor envergadura. “…ha mejorado un poquito, porque al menos la vía se deja andar con mayor frecuencia y con mayor seguridad. En cuanto a los costos y eso, no manejo esa frecuencia como tal, pero sí digo que el impacto ha sido positivo y ha sido directamente y en movilidad poder sacar sus insumos agropecuarios, que es el objetivo específico que le apunta el Programa de Alianzas Comerciales.” (Simití, Funcionario Local) P6. H7. En 2019 34% de los productores, frente al 20% en 2018 reportaron menores costos de transporte, gracias al mejoramiento de las vías. Encuesta a productores, Socio Implementador “El tema... al reducir tiempo, también reduce costos de transporte, eso es como lo que nos han favorecido a la zona del tema de infraestructura del programa.” (Puerto Rico, entrevista extensionista) El 41% de los reportes sobre disminución de costos, se mencionan en Caquetá. “Es una vía terciaria que mejoró ostensiblemente el tema de conectividad […]Y esos ahorros son muchos […] Por decirte un comparativo, mientras venir un productor antes acá le costaba 1200 pesos venir en su moto todos los días, hoy en día le cuesta 500 pesos.” (El Tambo, Entrevista Infraestructura) El 22% de los reportes sobre disminución de costos, se mencionan en Cauca. P6. H8. Calidad En la cadena de lácteos, las comunidades manifiestan que los cambios generados son entre otros, la reducción de accidentes al mejorar curvas pronunciadas, el menor tiempo de tránsito, la disminución en el atascamiento de vehículos, la facilidad para el acceso de vehículos pequeños, el mejoramiento de la calidad de la leche y el cumplimiento en las entregas. 155 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV “…mejora la productividad de las personas, cuando saquen su naranja, saquen sus plátanos, no salgan todos apachurrados y lleguen al mercado porque la carretera está mal, llegó acá apachurrado y tenga que dejar de vender sus productos y no los puedan vender de calidad, entonces es algo ligado a eso.” (S. Quilichao, entrevista infraestructura) “…con el tema de la leche he visto que esos tanques son de mucha ayuda porque ayudan a conservar la calidad de la leche y no varía el precio, tengo entendido que Nestlé o los que compran la leche, ellos hacen una prueba mensual, sí en esta prueba mensual digamos al inicio del 2 de febrero hacen la prueba de su leche van y le hacen y sí tiene digamos se le paso 2 horas que no paso el carro y perdió calidad, entonces le calculan a $900 pesos” (Puerto Rico, entrevista extensionista) P6. H9. Oferta de viajes/transporte: Las mejoras realizadas han permitido el uso de las vías durante las diferentes condiciones del año (invierno y verano), así como el ingreso de nuevas empresas transportistas, generando una mayor de frecuencia de viajes y una mayor variedad en el tipo de vehículos que ingresan a la región. De esta manera se aumenta la posibilidad de distribución y entrega de productos. “Si usted, se salía de ella ahí quedaba bloqueado, atascado y no podía salir. Entonces, ya las familias o los familiares nuestros ya tienen sus carritos pequeños que vienen de las ciudades y ya pueden venir a nuestras fincas a visitarnos y todo va bien.” (Mesetas, entrevista infraestructura) En 2019 32% de los productores, frente al 14% en 2018 reportaron mayor oferta de transporte, gracias al mejoramiento de las vías. Encuesta a productores, Socio Implementador P6. H10. Tipo de vehículo: Se han generado cambios en los tipos de vehículos, pasando en muchos casos de la tracción animal a motos, y también a la presencia de vehículos de gran tamaño, como volquetas o inclusive tracto mulas. Con la mejora en las vías, se ha llegado a la plena utilización de los vehículos que antes no se lograba llenar por el temor a daños en la mercancía o en el vehículo. Ahora, después de la intervención en las vías, los agricultores y transportistas están logrando un pleno uso de la capacidad de los vehículos, reduciendo el impacto del transporte en la estructura de costos de los productos. “…yo hasta me he beneficiado de esa infraestructura, porque para nosotros, nosotros tenemos beneficiarios en esa zona y para nosotros ha mejorado un 100% la movilidad para ir a hacer asistencia técnica, antes íbamos a pie o en mula, ahora podemos ir en las motos.” (Valdivia, Extensionista) USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 156 P6. H11. Efecto indirecto: Turismo La construcción y/o el mejoramiento en vías ha traído resultados positivos como por ejemplo en el turismo, ya que se logró el acceso de vehículos, así como de bicicletas, moto taxis e incluso de caminantes. También se informa que gracias a las nuevas vías los habitantes de la región ahora reciben más visitas de los familiares de otras regiones del país. “…nosotros anteriormente a veces se demoraba un carro hasta cuarenta, cincuenta minutos, de aquí del punto del Pedregal a Pradera se demoraba en llegar cuarenta, cincuenta minutos. Y ahora en veinte minutos.” (Pradera, entrevista infraestructura) Diagrama 84 157 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Infraestructura vial antes de intervención: “Era un sector por donde había una curva bastante forzada, bastante cerrada y era bien empinada este sector. Entonces, ahí tuvimos varios accidentes con los carros, que de pronto daba el bote por esa curva, se volcaron varios carros, unas volquetas que dejaban con material también ahí, se salieron y en el tiempo de invierno ahí se quedaban atascados los vehículos y no podrían subir, llovía un poquito y de una quedaban ahí los carros.” (Mesetas, entrevista infraestructura) Infraestructura vial después de intervención: “De acá en carro ahorita (…) se gastan 5 horas en carro y 4 horas más o menos en la moto. Entonces por ejemplo acá donde se hizo la placa huella también era una parte que no ..., cuando se ve el invierno no subían los camiones cargados. A veces se voltiaban, porque varias veces se voltiaron los camiones ahí y se enterraban mucho los carros. Entonces se hizo la placa huella.” (Mesetas, Grupo Focal) Ha mejorado para el que transporta. Su moto no se daña, su carro es más fiable, su seguridad” (El Tambo, entrevista infraestructura) Efectos sociales: • Participación de la comunidad • Presencia y articulación institucional • Seguridad P6. H12. Empleos temporales En términos generales se observa que la comunidad tuvo una participación muy menor en la formulación de los proyectos, pero sí resulta muy valiosa la vinculación en la ejecución de la obra, entre otras cosas, por la generación de ingresos en la región y el ahorro de gastos e impuestos. Adicionalmente se crearon Diagrama 85 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 158 cargos de veeduría y fiscalía aumentando conocimientos en temas contables, manejo de inventarios, compras, control del gasto y diligenciamiento de formatos. Sin embargo, se observa falta de planeación, conocimiento y método de trabajo. “…en la obra de todas maneras la comunidad tuvo participación porque la comunidad aquí es muy inquieta, nosotros estamos construyendo la alcantarilla apenas hacíamos las aletas y los muros, la comunidad ellos en veces nos mandaban uno o dos para que nos ayudaran a echar tierra que eso es mano de obra no calificada para que nos rindiera y a ver si nos quedaba más plata porque el obrero que estaba ganando el sueldo pues que ya lo poníamos a hacer el hueco en otra parte, entonces la comunidad nos ayudaba para que nos rindiera” (La Montañita, entrevista infraestructura) P6. H13. Mantenimiento de las obras Todas las comunidades quedaron comprometidas en el mantenimiento de las obras realizadas a través de diferentes mecanismos que cada localidad decide. Algunas programan un día del mes y convocan “mingas” para realizar los trabajos de limpieza y reparación. Otras contratan “camineros” y llevan a cabo el mantenimiento de manera bimensual. “…una vez finalizada la obra hay un término que usan que se llama camineros, que son las personas de la comunidad con la cual se le hace durante 6 meses más mantenimiento a la vía, entonces se le dio la oportunidad a la comunidad de ser la ejecutora de eso, tener la experiencia para poder seguir licitando en ese tipo de obras, y pues toda la mano de obra y el empleo y también los recursos fueron comprados acá en Santander, todos los materiales.” (S. Quilichao, Equipo Técnico PAC) En 2019 28% de los productores reportaron que el mejoramiento de las vías “Motiva a la comunidad a continuar con los mantenimientos viales”. Encuesta a productores, Socio Implementador P6. H14. Presencia y articulación institucional Articulación entre la comunidad, los gobiernos locales y la institucionalidad: El PAC y/o USAID son reconocidos en las regiones por haber apoyado con la estabilización de tramos de vías y en la construcción de alcantarillas principalmente. El PAC, aplicando la metodología Municipios Referencias sobre "participación de la comunidad en proyectos de infraestructura" Mesetas 11,45% Corinto-Miranda 10,73% San Vicente Del Caguán 8,13% La Montañita 6,96% Belén De Los Andaquíes 6,95% 159 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV participativa FIS, ha buscado el fortalecimiento de las organizaciones de base, generando credibilidad en el trabajo comunitario. Al mejorar las vías, se comienza a observar una articulación de la comunidad con los gobiernos locales y la institucionalidad. La comunidad está viendo como entidades de salud y bienestar social hacen presencia en la zona, así como la policía y el ejército. Por lo anterior, ahora solicitan alguna representación por parte de la registraduría para la expedición y entrega de cédulas y registros civiles. (H 13). “…el PAC interviene en donde ya ha habido otras intervenciones que se puedan ligar, como reforzar lo que ha hecho ART y otras entidades del orden gubernamental. Y esa obra se había intervenido, pero habían quedado muchas cosas pendientes. Entonces había quedado pendiente la placa huella, 4 alcantarillas, el tema de conectividad, otras cosas, y eso hizo pues que el PAC dijera, “hagámoslo y ejecutémoslo” (El Tambo, Ent. Infraestructura) “De lo que conozco en cuestión del arreglo de vías, eso nos ayuda a nosotros como instituciones y a los productores para poder movilizar su producto, y creo que eso ayuda a mejorar los procesos de comercialización. Aun, quedará faltando organizar parte de infraestructura, pero, pues esos municipios que, por los temas de conflicto, pues, tenían un abandono bastante grande […]. Habrá que seguir trabajando de la mano de Alianzas Comerciales, de la ADR, de todas las instituciones que lleguen y, nosotros como SENA, para, realmente, lograr la competitividad que merece y que debe de tener el municipio de Florida.” (Florida, Funcionario Local) En 2019 27% de los productores, frente al 26% en 2018 reportaron que el mejoramiento de las vías “Motiva a los gobiernos locales a ampliar la red de mejoramiento vial “. Encuesta a productores, Socio Implementador P6. H15. SEGURIDAD En general se informa que la mayoría de las regiones en donde se construyeron obras, hay tranquilidad, aunque los habitantes tienen la idea de que el tener buenas vías no necesariamente garantiza la seguridad. Sin embargo, otros agricultores manifiestan que se encuentran en una transición de cultivos ilícitos a lícitos y las vías son parte fundamental del cambio; perciben que los grupos armados de estas regiones no se oponen a este cambio positivo para la comunidad. “Este corredor (Monteblanco-La Siberia) fue dominado por el grupo de las FARC en años anteriores, ellos salieron de esta zona y se vio la necesidad de empezar a hacer inversión social allí. Ahí tenemos también un gran número de productores de cacao que fueron impactados por esta iniciativa desde lo productivo y obviamente desde este tema de apertura de vías, y lo que pudimos hacer también dentro del programa, fue bastante productivo para que hoy haya una vía en medianas condiciones donde la gente pueda reducir esas brechas hacia el desarrollo, hacia la troncal, hacia la ruta nacional 25 que es la que atraviesa nuestro Municipio.” (Valdivia, Funcionario Local) CONCLUSIONES La intervención del PAC en las vías terciarias de los municipios vinculados con los beneficiarios del proyecto, han tenido efectos sociales y económicos positivos que han facilitado la movilización de las USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 160 comunidades, reduciendo tiempos y accidentalidad, así como disminuyendo costos y generando una mayor disponibilidad y frecuencia de vehículos de diversas capacidades en las regiones. P6. H16. Cartografía Social 161 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV ANNEX 4: DETAILED METHODOLOGY QUANTITATIVE METHODOLOGY CLUSTER ANALYSIS For the selection of municipalities where the fieldwork was carried out, we used multivariate analysis techniques. Specifically, we use the cluster methodology to group the municipalities according to observable characteristics (population, level of rurality, among others). The first step to applying cluster analysis commences from the basic idea that the population is heterogeneous. Therefore, it is necessary to group it in some way (in this case, municipalities groups). For this, the analysis can start from primary information at the municipality level to examine the similarities between them. Once there are visible groups identified, it will be necessary to distinguish the variables that make possible these groups. The starting point for these analyses is the existence of Q different groups and P variables measured for these �𝑥𝑥1, 𝑥𝑥2, … , 𝑥𝑥𝑝𝑝�. The discriminant analysis objective is to obtain scores that allow identifying which group each one belongs to (𝑦𝑦1, 𝑦𝑦2, … , 𝑦𝑦𝑚𝑚) so that they are linear functions of �𝑥𝑥1, 𝑥𝑥2, … , 𝑥𝑥𝑝𝑝�. That is to say: � 𝑦𝑦1 = 𝑤𝑤11𝑥𝑥1 + 𝑤𝑤12𝑥𝑥2 + ⋯ + 𝑤𝑤1𝑝𝑝𝑤𝑤𝑝𝑝 + 𝑤𝑤10 … … … … … … … … … … … … … … … . . 𝑦𝑦𝑚𝑚 = 𝑤𝑤𝑚𝑚1𝑥𝑥1 + 𝑤𝑤𝑚𝑚2𝑥𝑥2 + ⋯ + 𝑤𝑤𝑚𝑚 𝑤𝑤𝑝𝑝 + 𝑤𝑤10 Where 𝑚𝑚 = 𝑚𝑚𝑚𝑚𝑚𝑚[𝑞𝑞 − 1, 𝑝𝑝]. These scores must differentiate the Q existing groups as much as possible. Also, the linear combinations of the P variables should maximize the variance among groups but minimize variance within each group. MODELS OF ASSOCIATED FACTORS To estimate the effects that the Activity has had on sales levels, productivity, and others, we build models of associated factors that connect variables characterization of different groups. These groups include the educational level of recipients belonging to ethnic groups, the age, and other variables that can influence the results of the Program in the beneficiaries. For this, it will be necessary to build models that relate the results of each beneficiary, or groups of beneficiaries with characteristics like those described above. These models are usually expressed by a multivariate linear regression as follows: 𝑌𝑌 = 𝛽𝛽0 + 𝛽𝛽1𝑊𝑊 + 𝛽𝛽2𝑋𝑋 + 𝛽𝛽3𝑍𝑍 + ⋯ + 𝜀𝜀 (1) In which 𝑌𝑌 represents the result of the beneficiaries in some dimension to evaluate. 𝑊𝑊 indicates the activity or set of activities that the Program performs with the producers. 𝑋𝑋 represents the beneficiary characteristics, such as age, educational level, sex, occupation, among others. 𝑍𝑍 stands for the municipality's characteristics in which the beneficiary (or group of beneficiaries) is located, such as population, percentage of the rural population, homicide rate, among other relevant variables that account for the context in which it is located. In this way, the advantage of this approach lies in the fact that it allows all the characteristics defined in the different analysis levels. That may affect (positively or negatively) the Program's results. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 162 Additionally, it is worthwhile to determine how these effects are distributed along the curve of income from product sales or the number of hectares planted, to name a couple. For this, acknowledging the existing diversity among PMA beneficiaries, the idea is to establish quantile regression models, considering that they present advantages: unlike the Minimum Square estimations, this method can overcome the examination of average behavior. It can estimate the distribution of the control variables' effects on specific fundamental characteristics of the beneficiaries. In general, the quantile estimate starts dividing the population into n parts (as many as quantiles are wanted to be analyzed) to find the relationship between the dependent and independent variables in each of the analyzed quantiles. Since it is a question of minimizing the absolute value of the deviations from the predicted value concerning the real value, any quantile can be formally defined as: min 𝛽𝛽(𝜃𝜃) � � 𝜃𝜃|𝑦𝑦𝑖𝑖 − 𝑥𝑥𝑖𝑖𝛽𝛽(𝜃𝜃)| + � (1 − 𝜃𝜃)|𝑦𝑦𝑖𝑖 − 𝑥𝑥𝑖𝑖𝛽𝛽(𝜃𝜃)| 𝑖𝑖:𝑦𝑦 𝑖𝑖:𝑦𝑦𝑖𝑖<𝑥𝑥𝑖𝑖𝛽𝛽(𝜃𝜃) 𝑖𝑖≥𝑥𝑥𝑖𝑖𝛽𝛽(𝜃𝜃) � The quantile estimation corrects several errors that appear in the estimate by Ordinary Minimum Squares. For example, this applies to the problem of heteroscedasticity. In this type of calculations, the quantile defines the data, which implies that the issue loses importance given that data does not differ much from the median within the quantile. Additionally, given the characteristics mentioned above, the quantile estimation gives rise to much more uniform distributions of data within each quantile, which guarantees a normal distribution of the estimation errors. RESULTS Before presenting the results, it is necessary to mention that in discussions between the evaluating and IP's technical teams, it was agreed that comparisons between the two information surveys (Farmers 2018 and 2019) could not be done. This conclusion was because the beneficiaries in this period changed considerably. Thus, the estimates were made independently. The results show no significant effects of the Program on the evaluated outcome variables (planted area, production, production per hectare, and sale price). This result can be explained by the fact that the Program's universe has been changing period after period, so it is not possible (with the information available) to rigorously monitor the beneficiaries over time to establish the effect of the Program. What is observed is that despite the changes that the Program has been making, there are positive relationships (although not statistically significant) between the training, demonstration farms, and other interventions carried out by the Program and the results of the beneficiaries. However, to establish this conclusion, it is necessary to isolate the producers who recently entered the Program from those who have been in the Program for several periods and thus determine the real effect that PMA. Although this evaluation could not reach this level of analysis, the Program has information that can be used to make this type of estimate. 163 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 86: Cacao -Sown Hectares USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 164 Exhibit 87: Cacao - Price per Kilograms 165 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 88: Cacao - Production in Kilograms USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 166 Exhibit 89: Cacao - Production by Area 167 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 90: Cacao - Sales in Kilograms USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 168 Exhibit 91: Cacao - Sales per Area 169 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 92: Coffee - Sown Hectares USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 170 Exhibit 93: Coffee - Price per Kilograms 171 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 94: Coffee - Production in Kilograms USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 172 Exhibit 95: Coffee - Production by Area 173 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 96: Coffee - Sales in Kilograms USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 174 Exhibit 97: Coffee - Sales per Area 175 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 98: Blackberry - Sown Hectares USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 176 Exhibit 99: Blackberries - Price per Kilogram 177 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 100: Blackberries - Production in Kilograms USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 178 Exhibit 101: Blackberries - Production by Area 179 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 102: Blackberries - Sales in Kilograms USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 180 Exhibit 103: Blackberries - Sales per Area 181 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV QUALITATIVE METHODOLOGY SUMMARY The qualitative component's objective was to collect precise information about how the different actors perceive, interpret, and evaluate the Commercial Alliances Program. We seek to describe the opinions, stories, and meanings that people located in various positions of the Program build around the main topics of interest of this evaluation: the changes generated in the production processes, good agricultural practices, and technical assistance, the component of infrastructure, associative processes, new possibilities for commercialization, as well as the impact they have on building a culture of peace and legality in the region. (see Qualitative methods PMA). For this purpose, different instruments were designed according to the type of actor; the team carried out a pilot test to measure its consistency and reliability. During the fieldwork, the following instruments were applied: participatory workshops with Program beneficiaries (18), social mapping exercises with infrastructure beneficiaries (18); Semi-structured interviews with demonstration plots (51), technical extension agents (31), producer associations (18), citizen oversight of infrastructure (18), commercial allies (34), local officials (32), the regional technical team (10); Ethnographic tours were also carried out in the demonstration and replica parcels, collection centers and infrastructure works. Taking into account the geographical distribution of the Program, 18 municipalities were selected, distributed according to the regions: North (5 municipalities), Meta (2 municipalities), Caquetá (5 municipalities), Cauca and Valle del Cauca (5 municipalities), Nariño (1 municipality). Interviews with business partners in many cases were conducted in capital cities where the companies are located. (For a detailed description of the fieldwork see: List of municipalities and instruments, PAC data collection, Social cartography guide, Discussion groups guide, Extensionists interview guide, Infrastructure interview guide, Demonstration plots interview guide, Commercial allies interview guide, Officials interview guide premises, Guide for territorial manager interview, Guide for ethnographic tours). All qualitative information was recorded -with prior informed consent-, literally transcribed, and then encoded with the help of the N Vivo software. The qualitative coding allowed to organize the qualitative data from the research questions; in total, 70 codes grouped into 12 structural categories were applied. Once the documents were coded, they were segmented from different levels of complexity, and matrices of concurrences and comparisons were made that allowed establishing common patterns and the level of saturation of the data. Once this process was completed, different reports and consultations were delivered to the thematic experts for analysis. The qualitative results were triangulated with quantitative data and geographic information. Finally, we proceeded collectively to build the matrix of findings, conclusions, and recommendations, which form the logical framework on which the final report is based. (For more information see: PAC codebook, HCR matrix). QUALITATIVE METHODS Qualitative methods include a broad spectrum of research approaches and techniques that have emerged in the social sciences: ethnography, in-depth interviews, focus groups, life stories, case studies, among others (Flick, 2018 a). Despite its diversity, probably the common denominator of these ways of approaching social reality is the quest for explanations from the people's perspective. Qualitative methods are characterized by investigating the meanings and shared codes that specific subjects use to USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 182 explain and make sense of their reality, the relationships they weave with each other, their practices, and the institutions that surround them (Geertz, 1980, 1984). Qualitative research methods are based on the experiences and interests of specific men and women, emphasizing a fundamental characteristic: the importance of context. Indeed, they start from the recognition that people and institutions come from a historical, social, and cultural backdrop. Qualitative methods have the following fundamental characteristics (Taylor and Bogdan, 1998): • Recognition of the importance of diversity (as a plurality of circumstances and perspectives); • Acceptance of the importance of context and human actions; • Respect for the participant (understanding his narration is essential); • Change in the researcher-participant relationship. In this sense, the answers that result from qualitative research are interpretations of reality. Its approach is hermeneutical since it starts from a socially constructed context to give reasons and respond to the causes of people's actions, symbols, and behaviors (Corbin and Strauss, 2012). Qualitative methods and their research tools, in short, allow a wide range of topics and research problems to be addressed. In the same way, according to the research questions, they allow generating flexible designs, which are susceptible to the information needs and the characteristics of the reality described. Likewise, it is possible to make use of combined or complementary qualitative tools and increase the scope to quantitative research, since qualitative data can explain quantitative results (Flick, 2018 b). A QUALITATIVE APPROACH TO THE PMA EVALUATION Taking into account the purpose of this evaluation and the previous explanations about the nature and characteristics of qualitative methods, the objective of the qualitative component of this proposal is to design a series of tools that allow the recollection of accurate information about the different ways’ stakeholders perceive, interpret and evaluate the PMA Activity. We are interested in describing the opinions, stories, and meanings that people in various capacities of the Activity offer about the main topics of interest in this evaluation: the changes generated in the production processes, good agricultural practices and technical assistance, associative systems, new commercialization possibilities, and the likelihood they have to create a culture of peace and legality in the region. To collect qualitative information, we propose three evaluation instruments: DISCUSSION GROUPS A discussion group consists of a meeting of a group of participants selected by researchers to use their personal experience to examine, debate, and reach agreements about an issue or social event that is relevant to the research. The participants are chosen deliberately, based on the relationship they have had with the Program, and looking to have a broad spectrum of perspectives and points of view (Krueguer, 1998 a and b). Participants can come from different productive associations and several value chains, looking to build a shared understanding of the Activity and the region, starting from personal knowledge and experience (see discussion groups guide). 183 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV SEMI-STRUCTURED INTERVIEWS The semi-structured interview is a method that attempts to understand the meaning of the central themes of the evaluation, seeks qualitative knowledge expressed in everyday language, and does not aim at quantification (it works with words and not with numbers). However, it focuses on answering investigation questions as accurately as possible but leaving room for new topics to emerge that were not initially suggested (Brinkmann and Kvale, 2018). This tool encourages participants to describe as accurately as possible their experience of the Activity from their point of view or capacity as public officials, association leaders, or beneficiaries of demonstrative plots, among others (see guides, semi￾structured interviews, local governments, businesses, demonstrative plots, infrastructure). ETHNOGRAPHIC TOURS Based on the information collected in the discussion groups and semi-structured interviews, the ethnographic tour is presented on a map of the region to integrate qualitative data with the methodology of spatial analysis (Coffey, 2018; Banks, 2018; Spradley, 1980). The tours must have a local guide to observe first-hand progress in road and infrastructure works, the operation of demonstrative plots, and some significant productive projects. During the tour, the local population answers ethnographic interviews, and semi-structured interviews are focused on one beneficiary of model farms. The routes allow for social cartography of an area. In total, there are three routes per municipality: two on the zone of influence of a productive value chain and one in the vicinity of infrastructure projects. At the end of the tours, the researchers will write a description of the case study, giving an account of the context, the process, and the lessons learned (see ethnographic tours guide). QUALITATIVE DATA ANALYSIS The methodological approach to analyze qualitative data, at first, involves proposing an initial proposal for categorization (Gribs, 2018). The idea is to compare the information, once available, to the original categories and the emerging categories (the latter arise from the empirical material or complement the initial groups). This iterative process, based on an inductive and deductive methodology, serves to Exhibit 104: Ethnographic Tours Flow Chart USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 184 organize a final set of categories. After that, the empirical material (interviews, discussion groups, and ethnographies) is coded with the help of software, in this case, N Live. The following steps are to saturate the categories, create the analytical lines, and interpret the results (Silver, 2014). The following is a succinct description of the main steps: ORGANIZATION OF ANALYSIS MATERIALS The first step consists of sorting the documents in groups according to the general characteristics of each one: type of instrument, gender, region, type of participant, and productive chain. Properly defining these variables will allow for more precise categorization data with different units to compare. CODING Qualitative coding is the process used to identify data segments or associate them with a general idea, such as a theme or a category. A code brings together and contains all sections of qualitative data. Similarly, the codes are linked together, forming a relationship system. Proper coding allows for efficient data management, makes information queries faster and more organized, and permits to find similarities, differences, patterns, or anomalies. It is worth noting that coding is a part of the analysis process, but it is not the analysis itself. In the same way, coding should accept new and emerging categories, that is, thematic groups or analysis variables not contemplated at first, but resulting from empirical results. Therefore, the groupings and emerging codes will complete the initial coding that occurs after the fieldwork (Saldaña, 2016). SEGMENTATION, CATEGORY SATURATION, AND DATA ANALYSIS Coding the results implies dividing the data into different levels of complexity. The data can be arranged into families of documents, or segmented by codes, relations between them, or in a concurrence matrix. The segmentation process is useful to rethink the information, establish comparisons, relationships, or find repeating patterns, which can lead to another level of coding. Category saturation, meanwhile, is the process used by researchers to determine the patterns among meanings, find familiar places, or discover the presence of oppositions in each of the categories or codes. When a group begins to exhibit patterns or repetitions, it used to form a secure basis to propose findings from the given result and establish a basis for the subsequent analysis. WRITING ANALYTICAL NOTES Researchers use the results of the fieldwork and the coding process to postulate different ideas recorded as notes. These observations can be about the context, or emerging questions, preliminary findings, hypotheses, or more structured ideas like conclusions about the data. The notes reflect the investigator's insights, different from the coding results. The analytical notes are helpful when writing the final report (Corbin and Strauss, 2012). CONCEPTUAL MAP OF RELATIONSHIPS The use of software for qualitative data analysis allows visualizing data, codes, notes, and links in the form of a concept map; this gives an overview of the research, its different components, and the logical connections they establish with each other. These concept maps are constructed throughout the entire research process, based precisely on the outcome of theoretical work, empirical data, and category saturation. 185 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV CODE BOOK 1. Valoración (transversales) a. Fortalezas b. Dificultades c. Recomendaciones 2. Cadenas (transversales) a. Café b. Cacao c. Lácteos d. Caucho e. Mora 3. Antecedentes a. Descripción PAC b. Ingreso PAC c. Motivación d. Compromisos adquiridos. 4. Proceso productivo a. Área sembrada b. Productividad c. Mejora calidad d. Buenas prácticas agropecuaria e. Empleos generados 5. Asistencia técnica a. Visitas PAC b. Días de campo PAC c. Temas tratados d. Metodología e. Conocimientos f. Experiencias 6. Asociatividad a. Origen asociación b. Apoyo producción c. Toma de decisiones d. Participación de jóvenes e. Participación mujeres 7. Logística a. Tipo de transporte b. Capacidad carga c. Costo transporte d. Empaques 8. Comercialización a. Venta asociación b. Venta empresa privada c. Mercado local d. Exportación e. Estándares de calidad f. Variación precio 9. Infraestructura a. Priorización obra b. Formulación proyecto c. Vía antes del proyecto d. Proceso construcción e. Participación comunidad f. Apoyo Gobierno Local g. Apoyo Gobierno Nacional h. Cambios en tiempo i. Cambios tipo transporte j. Cambios en costos k. Mantenimiento de la obra 10. Aliados comerciales a. Necesidades empresa b. Relación productores c. Relación asociaciones d. Relación PAC e. Estándares de calidad f. Destino final del producto g. Nuevos mercados 11. Gobierno local a. Contacto PAC b. Priorización obras PAC c. Articulación Gobierno Local d. Articulación Gobierno Nacional e. Articulación otras instituciones f. Sostenibilidad PAC 12. Cambios sociales a. Solidaridad b. Confianza institucional c. Cultura legalidad d. Construcción de paz e. Seguridad USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 186 EVALUATION MATRIX DETAILED EVALUATION DESIGN MATRIX The evaluation design matrix is the instrument that relates the objectives of the evaluation with the goals of the program, the intervention variables, the indicators used to monitor the Activity, and information sources. That is why the matrix uses value chains as sorting criteria, starting with issues (indicators) and building towards general topics (the evaluation's objectives). This matrix reflects the scope of the evaluation and puts objectives and developing efforts in perspective; this approach is critical to guarantee an assessment that responds to the initiatives of the Activity. Once the team defines the basic guidelines for the evaluation, the next step is to share them with managers and representatives to receive relevant feedback and guarantee that the value chain model correctly portrays the program. Finally, indicators that accurately respond to the evaluation's objectives result from the following process: 1. First, the research team conducts a review of indicators commonly used to measure each of the dimensions; 2. Second, the team analyzes if the information collected by the IP is useful to measure the indicators; 3. Thirdly, knowing that the available data collected by the IP is not enough to measure all indicators, the team decides which ones will use quantitative and qualitative information collected during the evaluation; 4. Finally, the team will analyze the importance of having in the evaluation indicators that cannot be measured with the available and harvested information. In other words, the team determines if the absence of these indicators hinders the possibility of fulfilling the proposed objectives. If that is the case, the team will design instruments to collect the necessary data. 187 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS How effective are the models used by the activity to provide "technical assistance" at the value chains supported by USAID? • Knowledge transfer actions; • Improveme nt of agricultural practices; • Use of several technologie s that contemplat e the implementa tion of “demonstra tive farms,” quadrilles", "training for trainers, 1. Increase domestic and export sales 1.1. Increase profile of Colombian products in international market. Productivit y; number of commercial alliances; participatio n in trade promotion - Increases in productivity - increase the number of commercial alliances - number of events for trade promotion Mixed -Type II - Type II -Type II PAC-02 Value of incremental net income of producers in promoted value chains (Custom) Producer IP survey Producer survey Interview commercializa tion companies: 5.1: 5.2; 5.4 TBD 1.2. Increase compliance with market standards. Incrementa l sales; number of certificatio ns; technicians certified - increase in value chain sales - increase the number of certifications - technicians certified Mixed -Type I -Type II -Type II EG.3.2-19 Value of smallholder incremental sales generated with USG assistance Producer IP survey Producer survey Commercializ ation discussion group: 5.4; 5.5 Interview demonstrative plots: 5.5 5.6 5.7 Interview local government: 2.7 TBD USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 188 TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS “mingas” and direct technical assistance; • The evaluation should also determine direct and indirect factors that have contributed to the effectivenes s of these models. 1.3. Expanded market linkages between producers and markets. Associativit y; number of commercial alliances - Linking new producers to formal associative forms - increase the number of commercial alliances Mixed -Type I -Type II EG.3.2-23 Value of targeted agricultural commodities exported with USG assistance Producer organizati ons Informati on collected by MEL Activity Associations survey Associativity discussion groups: 3.1;3.2;3.3;3.4 Interview companies related to associations: 3.1; 3.2; 3.3; 3.4 Interview local government: 2.8 TBD 2. Increase value chain production 2.1. Increase access to adoption of technologies and good agricultural practices. Productivit y; number of technicians certified; farmers trained; number of processors assisted - Increases in productivity - number of technicians certified Mixed -Type II - Type II EG.2.2-1 Number of firms receiving USG-funded technical assistance to export Alliance partners IP survey Producer survey Interview demonstrative plots: 3.1 3.2 3.3 3.4 3.5 3.6 Productive process discussion group: 2.5; 4.4 Good practices: 6.1;6.2; 6.3; 6.4 Interview local TBD 189 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS government: 2.6 2.2. Expanded access to quality extensions and other business development services. Employmen t; agricultural extensions - New direct and indirect jobs generated￾number of agricultural extensions visits Mixed -Type II- Type II EG.3-9 Number of full-time equivalent (FTE) jobs created with USG assistance IP survey Producer survey Productive process discussion groups:2.6Inte rview beneficiaries productive process:2.6 TBD USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 190 TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS 2.3. Increasing capacity of producer associations. Incomes; training of association s - Increase in net income of producers - number of associations trained Mixed -Type II - Type II PAC-02 Value of incremental net income of producers in promoted value chains (Custom) IP survey Producer survey Productive process discussion group: 2.1; 2.2; 2.3; 2.4 Interview demonstrative plots: 4,1 4,2 4,3 4,4 4,5 Productive process: 2.1; 2.2; 2.3; 2.4 TBD What are the elements and causes identified in the technical models used by the activity strengthening effectively the value chains supported by USAID? 1. Increase domestic and export sales 1.1. Increase profile of Colombian products in international market Technical assistance for marketing strengtheni ng - Number of producers who receive support for the of agricultural production. Mixed -Type III IP survey Producer survey Technical assistance discussion groups: 4.1; 4.2; 4.3; 4.4 Interview technical assistance demonstrative plots: 3,1; 3,2; 3,3; 3,4; 3,5 TBD - Number of activities to strengthen local capacities, like Mixed -Type I IP survey Producer survey TBD 191 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS fairs and trainings. Ethnographic tour: Demonstrative plots - Number of groups or people benefited by activities in local capacities strengthen. (demonstratio n plots) Mixed -Type III EG.2.2-1 Number of firms receiving USG-funded technical assistance to export IP survey Producer survey TBD - Number of visits to productive units and producers. Mixed -Type II EG.5.2-1 Number of firms receiving USG-funded technical assistance for improving business performance PMA program informati on Administrative records TBD USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 192 TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS - Number of new practices applied by beneficiary producers with demonstration plots. Mixed -Type III PAC-22 Number of recipients of knowledge management materials disseminated (Custom) Producers Informati on collected by MEL Activity Producer survey TBD - Information service for producers and associations. Quanti -Type I PAC-8 Number of firms receiving USG-funded technical assistance to comply with minimum national or international quality control standards (Custom) Producers organizati ons Informati on collected by MEL Activity producer and association survey TBD 193 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS - Producers served with agricultural extension service. Mixed -Type III Lead farmers Informati on collected by MEL Activity Producer survey TBD 1.2. Increase compliance with market standards Standard quality certificatio ns - Support services for product access to formal marketing channels with quality standards. Mixed -Type I EG.2.2-2 Number of firms receiving USG assistance that have obtained certification with (an) international quality control institution(s) in meeting minimum Alliance partners Informati on collected by MEL Activity Associations survey TBD - Number of shipments for agricultural export certificates. Quanti -Type I Producer organizati ons Financial service providers Informati on collected by MEL Activity Associations survey TBD USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 194 TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS - Certified product sales. Quanti -Type I product standards Informati on collected by MEL Activity Associations survey Commercializ ation discussion groups: 5.3 Commercializ ation interview demonstrative plots: 5.6; 5,7; 5,8; 5,9 Interview process companies: 4.3 TBD 1.3. Expanded market linkages between producers and markets Commerci al alliances and associativit y - Number of producers who received technical support for opening to new markets. Mixed -Type II Informati on collected by MEL Activity Producer survey TBD - Number of new trading partners. Quanti -Type I IP survey Associations survey TBD - Main market destinations to product sales. Quanti -Type III IP survey Associations survey Commercializ ation discussion group:5.4; 5.5Interview commercializa tion TBD - Number of commercial agreements established. Quanti -Type I Informati on collected by MEL Activity Associations survey TBD 195 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS - Number of associates by value chain. Mixed -Type II PMA program informati on Administrative records companies:5.1; 5.2; 5.3; 5.4 TBD - Number of new associations legally constituted. Quanti Type III EG.3.2-5 Number of public-private partnerships formed as a result of USG assistance Alliance partners Traders PMA program informati on Informati on collected by MEL Activity Administrative records Associations survey TBD - Number of dissolved associations. Mixed -Type II Importers Private sector partners PMA program informati on Informati on collected by MEL Activity Administrative records TBD - Percentage of associations that execute the business Quanti -Type II Informati on collected Associations survey TBD USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 196 TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS plan at the expected costs. by MEL Activity - Percentage of associations that have accounting records. Quanti -Type II Informati on collected by MEL Activity Associations survey TBD To what extent is the activity helping producers respond to market opportunities and improve the competitivenes s of rural producers? • Explain to what extent, if any, “associativit y” has been a factor for the success in the model. • Define how the model contributes to a higher 2. Increase value chain production 2.1. Increase access to adoption of technologies and good agricultural practices. Technology adoption and infrastructu re to producers -Number of suitable cold rooms. Quanti -Type II Informati on collected by MEL Activity Associations survey TBD -Number of suitable collection centers. Quanti -Type II Informati on collected by MEL Activity Associations survey TBD - Hectares with land adequacy districts. Quanti -Type II Informati on collected by MEL Activity Producer survey TBD 197 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS level of association. • Assess if the newfound access to improved technical assistance and the new technologie s have enhanced production indicators such as yield per hectare and product quality and have decreased production costs. • Evaluate - Type of storage infrastructure. Quanti - Type I PAC-13 Number of hectares of target crops supported by the program (custom) Producer Informati on collected by MEL Activity Associations survey TBD - Number of trainings in new technologies. Mixed -Type II Producer organizati ons Informati on collected by MEL Activity Associations survey TBD - Adequate agricultural logistics centers. Mixed -Type II Input suppliers Informati on collected by MEL Activity Associations survey TBD - Type of infrastructure for post￾harvest activities. Quanti -Type I Informati on collected by MEL Activity Associations survey TBD - Type of agricultural production infrastructure. Mixed -Type I Informati on collected Associations survey TBD USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 198 TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS other aspects of production, such as compliance of market standards and benefits obtained from membershi p to producer organizatio ns (technical services, prices, others). by MEL Activity - Type of infrastructure for the transformatio n of agricultural products Mixed -Type I Informati on collected by MEL Activity Associations survey TBD 2.2. Expanded access to quality extensions and other business development services. New business developme nt - Participations in national and international fairs. Quanti - Type I EG.3.2-1 Number of individuals who have received USG￾supported short-term agricultural sector productivity or food security training Informati on collected by MEL Activity Associations survey TBD 199 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS - Financial support service for agricultural productive projects. Quanti - Type I GNDR-2 Percentage of female participants in USG-assisted programs designed to increase access to productive economic resources (assets, credit, income or employment (F GNDR-2) Financial service providers PMA program informati on Administrative records TBD - Supported territorial institutions. Mixed -Type II PAC-16 Number of organizations with business performance strengthened (Custom) Private sector partners Informati on collected by MEL Activity Municipal survey TBD Informati on collected Associations survey Commercializ ation discussion TBD USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 200 TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS by MEL Activity group: 5.4; 5.5 Interview commercializa tion beneficiaries: 5.4; 5.5 How the performance of PMA reflected in sales, productivity, and exports of farmers supported is explained in comparison to the local, regional, and national context? • Review the sales and production information available for producers benefitted by the Program to determine how they compare to local, regional, and national data. • Determine if “associativit y” has been 2.3. Increasing capacity of producer associations. Production and sales - Percentage of production dedicated to self￾consumption. Mixed -Type I Producer IP survey Producer survey TBD PAC-05 Value of local sales generated by organizations supported with program assistance (Custom) Informati on collected by MEL Activity Producer survey TBD - Direct sales to primary production transformatio n link. Mixed -Type I PAC-11A Productivity of targeted value chain commodities as a result of USG assistance (Custom) Producer organizati ons Informati on collected by MEL Activity Producer survey TBD - Value added to the primary product before Mixed -Type I Processor s Informati on collected by MEL Activity Producer survey Productive process discussion groups: 2.5; 4.4 TBD 201 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS relevant to any verifiable success. commercializa tion. Good practices: 6.1;6.2; 6.3; 6.4 Interview - Producers government utilities ((current income - initial income)/initial income). Mixed -Type I IP survey Producer survey TBD Feedback and feedforward • Determine if the increase of technical knowledge by farmers, by training sessions and the adoption of new technologie s, has offered alternative Environment and area of influence Improved livelihoods -Population Quanti -Type III EG.3-1 Number of rural households benefiting directly from USG interventions Communi ty-based organizati ons Informati on built by MEL Activity Context Indicators TBD Equality and social mobility -Labor market indicators Quanti -Type III PAC-24-1 Percent of individuals from vulnerable populations participating in program Informati on built by MEL Activity Context Indicators TBD USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 202 TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS paths, away from illicit options. • In areas with security issues, examine how effective are indirect interventio ns. • The scope of this question should not slip to "rural security" related to illicit economies. It is an activities (Custom)- Youth Environme ntal sustainabilit y - Number of needs covered. Quanti -Type III PAC-24-2 Percent of individuals from vulnerable populations participating in program activities (Custom)- Afro￾Colombian Informati on built by MEL Activity Context Indicators TBD Security, justice and human rights -Illicit crop production Quanti -Type III PAC-24-3 Percent of individuals from vulnerable populations participating in program Informati on built by MEL Activity Context Indicators Local government institutional strengthening interview: 3.1; 3.2 Recommendat ions and TBD 203 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS economic question in nature, asking for market dynamics, and therefore, it should be answered in such a direction. activities (Custom)- Indigenous closeout: 4.1; 4.2; 4.3; 4.4; 4.5 Peace and lawfulness discussion group: 8.1; 8.2; 8.3; 8.4 Interview companies: 6,4; 6,5 -Numbers of attacks on social leaders Quanti -Type III Informati on built by MEL Activity Context Indicators TBD -Numbers violent confrontations Quanti -Type III Informati on built by MEL Activity Context Indicators TBD PMA program informati on Administrative records TBD Informati on collected by MEL Activity Municipal survey TBD USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 204 TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS Informati on collected by MEL Activity Associations survey TBD Informati on built by MEL Activity Context Indicators TBD What social impacts can be identified from tertiary roads improvement different than connectivity to market hubs? 3. Increased investment in rural infrastructure 3.1. Improved tertiary roads. Distance and time -Percentage decrease of travel time in the improved road. Mixed -Type III EG.3.1-1 Kilometers of roads improved or constructed as a result of USG assistance Informati on collected by MEL Activity Municipal survey TBD -Kilometers of roads improved or constructed as a result of assistance. Quanti -Type III PAC-17 Percentage decrease of travel time in the improved road (Custom) Informati on collected by MEL Activity Municipal survey TBD 205 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS - Change in the cost per kilo transported. Mixed -Type III Infrastructure and roads discussion group: 7.1; 7.2; 7.3 Local government interview: 2.9 Infrastructure and roads interview, ethnographic tour TBD - Benefits obtained by the improvement in access roads. Mixed -Type II Regional Infrastruct ure specialists Informati on collected by MEL Activity Municipal survey TBD 3.2. Local capacity to productive infrastructure. Infrastructu re capacity - Number of community infrastructure projects implemented. Mixed -Type II Watchdog s Informati on collected by MEL Activity Municipal survey TBD - Number of interregional agreements for the improvement of access roads. Quanti -Type I PAC-19 Number of organizations implementing road and/or productive infrastructure activities that have Municipali ties Informati on collected by MEL Activity Municipal survey Infrastructure and roads discussion group: 7.1; 7.5; 7.6; 7.7 Local government interview: 2.10 TBD USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 206 TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS improved their organizational and management capacity (Custom) Infrastructure and roads interview, ethnographic tour Recommendat ions and closeout companies’ interview: 6.3 - Number of alliances or agreements for the construction of roads. Mixed -Type I Communi ty based road maintenan ce organizati ons Informati on collected by MEL Activity Municipal survey TBD - Number of alliances or agreements for the maintenance, repair and rehabilitation of roads. Quanti -Type I Informati on collected by MEL Activity Municipal survey TBD 207 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV TABLE 64 EVALUATI ONS QUESTION S CRITERI A LINES OF INTERVENT ION COMPONE NTS VARIAB LES INDICAT ORS EVALUATI ON METH OD TYPE OF INDICAT OR BY GEOGRAP HIC DIVISION INDICAT ORS MELP AGENT S DATA SOUR CE QUANTITA TIVE INSTRUME NT QUALITATI VE INSTRUME NT LIMITATI ONS 3.3. Productive infrastructure to sustainable maintenance models. - Effects of logistics model implemented. Mixed -Type I TPF-(YI) Value of leveraged funds (Yl) Producer organizati ons Informati on collected by MEL Activity Associations survey TBD - Improvements in access to new markets. Mixed -Type I TPF-(Ym) Value of mobilized funds (Ym) TBD USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 208 GIS METHODOLOGY AND MAPS Esta metodología se enfoca en ofrecer información útil a las preguntas de la evaluación Producers to Market Alliances (PMA) que requieren análisis de información geográfica. De esta manera, se definieron cuatro momentos en los cuales el componente de Sistemas de Información geográfica (GIS) de la Actividad Monitoreo, Evaluación y aprendizaje (MEL) desarrolla las preguntas de la evaluación: Planteamiento de la evaluación, Procedimientos realizados con información secundaria, Procedimientos realizados con datos obtenidos en campo, y Resultados y conclusiones. Planteamiento de la evaluación Durante este momento, el componente GIS, revisa el Scope of Work (SoW) y las fuentes de información secundaria disponibles con el fin de identificar los métodos y niveles de análisis geográficos que se aplicará para dar respuesta a las hipótesis asociadas a cada pregunta. (Exhibit 105). Las fuentes de información consultadas son las siguientes: 1. Base de datos de cultivos de uso ilícito periodo 2016-2018. Sistema Integrado de Monitoreo de Cultivos Ilícitos (SIMCI) 2. Base de datos de estadísticas de criminalidad 2016-2019. Policía Nacional de Colombia (PONAL) 3. Base de datos de localización de beneficiarios de PMA a corte septiembre 30/2019. Sistema SIRIS- Fintrac. 4. Indicadores Monitor reportados por la actividad PMA a corte dic 2019. 5. Cartografía base de Colombia. IGAC,2019 6. Cartografía de presencia de grupos armados ilegales. INDEPAZ 2019. Exhibit 105: Esquema planteamiento de la evaluación 209 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV A cada una de las preguntas identificadas se les revisan temáticas, variables claves, fuentes de información, nivel de desagregación espacial y nivel de análisis geográfico, existentes en los municipios muestra definidos por la evaluación de la Actividad PMA. De esta manera, se definieron los siguientes análisis: La pregunta 4 se asoció el tema análisis de proximidad de los beneficiarios a vías terciarias, Análisis multitemporal de variables de seguridad, distribución de productores beneficiarios por edad de cultivos. La pregunta 5 se relaciona con la evolución de cultivos de uso ilícito en áreas con presencia de beneficiarios de la actividad, mapeo presencia de grupos armados. La pregunta 6 abordó el tema de georreferenciación de mejoras de infraestructura vial y cartografía social. PROCEDIMIENTOS REALIZADOS CON INFORMACIÓN SECUNDARIA Se presentan las preguntas seleccionadas para ser analizadas con métodos teóricos y la descripción de los procesamientos y análisis realizados. (Exhibit 106). Pregunta 4: How the performance of PMA reflected in sales, productivity, and exports of farmers supported are explained in comparison to the local, regional and national context? 7. Proximidad de los beneficiarios a vías terciarias: En este análisis se consideró un área de influencia (buffer) desde las vías terciarias, considerando un radio de 1 km. Con el fin de examinar cuáles beneficiarios del programa tienen acceso a estas vías. 8. Análisis multitemporal de variables de seguridad: Con este análisis se puede ver la evolución de las siguientes variables: homicidios, delitos por amenazas y eventos de terrorismo durante los años 2016 y 2019, y su cercanía a las zonas de producción de los beneficiarios del programa. 9. Distribución de productores beneficiarios por edad de cultivos: clasificación espacial de los beneficiarios de acuerdo con la edad de cultivos calculada a partir de la fecha de instalación del cultivo. Exhibit 106: Esquema procedimientos con información secundaria USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 210 10.Impacto de los cultivos de uso ilícito en la actividad: Se analizó la presencia de beneficiarios de PMA por km2 con respecto a la información de cultivos de uso ilícito durante el periodo de tiempo 2017 y 2018. Este análisis se validó mediante la aplicación del método de correlación espacial bivariado para determinar el impacto de los beneficiarios en áreas con presencia de cultivos de uso ilícito. Pregunta 5: How is the PMA intervention affected by the local and regional illicit economies at targeted municipalities? How does the PMA intervention affect those economies? 11. Permanencia de cultivos de uso ilícito: se determinó mediante el análisis de aparición de áreas de cultivo uso ilícito durante los años 2016 a 2018, de acuerdo a los siguientes criterios. (Tabla 65). TABLE 65: CRITERIOS ÁREAS DE APARICIÓN DE CULTIVOS DE USO ILÍCITO Áreas abandonadas Corresponden a aquellas áreas que alguna vez fueron afectadas por la presencia de cultivos de coca, pero que en el periodo 2016-2018 ya no existe. Áreas Permanentes: Corresponden a aquellas áreas que han tenido afectación continua durante el periodo 2016-2018 Áreas intermitentes corresponden a aquellas áreas en las que la afectación se da por lo menos en dos períodos consecutivos o no Áreas que aparecieron corresponden a aquellas áreas que han sido afectadas por primera vez en el año 2018 12.Mapeo de grupos armados ilegales: se muestra la presencia de grupos armados ilegales en 2018 en los municipios de la actividad PMA. PROCEDIMIENTOS REALIZADOS CON DATOS OBTENIDOS EN CAMPO Se presenta la pregunta seleccionada para ser analizada con métodos empíricos y la descripción de la recolección de información, procesamientos y análisis realizados. (Exhibit 107). 211 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Pregunta 6: What social impacts can be identified from tertiary roads improvement different than connectivity to market hubs? Se identificó que la pregunta 6 se puede sustentar con evidencia de información en campo para esto se definió la muestra, el instrumento de recolección, el almacenamiento y procesamiento de la información geográfica: 13. Selección de la muestra: se identificaron los municipios con mayor representatividad de cultivos mediante técnicas estadísticas, y su respectiva visualización geográfica. 14. Diseño de Instrumentos: El componente GIS seleccionó el instrumento de cartografía social para recolectar la información, su diseño está basado en un modelo conceptual para identificar el tipo de información a recolectar y mapas de cartografía básica (localización de parcelas, vías, áreas urbanas y rurales), para se consigne la información solicitada. 15. Trabajo de Campo: El instrumento de cartografía social se vinculó al grupo focal definido por la evaluación de la Actividad PMA. Su aplicación consistió en solicitar a cada grupo de beneficiarios (por cadena) ubicar la siguiente información: Producción (localización Parcela), Distribución (vías, medio de transporte, tiempos desplazamiento, precios, asociaciones, centros de acopio), Transformación (Centro transformación, empaque), Comercialización (localización mercados). 16. Sistematización de la Información: El componente GIS digitalizó y almacenó la información consignada en los mapas de cartografía social en una base de datos geográfica. 17. Procesamiento de Información Geográfica: Con la información de la base de datos geográfica se realizó un análisis de redes (isócronas) para cuantificar los tiempos que gastan los beneficiarios antes y después del mejoramiento vial, con lo cual se pudo medir la reducción en tiempos debido a la intervención en la infraestructura: Exhibit 107: Esquema procedimientos con datos de campo USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 212 - Con la cartografía social se registró la velocidad promedio de los vehículos y se calcula la isócrona antes de la obra en toda la red vial. - Se debe tener en cuenta los retrasos en tiempo antes de la obra en el tramo afectado, según lo comentado y registrado por los beneficiarios. - Se calcula la isócrona después de la obra, como resultado del aumento de velocidad en el tramo intervenido. - Se calculan los deltas de tiempo antes y después, para cuantificar el ahorro en tiempo generado por la intervención vial. Análisis y Presentación de Resultados En este momento se entrega los análisis de la información geográfica y productos cartográficos obtenidos para cada pregunta. (Exhibit 108). Pregunta 4: 18. Proximidad de los beneficiarios a vías terciarias: se pudo determinar cuáles beneficiarios del programa están por fuera del área de influencia de 1 km. desde la vía terciaria, demostrando las dificultades que tienen algunos beneficiarios de acceder a este tipo de vías y por ende se dificulta la comercialización de sus productos. Ver anexo 1. 19. Análisis multitemporal de variables de seguridad: se aprecia una disminución en los valores las variables de homicidios, amenazas y eventos de terrorismo durante el periodo 2016 y 2018, y un incremento para el año 2019. Ver anexo 2. 20. Distribución de productores beneficiarios por edad de cultivos: Los cultivos más recientes se encuentran en el departamento del Meta con aproximadamente entre 1 y 5 años, por su parte en los departamentos de Nariño y Cauca presentan edades entre 2 y 5 años, y hacia el norte, en los departamentos de Antioquia, Córdoba y Bolívar la edad de los cultivos varía desde 1 hasta 20 años. Ver anexo 3. Exhibit 108: Esquema análisis de resultados 213 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV 21. Impacto de los cultivos de uso ilícito en la actividad: el resultado muestra la evolución de los cultivos de uso ilícito para el periodo de tiempo 2016 a 2018, en donde se aprecia el retroceso de las áreas de cultivos de uso ilícito frente a las áreas de cultivos de los beneficiarios. Los valores estadísticos obtenidos demuestran la existencia de un patrón espacial disperso que refleja un tipo de proceso competitivo entre los cultivos ilícitos y los cultivos de los beneficiarios. (Exhibit 109). Ver anexo 4. Pregunta 5: 22. Permanencia de cultivos de uso ilícito: Los departamentos que siguen mostrando una alta presencia de cultivos ilícitos durante los años 2016 y 2018, y que se relacionan con los municipios de la actividad son: Córdoba, Bolívar, Antioquia, Cauca, Nariño y la zona oriental de Caquetá. También se encontró que hay zonas donde existen cultivos de beneficiarios con permanencia intermitente de cultivos de uso ilícito. Ver anexo 5. 23. Mapeo de grupos armados ilegales: Se aprecia la continua actividad de grupos armados ilegales en los municipios donde se localizan los beneficiarios de la actividad, en especial de las disidencias de las FARC. Ver anexo 6. Pregunta 6: 24. Mejoramiento vial: se identifica que las obras de mejoramiento vial generan disminución de tiempos de desplazamiento del productor hacia los centros de acopio y producción. Ver anexo 7. LISTADO DE MAPAS PROXIMIDAD DE LOS BENEFICIARIOS A VÍAS TERCIARIAS 25.Distancia en (Km.) de beneficiarios a vías de acceso terciarias PROXIMIDAD DE LOS BENEFICIARIOS A VÍAS TERCIARIAS 26.Eventos de amenazas por cada 100.000 habitantes 2016 Exhibit 109: Evolución cultivos de uso ilícito vs. áreas de cultivo beneficiarios USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 214 27.Eventos de amenazas por cada 100.000 habitantes 2019 28.Eventos de homicidios por cada 100.000 habitantes 2016 29.Eventos de homicidios por cada 100.000 habitantes 2019 30.Eventos de terrorismo por cada 100.000 habitantes 2016 31.Eventos de terrorismo por cada 100.000 habitantes 2019 DISTRIBUCIÓN DE PRODUCTORES BENEFICIARIOS POR EDAD DE CULTIVOS 32.Distribución de productores por edad de los cultivos ANÁLISIS MULTITEMPORAL DE VARIABLES DE SEGURIDAD 33.Análisis de cultivos de uso ilícito Alto Patía vs. Áreas beneficiarios PMA 2016 34.Análisis de cultivos de uso ilícito Alto Patía vs. Áreas beneficiarios PMA 2017 35.Análisis de cultivos de uso ilícito Alto Patía vs. Áreas beneficiarios PMA 2018 36.Análisis de cultivos de uso ilícito Sur de Córdoba, Bajo Cauca y Sur de Bolívar vs. Áreas beneficiarios PMA 2016 37.Análisis de cultivos de uso ilícito Sur de Córdoba, Bajo Cauca y Sur de Bolívar vs. Áreas beneficiarios PMA 2017 38.Análisis de cultivos de uso ilícito Sur de Córdoba, Bajo Cauca y Sur de Bolívar vs. Áreas beneficiarios PMA 2018 39.Análisis de cultivos de uso ilícito Cuenca del Caguán y Piedemonte Caqueteño vs. Áreas beneficiarios PMA 2016 40.Análisis de cultivos de uso ilícito Cuenca del Caguán y Piedemonte Caqueteño vs. Áreas beneficiarios PMA 2017 41.Análisis de cultivos de uso ilícito Cuenca del Caguán y Piedemonte Caqueteño vs. Áreas beneficiarios PMA 2018 42.Análisis de cultivos de uso ilícito Macarena y Guaviare vs. Áreas beneficiarios PMA 2016 43.Análisis de cultivos de uso ilícito Macarena y Guaviare vs. Áreas beneficiarios PMA 2017 44.Análisis de cultivos de uso ilícito Macarena y Guaviare vs. Áreas beneficiarios PMA 2018 45.Análisis de cultivos de uso ilícito Tumaco vs. Áreas beneficiarios PMA 2016 215 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV 46.Análisis de cultivos de uso ilícito Tumaco vs. Áreas beneficiarios PMA 2017 47.Análisis de cultivos de uso ilícito Tumaco vs. Áreas beneficiarios PMA 2018 PERMANENCIA DE CULTIVOS DE USO ILÍCITO 48.Permanencia de cultivos de uso ilícito en Colombia 2016 -2018 49.Permanencia de cultivos de uso ilícito en Sur de Córdoba, Bajo Cauca y Sur de Bolívar 2016 - 2018 50.Permanencia de cultivos de uso ilícito en Sur de Bolívar 2016 -2018 51.Permanencia de cultivos de uso ilícito en Cauca 2016 -2018 52.Permanencia de cultivos de uso ilícito en Tumaco 2016 -2018 53.Permanencia de cultivos de uso ilícito en Caquetá 2016 -2018 54.Permanencia de cultivos de uso ilícito en Meta 2016 -2018 MEJORAMIENTO VIAL 55.Belén de los Andaquíes Cadenas de Valor 56.Mesetas - Meta Cadenas de Valor 57.Cartagena del Chaira Cadenas de Valor 58.Corinto Cadenas de Valor 59.El Tambo Cadenas de Valor 60.Florida Cadenas de Valor 61.La Montañita Cadenas de Valor 62.Pradera Cadenas de Valor 63.Puerto Rico - Caquetá Cadenas de Valor 64.San Vicente del Caguán Cadenas de Valor 65.Santa Rosa del Sur Cadenas de Valor 66.Santander de Quilichao Cadenas de Valor USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 216 67.Simití Cadenas de Valor 68.Tierralta Cadenas de Valor 69.Tumaco Cadenas de Valor 70.Valdivia Cadenas de Valor 71.Valencia Cadenas de Valor 72.Vista Hermosa Cadenas de Valor 217 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 110: Distancia en (Km.) de beneficiarios a vías de acceso terciarias USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 218 Exhibit 111: Eventos de amenazas por cada 100.000 habitantes 2016 Exhibit 112: Eventos de amenazas por cada 100.000 habitantes 2019 219 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 113: Eventos de homicidios por cada 100.000 habitantes 2016 Exhibit 114: Eventos de homicidios por cada 100.000 habitantes 2019 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 220 Exhibit 115: Eventos de terrorismo por cada 100.000 habitantes 2016 Exhibit 116: Eventos de terrorismo por cada 100.000 habitantes 2019 221 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 117: Distribución de productores por edad de los cultivos (2017-2019) USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 222 Exhibit 118: Análisis coca Alto Patía vs. Áreas beneficiarios PMA (2016) Exhibit 119: Análisis coca Alto Patía vs. Áreas beneficiarios PMA (2017) 223 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 120: Análisis coca Alto Patía vs. Áreas beneficiarios PMA (2018) USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 224 Exhibit 122: Análisis coca Sur de Córdoba, Bajo Cauca y Sur de Bolívar vs. Áreas beneficiarios PMA (2017) Exhibit 121: Análisis coca Sur de Córdoba, Bajo Cauca y Sur de Bolívar vs. Áreas beneficiarios PMA (2016) 225 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 123: Análisis coca Sur de Córdoba, Bajo Cauca y Sur de Bolívar vs. Áreas beneficiarios PMA (2018) USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 226 Exhibit 124: Análisis Coca Cuenca del Caguán y Piedemonte Caqueteño vs. Áreas beneficiarios PMA (2016) Exhibit 125: Análisis Coca Cuenca del Caguán y Piedemonte Caqueteño vs. Áreas beneficiarios PMA (2017) 227 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 126: Análisis Coca Cuenca del Caguán y Piedemonte Caqueteño vs. Áreas beneficiarios PMA (2018) USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 228 Exhibit 127: Análisis Coca Macarena y Guaviare vs. Áreas beneficiarios PMA (2016) Exhibit 128: Análisis Coca Macarena y Guaviare vs. Áreas beneficiarios PMA (2017) 229 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 129: Análisis Coca Macarena y Guaviare vs. Áreas beneficiarios PMA (2018) USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 230 Exhibit 130: Análisis Coca Tumaco vs. Áreas beneficiarios PMA (2016) Exhibit 131: Análisis Coca Tumaco vs. Áreas beneficiarios PMA (2017) 231 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 132: Análisis Coca Tumaco vs. Áreas beneficiarios PMA (2018) USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 232 Exhibit 133: Permanencia cultivos de coca 2016 -2018 Exhibit 134: Permanencia cultivos de coca 2016 -2018 233 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 135: Permanencia cultivos de coca 2016 -2018 Exhibit 136: Permanencia cultivos de coca 2016 -2018 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 234 Exhibit 137: Permanencia cultivos de coca 2016 -2018 Exhibit 138: Permanencia cultivos de coca 2016 -2018 235 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 139: Permanencia cultivos de coca 2016 -2018 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 236 Exhibit 140: Belén de los Andaquíes Cadenas de Valor Exhibit 141: Mesetas - Meta Cadenas de Valor 237 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 142: Cartagena del Chaira Cadenas de Valor Exhibit 143: Corinto Cadenas de Valor USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 238 Exhibit 144: El Tambo Cadenas de Valor Exhibit 145: Florida Cadenas de Valor 239 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 146: La Montañita Cadenas de Valor Exhibit 147: Pradera Cadenas de Valor USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 240 Exhibit 148: Puerto Rico - Caquetá Cadenas de Valor Exhibit 149: San Vicente del Caguán Cadenas de Valor 241 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 150: Santa Rosa del Sur Cadenas de Valor Exhibit 151: Santander de Quilichao Cadenas de Valor USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 242 Exhibit 152: Simití Cadenas de Valor Exhibit 153: Tierralta Cadenas de Valor 243 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 154: Tumaco Cadenas de Valor Exhibit 155: Valdivia Cadenas de Valor USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 244 Exhibit 157: Vista Hermosa Cadenas de Valor Exhibit 156: Valencia Cadenas de Valor 245 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV ANNEX 5: GENDER PERSPECTIVE A GENDER PERSPECTIVE BASED ON QUANTITATIVE INFORMATION The purpose of this annex is to estimate some relevant variables and indicators that can offer a gender perspective for the PMA activity. To this end, we organized this section as follows: first, a brief description of quantitative data sources used for the analysis; then, the limitations of the information and the implications for interpreting the outcomes; finally, the results divided by the available sources. DATA SOURCES The quantitative data used in this evaluation came from two sources. The first one is the Producer’s Survey described in Footnote 5: as we said there, in 2019, the IP surveyed 1,084 farmers benefitted by PMA’s productive value chains: cacao, coffee, rubber, dairy, and fruits and vegetables (in this case, blackberry, coconut, and plantain). For the most part, the survey asked about production, sales, good practices, costs, technical assistance, demographic information, and geographical data. The second source is the Association’s Survey, described in Footnote 4 of this document. In the first quarter of 2020, we surveyed all the associations reported by the IP as involved with the program in the 18 municipalities chosen for fieldwork, and a sample of associations outside of PMA29. These criteria produced 55 associations, 48 in the first group, and 7 in the second. For the most part, the survey asked about sales, costs, inventories, good practices, technical assistance, and participation in PMA during 2018 and 2019. LIMITATIONS The sources described before have a lot of information and have been extremely useful during the data collection and analysis stages to produce findings, draw conclusions, and put together recommendations. However, they are limited when we observe, infer, or make conclusions about gender issues and analyze the current situation. The PMA activity designed the 2019 Producer’s Survey to focus on value chains, and results are representative only in this respect. That is why when we try to breakdown data to understand regional trends or create statistics for different populations, we obtain significant variation coefficients30 and cannot assume results as representative for a given group or make statistical inferences. Regarding the 2020 Association’s Survey, we have to say that we did not design this instrument to be a representative sample. It is a census of the associations working with the activity in the municipalities targeted by the evaluation. The sample sizes are small, and we do not have much statistical power to compare groups. With these limitations in mind, the indicators that we can show here may illustrate some outcomes, but the reader must interpret results understanding there is a margin of error. 29 It is worth mentioning that our survey used as a baseline, a study previously prepared by FEDESARROLLO. 30 From a technical perspective, the estimators used in the Producer’s Survey and mentioned in this annex are Horvitz–Thompson estimators. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 246 GENDER CONCLUSIONS FROM THE 2019 PRODUCER’S SURVEY Looking to produce statistics that show significant levels for variables relevant to gender issues, we used an approximation that begins with the household composition of farmers covered by the survey. In the “Home Description” section, interviewees answer who is the head of the household.31 Usually, this member of the house oversees major decisions, including expenditures and investments, productive plans, and roles, among other things. In this case, we will understand that a household has a woman in charge in those cases where interviewees declare that a woman makes the most critical decisions. Exhibit 158 shows the percentage of homes with a woman as head of household, disaggregated by productive value chains. Depending on the product, between 11 and 21% of agricultural units have a woman in charge. This metric may have some errors because, on some occasions, the person that makes decisions regarding home issues is not the same as the one that decides on agricultural or productive matters. Exhibit 159 and Exhibit 160 are useful to determine if productive and commercial decisions are made by a male or female head of household. Exhibit 159 shows information about the gender of the person making productive decisions. The results reveal an association between the gender of the head of the household and their involvement in decisions that have to do with sowing and harvesting. In the case of beneficiaries with male heads of households, men make almost 65% of decisions; when women head of households, in 25% of the cases, men make decisions about agricultural matters, and 52% of the time solely women are in charge of them. 31 In statistical terms, this is called Chief of House. Exhibit 158: Head of Households (%) SOURCE: PRODUCERS SURVEY 2019. 247 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV The strong associations between gender of the head of the house and decisions regarding the agricultural activity are not limited to farming. Exhibit 160 shows the outcome distribution concerning decision-making about commercial matters; this means sales of agricultural products. Results are like the previous case, and men tend to make decisions in homes with male heads, and women tend to do the same in homes with female heads, but with a higher input from male members. It is worth mentioning that the gap between male-exclusive decisions and female-exclusive decisions is smaller in this case. In the productive scenario, the difference was 12 points, and, in this case, it is only three. The other similarity in the two figures is that joint decisions are more common in households with a male head. Exhibit 159: Who makes Productive Decisions (%) SOURCE: PRODUCERS SURVEY 2019. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 248 Results illustrated in both figures validate the approach used to measure participation by gender in the decision-making process in households benefited by the PMA activity. The remaining analysis of the 2019 Producer’s Survey will refer to statistics using this category: gender of the head of the household. The following figures in this section will show no significant or systematic differences in some of the relevant indicators of the evaluation, even when we consider the limitations described before. Results regarding farmer’s characteristics, participation in the activity, and satisfaction with the assistance do not show a clear difference in patterns of households led by women or men. Exhibit 161 shows no significant differences in the size of plantations when women or men manage farming units. For cacao, coffee, and blackberry, we can see slightly bigger areas planted in farms with male heads; for rubber, this disparity is in the opposite direction. The lack of an apparent tendency supports the conclusion that states that there is no significant difference in the size of the plantation variable. Exhibit 160: Who makes Commercial Decisions? (%) SOURCE: PRODUCERS SURVEY 2019. 249 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Exhibit 162 show statistics regarding the interaction between the activity and farms with female and male decision-makers. Exhibit 162 exhibits the average number of days that PMA visited a unit since they became beneficiaries. Results show a marginal difference in favor of farms headed by males (close to half a day). Exhibit 163 is like the previous graph. In this case, instead of days, the exhibit shows the number of encounters (training sessions, visits, workshops, etc.) between the interviewees and PMA’s representatives since becoming beneficiaries. Here also, there is a marginal discrepancy between men and women: about one encounter less for females. It is important to mention again that limitations condition any analysis: for example, we found a significant dispersion for the number of contacts and visits, and we cannot state that these differences are systematic. We may explain observed gaps in this bivariate analysis by resorting to other variables, like the number of months with the activity, value chain, or location. Exhibit 161: Average Hectares Planted (%) SOURCE: PRODUCERS SURVEY 2019. Exhibit 162: How many PMA visits to your Farm? SOURCE: PRODUCERS SURVEY 2019. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 250 The importance of field visits to achieve the activity’s objectives was one of the main findings of the evaluation. In line with this result, Exhibit 164 illustrates the percentage of participation in PMA’s workshops, broken down by gender. Once again, there are no significant differences between male and female heads of households. Although Exhibit 164 showed no significant difference in participation between genders, we decided to explore if male and female heads of households used the training differently. In Exhibit 165, we can see that 10% more men said they used all the lessons learned and 10% more women said they used some of the information; the percentage of interviewees who said they did not use any of the teachings was similar. Exhibit 163: Number of Contacts with PMA SOURCE: PRODUCERS SURVEY 2019. Exhibit 164: Have you taken part in PMA’s Training Workshops? SOURCE: PRODUCERS SURVEY 2019. 251 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV Regarding the potential buyers for farmers to offer their products, results show great diversity, with no discernable pattern. Exhibit 166 illustrates how beneficiaries answered the question: who buys your products? The results are similar for males and females; in fact, the graph helps understand who the buyers are, regardless of gender. The primary buyer is the farmer’s association, then, in order, a broker, a social organization, and a local market. The Exhibit can also make a statement about how infrequent sales to exporters and processors are. Sales are a big part of the PMA activity, and Exhibit 166 corroborates the statement that results do not differ with the gender of the person in charge. Other issues probably have a more significant impact on the option selected when choosing a buyer. Another important finding is that beneficiaries are satisfied (or tend to be) with the services offered by the activity. Exhibit 167 and Exhibit 168 both ask the beneficiaries about their satisfaction with PMA and the changes they perceive. Exhibit 165: Have you applied in your farm ALL things learned in the demonstrative plot? SOURCE: PRODUCERS SURVEY 2019. Exhibit 166: Who is your buyer? SOURCE: PRODUCERS SURVEY 2019. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 252 The answers are positive in both cases. Any differences are minor; one that might deserve further research is that 20% of women answered that they are indifferent, somewhat unsatisfied, or unsatisfied with the activity, which is slightly higher from males (16%). But once again, the differences fail to be significant. GENDER CONCLUSIONS FROM THE 2020 ASSOCIATION’S SURVEY For the 2020 Association’s Survey, instead of looking at the head of the household as the tool or variable to identify gender issues, we looked at the organizations and their managers. Given that all the associations have formally appointed leaders (with the supporting paperwork), we used the organizational chart as a starting point to select variables. For the following analysis, when we say an association has female leadership, it means that the president, the vice-president, or both, are women. This decision holds up regardless of the interviewee’s gender Exhibit 167: How satisfied are you with PMA? SOURCE: PRODUCERS SURVEY 2019. Exhibit 168: Do you believe you have obtained results with PMA? SOURCE: PRODUCERS SURVEY 2019. 253 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV (in some cases, although the president was a woman, the survey was answered by a male member of the staff). This analysis centers on the 48 organizations involved with the activity at the time the information was collected. Exhibit 169 indicates that 42% of the participating associations have female leadership. This number is higher than the national average for private companies. If we look at Exhibit 170 and compare sales made by organizations, we find out that those led by females answered “yes” more often when asked if they had sales during 2019. Exhibit 171 focuses on those associations that declared having sales during 2019. In this case, female-led organizations also had a higher percentage of affirmative answers when asked if they sold premium products during the same year. Exhibit 169: Gender of President SOURCE: PRODUCERS SURVEY 2019. Exhibit 170: The Organization reported Sales in 2019? SOURCE: PRODUCERS SURVEY 2019. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 254 Regarding services offered to members of the associations (shown in Exhibit 172), male-led organizations appeared to have higher response rates, which differs from the sales situation. In general, it seems that organizations led by men had a more robust service portfolio. However, without more extensive information, we cannot determine the causes of this result or decide whether it is coincidental. Finally, Exhibit 173 shows that organizations with male leadership have a slightly higher percentage provision of technical services during the last year. Exhibit 171: Sold Premium Product in 2019? SOURCE: PRODUCERS SURVEY 2019. Exhibit 172 Services Received SOURCE: PRODUCERS SURVEY 2019. 255 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV A GENDER PERSPECTIVE BASED ON QUALITATIVE INFORMATION Regarding qualitative analysis, we carried out 204 interviews, divided into 185 semi-structured interviews and 18 focal groups. These exercises had the following composition: 49 women (24 percent), 153 men (74 percent), and six unidentified participants (2 percent, see Exhibit 174). When we analyze the distribution by gender and value chain, we can observe more women in cacao and coffee (29 percent and 28 percent, respectively) and fewer women in dairy and fruits (16 percent and 22 percent, see Exhibit 175, Exhibit 176, Exhibit 177, and Exhibit 178). Exhibit 173: During the last year, the Organization provided Technical Service? SOURCE: PRODUCERS SURVEY 2019. Exhibit 174: Interviewees by Gender SOURCE: PRODUCERS SURVEY 2019. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 256 When we analyze the interviews by stakeholder’s type, we find that most women we talked to were associated with demonstrative plots (33 percent) and commercial allies (27 percent). In the case of men, most of them were linked with demonstrative plots (24 percent) and trainers (21 percent, see Exhibit 179 and Exhibit 180). Finally, when we look at focal groups, we find that 66 percent were men, and 34 percent were women. These numbers show that the composition of focal groups had more female presence than semi￾structured interviews. Exhibit 175: Cacao SOURCE: PRODUCERS SURVEY 2019. Exhibit 176: Coffee SOURCE: PRODUCERS SURVEY 2019. Exhibit 177: Dairy SOURCE: PRODUCERS SURVEY 2019. Exhibit 178: Blackberry/Coconut/Plantain SOURCE: PRODUCERS SURVEY 2019. Exhibit 179: Women SOURCE: PRODUCERS SURVEY 2019. Exhibit 180: Men SOURCE: PRODUCERS SURVEY 2019. 257 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV ANNEX 6: INSTRUMENTS QUANTITATIVE SURVEY – ASSOCIATIONS USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 258 259 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 260 261 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 262 263 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 264 265 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 266 267 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 268 269 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 270 271 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 272 273 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 274 275 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 276 277 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 278 279 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 280 281 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 282 283 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 284 285 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 286 287 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV QUANTITATIVE SURVEY – FARMERS 2018 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 288 289 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 290 291 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 292 293 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 294 295 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 296 297 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 298 299 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 300 301 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 302 303 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 304 305 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 306 307 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 308 309 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 310 311 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 312 313 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 314 315 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 316 317 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 318 319 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 320 321 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 322 323 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 324 325 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 326 327 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 328 329 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 330 QUANTITATIVE SURVEY – CACAO FARMERS 2019 331 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 332 333 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 334 335 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 336 337 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 338 339 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 340 341 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 342 343 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 344 345 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 346 347 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV QUANTITATIVE SURVEY – COFFEE FARMERS 2019 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 348 349 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 350 351 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 352 353 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 354 355 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 356 357 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 358 359 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 360 361 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 362 363 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 364 QUANTITATIVE SURVEY – RUBBER FARMERS 2019 365 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 366 367 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 368 369 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 370 371 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 372 373 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 374 375 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 376 377 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 378 379 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 380 QUANTITATIVE SURVEY – DAIRY FARMERS 2019 381 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 382 383 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 384 385 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 386 387 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 388 389 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 390 391 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 392 393 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 394 395 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 396 397 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 398 399 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 400 QUANTITATIVE SURVEY – BLACKBERRY FARMERS 2019 401 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 402 403 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 404 405 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 406 407 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 408 409 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 410 411 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 412 413 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 414 415 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXE S USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 416 QUALITATIVE SURVEY – SOCIAL MAPPING 417 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXE S USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 418 419 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXE S USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 420 QUALITATIVE SURVEY – TECHNICAL TRAINERS 421 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXE S USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 422 QUALITATIVE SURVEY – INFRASTRUCTURE 423 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXE S USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 424 QUALITATIVE SURVEY – DEMONSTRATIVE PLOTS 425 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXE S USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 426 QUALITATIVE SURVEY – COMMERCIAL ALLIES 427 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXE S USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 428 QUALITATIVE SURVEY – PUBLIC SERVANTS 429 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXE S USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 430 QUALITATIVE SURVEY – REGIONAL MANAGER 431 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV QUALITATIVE SURVEY – DISCUSSION GROUPS USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 432 433 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXE S USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 434 QUALITATIVE SURVEY – ETHNOGRAPHIC TOURS 435 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXE S USAID.GOV USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 436 ANNEX 7: SOURCES OF INFORMATION • Primary Information o Quantitative Information Surveys o Qualitative Information Surveys o Geographic Information • Secondary Information o Producers’ Survey 2018 and 2019 o National Agricultural Census 2014 o Fedesarrollo Baseline 2017 o PMA Work Plans 2018, 2019, 2020 o PMA Annual Reports o PMA Quarterly Reports o PMA AMEL Indicator 437 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV ANNEX 8: STATEMENT OF WORK SCOPE OF WORK (SOW) FOR THE MID-TERM PERFORMANCE EVALUATION OF USAID/COLOMBIA PRODUCERS TO MARKET ALLIANCES (PMA) September 2019 PURPOSE OF THE EVALUATION The purpose of this mid-term performance evaluation is to assess various aspects of the Producers to Market Alliances (PMA) activity in order to provide useful insights to the current and future programing about the performance, effectiveness of model implemented, extent to which the development intervention affects and is affected by the regional context, and the grade in which current progress is outlining the basis for future sustainability. In accomplishing this purpose will provide information and analysis on to what extend the Activity is advancing in its objectives of “[t]o improve the competitiveness of rural producers to respond to new and expanding market opportunities” in the targeted value chains, and in what extent the Activity “helps close business deals between producers and buyers to increase incomes of small farmers, including women heads of household and members of minority ethnic groups in rural municipalities that are important to achieving a sustainable and inclusive peace in Colombia” The evaluation findings and conclusions must be constructed through evidence-based information, and formal analyses. This evaluation is not a performance auditory or intended to be a normative evaluation. The evaluation will support USAID/Colombia and PMA Implementing Partner (IP) accountability among stakeholders. The evaluation also must provide lessons learned and recommendations on specific dimension, including those on capacity or incentivizing changes in behaviors toward the Journey to Self-Reliance; recommendations will contribute to the stewardship of the PMA Activity, the achievement of its expected results, as well as providing input to help USAID/Colombia to make programming decisions. This evaluation is scheduled to start and develop near the PMA Activity midpoint period of performance. Its design and methodology must be replicable in order to be the point of departure for a future final performance evaluation, and in general, to comply with the methodological necessary rigor. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 438 SUMMARY INFORMATION OF THE ACTIVITY TABLE 66: ACTIVITY SNAPSHOT ACTIVITY NAME: PRODUCERS TO MARKET ALLIANCE (PMA). PERIOD OF PERFORMANCE: 03/03/2017 - 03/02/2022 Contract No: AID-514-C-17-00002 Contracting Mechanism: Cost-Plus-Fixed-Fee (CPFF) contract. Total Estimated Cost (TEC): $71,463,707 Contractor: FINTRAC Inc. Alignment to the USAID/Colombia Country Development Cooperation Strategy (CDCS) 2014-2018: DO 3: “Improved Conditions for Inclusive Rural Economic Growth”. Intermediate Results: IR 3.3: “More effective producer associations benefitting smallholder farmers.” Sub-Purpose 1: Improved Domestic and Export Market Integration. Sub-Purpose 2: Expanded Value Chain Production. Sub-Purpose 3: Improved Market Efficiency through Infrastructure. Sub-Purpose 4: Learning, Knowledge Management, and Communications. Contracting Officer Representative (COR): Omar López Alternate Contracting Officer Representative: Laura López (MEL Specialist) Monitoring and Evaluation Specialist: Gustavo Vargas (Office of ENV and RED) Evaluation Activity Manager (EAM): XXXXXXXXX 439 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV BACKGROUND While Colombia’s conflict-affected territories are home to resilient communities and entrepreneurial human capital, they have also long been plagued by illegal economies, violence, and underdevelopment. Precarious institutions and decades-long armed conflict have given rise to narco-trafficking, illegal mining, and trafficking in persons and arms, all which threaten stability, security and the country’s transition to peace. For this reason, USAID’s Producers to Market Alliance (PMA) seeks to strengthen legal economies in these areas by increasing the competitiveness of licit producers and the value of licit products. PMA improves the capacity of rural producers and enterprises to respond to the quality standards and volume requirements of licit markets in selected conflict-affected areas where success is key to advancing Colombia’s peace. PMA helps close business deals between producers and buyers to increase incomes and employment opportunities for smallholder farmers, including women heads of household and members of minority ethnic groups. PMA supports high-potential value chains, including cacao, specialty coffee, natural latex, tropical fruits and vegetables, and sustainable dairy production. PMA provides an important complement to Colombian efforts to reduce coca. PMA is implemented by the U.S. firm Fintrac and runs from March 2017 – March 2022. The program is implemented in priority municipalities in the departments of Antioquia, Bolívar, Caquetá, Cauca, Córdoba, Meta, Nariño, and Valle del Cauca. PMA facilitates the sale of products from agriculture and other value chains to new markets to maximize value for producers, firms, and consumers while rapidly expanding export and trade opportunities for rural producers and businesses. The program ensures the financial, technical, and managerial sustainability of targeted producers by linking them to buyers and providing assistance in closing business deals that meet market requirements. PMA increases market access and helps producers meet the requirements for product quality, timeliness, price, and adherence to sanitary and phytosanitary standards. As of May of 2019 PMA, producers’ sales have accumulated a value of 35 million, of a target of 130 million. PMA enables producers to better connect to agriculture and other export opportunities. Five value chains - cacao, specialty coffee, natural latex, tropical fruits and vegetables, and sustainable dairy production - have considerable untapped potential for growth. PMA supports new plantings, crop renewal, increased productivity, improved postharvest handling, and other value-adding efforts. PMA reduces production costs, increases yields, improves product quality, develops handling and delivery schedules for selling, and improves customer fulfillment. PMA establishes farm demonstration sites to showcase the implementation of good agricultural practices and improved technologies to smallholder producers. To date, PMA has provided training to more than 35,500 participants. The program also helps producers organize in order to offer better quality products at competitive market prices and greater volumes. PMA assists farmers exiting coca for licit crops. PMA leverages and mobilizes financial resources to facilitate public and private investments in rural infrastructure that support the key value chains and business deals targeted under this activity. The interventions address infrastructure bottlenecks to successfully execute the business deals USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 440 reached in PMA’s first two components. PMA develops assessments, feasibility and technical studies, environmental analyses, and engineering and architectural designs to support productive infrastructure investment. This includes support to help communities organize to repair and maintain tertiary roads and other infrastructure requirements throughout the program’s geography. DESCRIPTION OF THEORY OF CHANGE RESULTS FRAMEWORK Theory Of Change: Following the causal logic outlined in the results framework, PMA’s overarching theory of change is that by significantly scaling up value chain productivity and quality, integrating traditionally excluded rural smallholder farmers into profitable domestic and export markets, and addressing infrastructure bottlenecks affecting market efficiency, then rural producers will increase their competitiveness, increase their capacity to respond to dynamic market opportunities, gain entry into sophisticated, profitable, and licit value chains, and break the cycle of poverty and illicit economic activity. Colombia PMA will achieve this based on the following development hypotheses, which will be tested throughout the life-of-project through rigorous data collection and analysis: 1. Improved Domestic and Export Market Integration: By identifying and enhancing the inherent quality of Colombian products, assisting rural producers in meeting required market specifications and certifications and establishing linkages between producers and markets, targeted value chains will become more inclusive and integrated resulting in increased domestic and export sales along targeted value chains. 2. Expanded Value Chain Production: By expanding access to and adoption of improved technologies and good agricultural practices through on-farm demonstrations, identifying value-added opportunities, expanding access to quality extension, credit and other business development services, and increasing the capacity of producer associations, rural producers will increase on-farm productivity and quality resulting in increased volumes of marketable products. 3. Expanded Market Access through Infrastructure: By building the capacity of territorial institutions to effectively advocate for infrastructure investment, design and manage infrastructure projects and implement sustainable maintenance models, farmers will have improved access to markets leading to reduced time to market and reduced postharvest losses. 4. Crosscutting: By targeting traditionally underserved populations (including women, indigenous groups, and Afro-Colombians) in all project interventions, effectively generating and sharing knowledge across relevant industry stakeholders and building the capacity of producers, producer organizations, and territorial institutions, targeted value chains will develop in an inclusive and sustainable fashion. Framework: The results framework (see chart 2 below) guides PMA’s approach to implementing USAID’s vision for the Activity, is linked directly to USAID/Colombia Strategy at CDCS 2014- 441 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV 2018. It incorporates crosscutting responses to tasks, including a focus on our differentiated approach on gender inequity and vulnerable population. Exhibit 181: The PMA Results Framework CRITICAL ASSUMPTIONS, RISK AND OPPORTUNITIES The following are the underlying critical assumptions accompanying the results framework and acting as external potential factors influencing objectives: TABLE 67: CRITICAL ASSUMPTIONS, RISK AND OPPORTUNITIES RISK Volatile Commodity Prices Medium Sub-purpose 1 Improved smallholder competitiveness Macroeconomic Forces Low Sub-purposes 1, 2 & 3 Improved technologies, postharvest handling practices and market linkages Climatic Conditions High Sub-purposes 1, 2 & 3 Transfer of climate-smart technologies and infrastructure improvements and maintenance GOC Policies Medium Sub-purposes 1, 2 & 3 Investment diversification beyond GOC OPPORTUNITIES Peace and Security Medium Sub-purposes 2 & 3 Operate through alliances with local organizations and follow security plan USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 442 While all efforts will be made to mitigate the effects of anticipated risks caused by external factors, successful achievement of the results and objectives detailed in the results framework and accompanying theory of change is contingent, at least in part, on certain critical assumptions beyond the scope of PMA holding true. Critical assumptions and anticipated risks, and opportunities along with potential mitigation measures, include: 1. Commodity Prices: Volatile commodity prices, affected by global production, weather, oil prices, etc. can present a disincentive to agricultural production, marketing, and investment. PMA will improve smallholder competitiveness through increased on-farm productivity and decreased per unit costs of production, which will help offset the negative impacts of moderate price fluctuations. Furthermore, promotion of specialty products, differentiation, certifications, and diversification into other high-value commodities (i.e. vegetables) will further help insulate farmers from volatility. 2. Macroeconomic Indicators: Macroeconomic forces, such as inflation, impact exchange rates and interest rates which, in turn, can have a significant impact on the pricing of inputs, credit, and ultimately, the competitiveness of rural farmers. As with commodity prices, PMA will improve the productivity of Colombian farmers through adoption of improved technologies, improved postharvest handling practices, and market linkages to maintain competitiveness despite moderate fluctuations in macroeconomic conditions. 3. Climatic Conditions: Extreme weather conditions such as drought and flooding can significantly impact crop yields and market access. PMA will increase the resilience and adaptive capacity of rural farmers through the transfer of climate-smart technologies such as improved seed, proper land preparation, and improved irrigation and implement infrastructure improvements and maintenance plans to facilitate market access. 4. Peace and Security: The signing of the peace accord represented a major step in ending decades of conflict in rural Colombia. The honoring of the peace accord by the GOC, FARC, and other paramilitary groups is important to provide recurrent, uninterrupted assistance to farmers, and to incentivize both public and private investment. PMA will operate transparently through alliances with local organizations that have in-depth contextual knowledge and understanding and will follow strict protocols as outlined in the Security Plan. 5. GOC Policies: Transparent and effective GOC policies and procedures, particularly related to accessing government funds (i.e. royalties) and creating an enabling environment conducive to agricultural development are important for achieving PMA’s leverage targets. PMA will diversify investment streams beyond GOC funds to include civil society, private sector companies, and foreign investors, but GOC cooperation will be fundamental. 6. Complementary Projects: Part of the success of PMA will be dependent on the successful transition (from CELI activities) and concurrent implementation of complementary activities Complementary Projects Medium Sub-purposes 2 & 3 Leverage resources 443 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV and investments by USAID, GOC, and other international donors, particularly for activities related to access to credit, land tenure, good governance, and institutional strengthening. As highlighted in the AWP, PMA will coordinate closely with complementary projects to leverage resources and expertise and avoid duplicity. SUMMARY OF RELEVANT DOCUMENTS, INFORMATION AND DATA OF THE PMA ACTIVITY The following documents contain information regarding the design, implementation, reporting and performance monitoring of the PMA Activity. The Contractor must do a careful and detailed review and analysis of the documents, information, and data listed below as follows: Mandatory: • USAID/Colombia Country Development Cooperation Strategy (CDCS)[1]. • Section C and F of the Base Contract, and Contract Modifications on this section. • Program Annual Work plans. • Monitoring, Evaluation and Learning Plan (MEL Plan). • Performance monitoring data. • Gender analysis. As Needed: • Quarterly Performance Reports. • Quarterly or Annual Financial Reports. • Biweekly Highlights, press materials, and social media posts. • PMA Baseline Study by Fedesarrollo. The Activity utilizes the USAID/Colombia MONITOR System to report the progress under the indicators described in the Monitoring, Evaluation and Learning Plan (MEL Plan). For those indicators requiring a baseline, the PMA Activity had collected the baseline data. EVALUATION QUESTIONS Considering the PMA Activity purpose stated above, the Contractor will assess the performance of the Activity in its main goals and lines of work (Components and Sub-components) in order to answer the following questions. Questions will be reviewed and refined in collaboration with USAID prior to the finalization of the evaluation design. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 444 1. How effective are the models used by the Activity to provide technical assistance at the value chains supported by USAID? 2. In case the technical models used by the Activity to strengthen the value chains supported by USAID are found to be effective, what are the causes for those results? • For questions 1 and 2 the evaluation should take into account that the technical models used by the Activity include (i) knowledge transfer actions, (ii) improvement of agricultural practices and (iii) use of several technologies that contemplate the implementation of “demonstrative farms,” quadrilles, training for trainers, “mingas” and direct technical assistance. The evaluation should also determine direct and indirect factors that have contributed to the effectiveness of these models. 3. To what extent is the Activity helping producers respond to market opportunities and improve the competitiveness of rural producers? • For question 3, explain to what extent, if any, “associativity” has been a factor for the success in the model. Also, define how the model contributes to a higher level of association. Assess if the newfound access to improved technical assistance and new technologies has enhanced production indicators such as yield per hectare and product quality and has decreased production costs. Evaluate other aspects of production, such as compliance of market standards and benefits obtained from membership to producer organizations (technical services, prices, others). This analysis must be done using a quantitative and qualitative approach. 4. How the performance of PMA reflected in sales, productivity, and exports of farmers supported are explained in comparison to the local, regional and national context? • For question 4, review the sales and production information available for producers benefitted by the Program to determine how they compare to local, regional, and national data. Determine if “associativity” has been relevant to any verifiable success. 5. How is the PMA intervention affected by the local and regional illicit economies at targeted municipalities? How does the PMA intervention affect those economies? • Determine if the increase of technical knowledge by farmers, by training sessions and the adoption of new technologies, has offered alternative paths, away from illicit options. Also, in areas with security issues, examine how effective are indirect interventions. The scope of this question should not slip to "rural security" related with illicit economies. It is an economic question in nature asking for markets dynamics, and therefore, it should be answered in such direction. 6. What social and economic effects can be identified from tertiary roads improvement different than connectivity to market hubs? The evaluation must offer findings and analyses, allowing USAID/Colombia to make decisions for improving the sustainability of the initiatives supported. Those findings and analysis must consider or be disaggregated by municipal level as well as categorized by the different values chains supported by the Activity. Information and analysis should also be disaggregated by gender. According to the findings and conclusions obtained from the analyses to answers the questions, the evaluation must provide lessons learned, conclusions, recommendations, and best practices, for improving the achievement of PMA outcomes and results, including potential means for replication and scaling up its models. In general, the evaluation must offer a body of relevant 445 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV information for future mining programming of USAID/Colombia and sharing with its stakeholders. Its design and methodology must be replicable in order to be the point of departure for a future final performance evaluation EVALUATION DESIGN AND METHODOLOGY The MEL Activity, in collaboration with USAID, will develop the evaluation methods before fieldwork begins. USAID expects de MEL Activity to, at a minimum: 1. Combine and integrate techniques and tools for quantitative and qualitative analysis known as mixed methods. 2. Specify the quantitative and qualitative methodology, define key variables for measurement, and the implications in terms of the proposed information gathering and analysis to answer the Evaluation Questions. The proposed methodology should include strategies to assess and reflect likely differences between different PMA regions. 3. Specify how the proposed methods, sources and design will allow the MEL Activity to answer each of the evaluation questions. 4. Define the information gathering strategy that includes logistics, preparation, and approach, as well as the techniques and tools for mapping information. 5. For the quantitative analysis, the primary information gathering is done using a statistical sampling strategy, for which it must describe the sampling design in detail. This includes defining the target population, defining the reporting unit, calculating the sample size, applying the sampling technique (simple, stratified, conglomerates, etc.), defining estimators, the admissible precision and confidence, defining domains of interest (strata/income bracket, sex, age groups, etc.), sample selection technique, and other statistical concepts that describe both knowledge and expertise of the subject and clarity of the method to be applied. Quantitative information is expected to be representative at departmental level, for each of the 6 departments in which PMA operates. 6. Specify the primary and secondary sources of information that will be used. 7. Define a strategy for connecting and providing feedback between quantitative and qualitative information. 8. Meet and interview direct beneficiaries, Implementing Partner’s staff, relevant stakeholders, and GoC counterparts at appropriate levels; also interview selected USAID staff and if relevant, experts working in the justice sector. The MEL Activity will submit the preliminary evaluation design for review by USAID, and this task should be included in the evaluation time frame. The evaluation Contracting Officer’s Representative (COR) will approve the finalized evaluation design. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 446 The MEL Activity needs to develop an evaluation design matrix that will include a data analysis plan for each evaluation question (the following table is a suggested way for the MEL Activity to present the information, other design matrix designs are allowable). DELIVERABLES AND REPORTING REQUIREMENTS 1. Evaluation Work Plan The entire evaluation workplan should not exceed the 4 weeks, including the Final Presentation and the delivery of the Final report including USAID’s comments. The work plan will include: a. Draft schedule and logistical arrangements. b. Members of the evaluation team delineated by roles and responsibilities. c. Evaluation milestones. TABLE 68: EVALUATION DESIGN MATRIX QUESTIONS DATA SOURCES DATA COLLECTION METHODS DATA ANALYSIS METHODS Models for Value Chain strengthening: What has been the effectiveness of the models used by the Activity to strengthen the value chains of Cocoa, Coffee, Rubber, Dairy and Blackberry through knowledge transfer, improvement of agricultural practices and use of technologies? • Monitor • Gender Strategy • Activity work plans • Yearly and Quarterly reports • Activity newsletter • AMELP • Quantitative survey • Qualitative based data Qualitative and quantitative: • Document review • Key informant interviews (KII) • Focus Groups • Survey Mixed methods analysis General Performance To what extent the Activity has improved the competitiveness of producer organizations and rural producers to respond to new and expanding market opportunities? Specific Performance: How the performance of PMA reflected in sales, productivity, and exports of farmers supported are explained in comparison to the local, regional and national context? Feedback and feedforward: how the intervention of PMA affects and is affected by the local and regional illicit economies at targeted municipalities? Infrastructure interventions spill-over effects: Apart from improving connectivity with the market, what other indirect (social) impacts are emerging with road improvements? 447 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV d. Anticipated schedule of evaluation team data collection efforts. e. Locations and dates for piloting data collection efforts, if applicable. f. Proposed evaluation methodology including selection criteria for comparison groups, if applicable. g. Evaluation Report outline (if different from the attached template). h. The MEL Activity will update the evaluation work plan (the lists of interviewees, survey participants, the schedule) and submit the updated version to the COR for approval. 2. Evaluation Design The evaluation design will include: a. Detailed evaluation design matrix that links the Evaluation Questions from the SOW (in their finalized form) to data sources, methods, and the data analysis plan. b. Draft questionnaires and other data collection instruments or their main features. c. List of potential interviewees and sites to be visited and proposed selection criteria and/or sampling plan (must include sampling methodology and methods, including a justification of sample size and any applicable calculations). d. Limitations to the evaluation design. e. Dissemination plan (designed in collaboration with USAID). The design will become an annex to the evaluation report. The evaluation design will be shared with the implementing partner before being finalized. All dissemination plans should be developed with USAID and include information on audiences, activities, and deliverables, including any data visualizations, multimedia products, or events to help communicate evaluation findings, conclusions and recommendations. If applicable based on the Disclosure of Conflict of Interests Forms submitted with the awardee’s proposal, the evaluation design will include a conflict of interest mitigation plan. USAID offices and relevant stakeholders are asked to take up to 4 working days to review and consolidate 3. Mid-term Briefing and Interim Meetings The evaluation team is expected to hold a mid-term briefing with the COR, the MEL Specialist and PMA’s COR on the status of the evaluation, including potential challenges and emerging opportunities. The team will also provide the evaluation COR with periodic briefings and feedback USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 448 on the team’s findings, as agreed upon during the in-briefing. If desired or necessary, weekly briefings by phone can be arranged. 4. Preliminary Workshop for Recommendations Development The evaluation team is expected to hold a preliminary workshop to discuss the summary of findings and conclusions with USAID and to draft collaboratively any requested recommendations. Any presentations or workshops will be scheduled as agreed upon. 5. Final Presentation The evaluation team is expected to hold a final presentation to discuss the summary of findings and conclusions (and recommendations, if applicable) with USAID and FINTRAC. This presentation will be scheduled jointly. This presentation should be done after the final report has been presented and reviewed by USAID and the implementing partner. 6. Draft Evaluation Report The draft evaluation report should be consistent with the guidance provided in Section VIII, Final Report Format. The report will address each of the questions identified in the SOW and any other issues the team considers to have a bearing on the objectives of the evaluation. Any such issues can be included in the report only after consultation with USAID. The submission date for the draft evaluation report will be determined in the evaluation work plan. 7. Final Evaluation Report The evaluation team will be asked to take no more than [number]working days (or as agreed upon in the work plan) to respond to and incorporate final draft evaluation report and presentations comments from USAID. The evaluation team lead will then submit the final report to the COR. 8. Other Evaluation Deliverables 9. Submission of Dataset(s) to the Development Data Library Per USAID’s Open Data policy (see ADS 579, USAID Development Data) the contractor must also submit to the COR and the Development Data Library (DDL), at www.usaid.gov/data, in a machine-readable, non-proprietary format, a copy of any dataset created or obtained in performance of this award, if applicable. The dataset should be organized and documented for use by those not fully familiar with the intervention or evaluation. Please review ADS 579.3.2.2 Types of Data To Be Submitted to the DDL to determine applicability. 10. Submission of Final Evaluation Report to the Development Experience Clearinghouse Per USAID policy (ADS 201.3.5.18) the contractor must submit the evaluation final report and its summary or summaries to the Development Experience Clearinghouse(DEC) within three months of final approval by USAID. 449 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV EVALUATION TEAM COMPOSITION The contractor must provide information about evaluation team members, including their curricula vitae, and the responsibilities they will hold within the evaluation, and how each one contributes to the SoW. Submissions of writing samples or links to past evaluation reports and related deliverables composed by proposed team members are highly desirable. Per ADS 201.3.5.14, all team members must provide to USAID a signed statement attesting to a lack of conflict of interest or describing an existing conflict of interest relative to the project or activity being evaluated (i.e., a conflict of interest form). USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 450 TABLE 69: REQUIRED QUALIFICATIONS AND SKILLS TITLE MAIN RESPONSIBILITIES TEAM MEMBERS’ RELEVANT EXPERIENCE 1 Evaluation Director 1. Close coordination with MEL COP and USAID COR. 2. Responsible for staffing, project planning, and project financial management and reporting and staff direction and oversight. 3. Evaluation design, methods, management, and implementation. 4.Leadership in: i) Work plan drafting; ii) qualitative and quantitative data collection design and analysis; iii) data collection strategy; iv) final report drafting; v) final report presentation; vi) collaboration, learning and adapting (CLA) activities. 2 Deputy Project Manager 1. Evaluation design, methods, management, and implementation. 2. Close coordination with USAID and in leading the evaluation. 3. Leadership in: i) Work plan drafting; ii) qualitative and quantitative data collection design and analysis; iii) data collection strategy; iv) final report drafting; v) final report presentation. 1. Must have been a consultant for at least 2 USAID activities with at least 5 five year of experience. 2. Excellent English writing skills. 3. Proven experience in coordinating teams. 3 MEL-Evaluation specialist 1. Close coordination with MEL COP and USAID COR. 2. Support in evaluation management. 3. Analysis indicators and data from Monitor. 4.Leadership in: i) Work plan drafting; ii) qualitative and quantitative data collection design and analysis; iii) data collection strategy; iv) final report drafting; v) final report presentation; vi) collaboration, learning and adapting (CLA) activities. 4 Thematic Expert (1) 1. Leadership in designing and implementing the development for a mid-term performance evaluation (MT-PE) of an USAID Activity in Colombia. 2. Leadership in: i) Methodology for the work plan drafting; ii) design instruments and evaluation categories for data collection; iv) triangulation of sources of information; v) drafting of final 1. More than seven (7) years of experience in conducting evaluations with some degree of qualitative analysis. 2. Expert in Colombian rural development with emphasis in productive inclusion. 3. Relevant experience in evaluating USAID activities. 451 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV report; vi) Collaborating, Learning, and Adapting (CLA) activities for results. 4. Experience in USAID activities implementation is required. 5. Proven analytical thinking, accuracy, communication and interpersonal skills and teamwork. 6. Fully written and speaking English proficiency. 5 Quantitative methods expert/specialist (1) Leadership in: i) Quantitative methodology for the Work plan drafting including sampling methodology ; ii) design instruments for quantitative data collection; iv) triangulation of sources of information; v) drafting of quantitative final report; vi) Collaborating, Learning, and Adapting (CLA) activities for quantitative results 1. Graduate degree or higher in economics, statistics, social sciences and related fields. 2. A minimum of 7 -seven years of experience conducting quantitative research; 3. Proven experience in conducting high quality quantitative analysis. 4. Education in specific subject area, with country experience would be helpful. 5. Strong background and training in mixed methods research. 6. Experience and knowledge of data analysis and data management techniques. 7. Candidates with high proficiency in English is required. 6 Qualitative methods expert/specialist (1) Leadership in: i) Qualitative methodology for the Work plan drafting; ii) design instruments for qualitative data collection; iv) triangulation of sources of information; v) drafting of qualitative final report; vi) Collaborating, Learning, and Adapting (CLA) activities for qualitative results. 1. Graduate degree or higher in social sciences and related fields. 2. A minimum of 7 -seven years of experience conducting qualitative research; 3. Proven experience in conducting high quality qualitative analysis. 4. Education in specific subject area, with country experience would be helpful. 5. Strong background and training in mixed methods research. 6. Experience and knowledge of qualitative data analysis and qualitative data management techniques. 7. Candidates with high proficiency in English is required. 7 Logistics specialist/ Jorge Jaramillo Leadership in: i) Qualitative methodology to control and coordinate functions in the supply chain of the value chain; ii) analyze the distribution procedures of commercial operations; iv) triangulation of information sources for the analysis of transport costs v) drafting of the final report on the logistic processes of the evaluation; vi) Collaboration, learning and adaptation activities (CLA) to obtain quantitative results. 1. Postgraduate or higher degree in economics, statistics, social sciences and related fields. 2. A minimum of 3 years of experience in qualitative processes to control and coordinate functions in the supply chain of the value chain; USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 452 3. Proven experience in the analysis of the distribution procedures of commercial operations 4. Education in a specific thematic area, with experience in the country, would be useful. 5. Experience and knowledge of data analysis and data management techniques. 6. Candidates with high English proficiency are required 8 GIS specialist (1) Provide technical expertise on spatial data collection, map series creation, compilation of available geospatial data sets, spatial analysis, data visualization and interpreting aerial photos or satellite images in the level or requirement defined Eligible candidates have to hold a postgraduate degree in Geography, Geographic Information Systems, Spatial Analysis or Geospatial T ecologies. 1. Demonstrated GIS expertise, analytical thinking, accuracy, communication and interpersonal skills, teamwork, and computer proficiency. 2. Demonstrated GIS Experience with ArcGIS and QGIS software. 9 CLA specialist (1) Lead tasks, and efforts to ensure evaluation findings and recommendations are transparent, and disseminated and distributed to relevant stakeholder. 1. Graduate degree or higher in social sciences and related fields. 2. A minimum of 2 -two years of experience conducting qualitative research; 3. Proven experience in main responsibilities of the job. 4. Education in specific subject area, with country experience would be helpful. 10 Qualitative analyst (1) Qualitative data analysis: i) Refine the study coding system based on the methodological design; ii) Sort and classify information from the field work; iii) Encode and integrate interviews and other documents in the NVivo program; iv) Analysis qualitative data; v) qualitative data analysis using evaluation categories. 1. Graduate degree or higher in social sciences and related fields. 2. A minimum of 2 -two years of experience conducting qualitative research; 3. Proven experience in collecting qualitative data. 4. Education in specific subject area, with country experience would be helpful. 5. Background and training in mixed methods research. 6. Experience and knowledge of qualitative data analysis and qualitative data management techniques. 453 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV 11 Qualitative field data collection specialist (14)(firm) Qualitative data collection: i) Contact stake holders and prepare visits; ii) organize visits and schedule for field trips; iii) report drafting 1. Graduate degree or higher in social sciences and related fields. 2. A minimum of 2 -two years of experience conducting qualitative research; 3. Proven experience in collecting qualitative data. 4. Education in specific subject area, with country experience would be helpful. 5. Background and training in mixed methods research. 6. Experience and knowledge of qualitative data analysis and qualitative data management techniques. 12 Quantitative data collection (firm) Quantitative data collection. Proven experience in household level surveys in conflict areas of Colombia. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 454 EVALUATION SCHEDULE The MEL Activity will propose the evaluation schedule bearing into consideration that the complete schedule cannot exceed 24 weeks. The below evaluation schedule is illustrative for the MEL Activity to present the time frame and can be updated in collaboration with USAID prior to finalization of the work plan. TABLE 70: SUGGESTED SCHEDULE PHASE DESCRIPTION APPROXIMATE DURATION (TIMELINE) Phase 1: Planning Initial planning, design, and desk review. ~1 month (weeks 1-4) ▄▄▄▄ Phase 2: Fieldwork Fieldwork, data collection, compilation, tabulation, and analyses. ~3 months (weeks 5-16) ▄▄▄▄▄▄▄▄▄▄▄ Phase 3: Final Report Final report drafting, revisions, presentations, and approval. ~2 months (weeks 17-24) *includes 1-month contingency time. ▄▄▄▄▄▄▄▄ Total: Evaluation study achieved Maximum 6 months (24 weeks) ▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄▄ TABLE 71: ESTIMATED LOE IN DAYS BY ACTIVITY FOR A TEAM OF 773 NO. POSITION (# OF PEOPLE) SOW WORK PLAN DATA COLLECTION DRAFT FINAL REPORT TOTAL Month 1 Month 2 Month 3 Month 4 Month 5 Month 6 1 Evaluation director (1) 10 15 10 5 13 14 77 2 Deputy Director (1) 0 10 5 5 15 15 50 3 MEL-Evaluation specialist (1) 10 15 5 5 10 12 67 4 Thematic Expert (1) 0 20 5 5 21 20 71 5 Quantitative methods expert (1) 0 10 10 10 21 20 71 6 Qualitative methods expert (1) 0 15 10 10 20 20 75 7 Logistics specialist (1) 0 5 0 0 5 5 15 8 GIS specialist (1) 0 5 0 0 5 5 15 455 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV FINAL REPORT FORMAT 1. Abstract. 2. Executive Summary. 3. Evaluation Purpose. 4. Background on the Context and the Strategies/Projects/Activities being Evaluated. 5. Evaluation Questions. 6. Methodology. 7. Limitations to the Evaluation. 8. Findings, Conclusions, and (If Applicable) Recommendations. 9. Annexes. See the Evaluation Toolkitfor the How-To Note on Preparing Evaluation ReportsandADS 201mah, USAID Evaluation Report Requirements. An optional Evaluation Report Templateis also available in the Evaluation Toolkit. The evaluation abstract of no more than 250 words should describe what was evaluated, evaluation questions, methods, and key findings or conclusions. The executive summary should 9 CLA specialist (1) 0 5 0 0 5 5 15 10 Qualitative analyst (1) 0 0 10 10 10 10 40 11 Qualitative field collection specialist (2) 0 0 19 5 10 0 34 12 Qualitative field collection specialist (2) 0 0 19 5 10 0 34 13 Qualitative field collection specialist (2) 0 0 19 5 10 0 34 14 Qualitative field collection specialist (2) 0 0 19 5 10 0 34 15 Qualitative field collection specialist (2) 0 0 19 5 10 0 34 16 Qualitative field collection specialist (2) 0 0 19 5 10 0 34 17 Qualitative field collection specialist (2) 0 0 19 5 10 0 34 18 Quantitative data collection (firm) 0 0 19 10 10 0 39 Total 20 100 207 95 205 126 773 USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 456 be 2–5 pages and summarize the purpose, background of the project being evaluated, main evaluation questions, methods, findings, and conclusions (plus recommendations and lessons learned, if applicable). The evaluation methodology shall be explained in the report in detail. Limitations to the evaluation shall be disclosed in the report, with particular attention to the limitations associated with the evaluation methods (e.g., in sampling; data availability; measurement; analysis; any potential bias such as sampling/selection, measurement, interviewer, response, etc.) and their implications for conclusions drawn from the evaluation findings. Annexes to the report must include: • Evaluation SOW (updated, not the original, if there were any modifications). • Evaluation methods. • All data collection and analysis tools used in conducting the evaluation, such as questionnaires, checklists, and discussion guides. • All sources of information or data identified and listed. • Statements of difference regarding significant unresolved differences of opinion by funders, implementers, and/or members of the evaluation team, if applicable. • Signed disclosure of conflict of interest forms for all evaluation team members, either attesting to a lack of or describing existing conflicts of interest. • Summary information about evaluation team members, including qualifications, experience, and role on the team. CRITERIA TO ENSURE THE QUALITY OF THE EVALUATION REPORT Per ADS 201maa, Criteria to Ensure the Quality of the Evaluation Report, draft and final evaluation reports will be evaluated against the following criteria to ensure quality. • Evaluation reports should represent a thoughtful, well-researched, and well-organized effort to objectively evaluate the strategy, project, or activity. • Evaluation reports should be readily understood and should identify key points clearly, distinctly, and succinctly. • The Executive Summary should present a concise and accurate statement of the most critical elements of the report. • Evaluation reports should adequately address all evaluation questions included in the SOW, or the evaluation questions subsequently revised and documented in consultation and agreement with USAID. 457 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV • Evaluation methodology should be explained in detail and sources of information or data properly identified. • Limitations to the evaluation should be disclosed in the report, with particular attention to the limitations associated with the evaluation methodology (selection bias, recall bias, unobservable differences between comparator groups, etc.). • Evaluation findings should be presented as analyzed facts, evidence, and data and not based on anecdotes, hearsay, or simply the compilation of people’s opinions. • Conclusions should be specific, concise, and include an assessment of quality and strength of evidence to support them supported by strong quantitative and/or qualitative evidence. • If evaluation findings assess person-level outcomes or impact, they should also be separately assessed for both males and females. • If recommendations are included, they should be supported by a specific set of findings and should be action-oriented, practical, and specific. See ADS 201mah, USAID Evaluation Report Requirements and the Evaluation Report Checklist and Review Template from the Evaluation Toolkit for additional guidance. LIST OF ANNEXES Annex 1 - AMELP _______________________________________________________________________________ [1]https://www.usaid.gov/sites/default/files/documents/1862/USAID-Colombia-CDCS.pdf USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 458 ANNEX 9: SUMMARY INFORMATION ABOUT TEAM MEMBERS 459 | PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES USAID.GOV ANNEX 10: REFERENCES Banks, M. (2018) Using visual data in qualitative research. London: Sage Publications. Brinkmann, S. y Kvale, S. (2018). Doing interviews. London: Sage Publications. Coffey, A. (2018). Doing ethnography. London: Sage Publications. Corbin, J. y Strauss, A. (2012). Bases de la investigación cualitativa. Medellín: Editorial Universidad de Antioquia. Denzin, N. K. y Lincoln, Y. S. (2005). The SAGE Handbook of Qualitative Research. London: Sage. Emerson, R. M. (2011). Writing ethnographic fieldnotes. Chicago: University Press. Flick, U. (2018 a). Designing qualitative research. London: Sage. Flick, U. (2018 b). Doing triangulation and mixed methods. London: Sage. Gibbs, G. (2018) Analyzing qualitative data. Londres: Sage. Geertz, C. (1980). La interpretación de las culturas. Barcelona: Gedisa. Geertz, C. (1984). Conocimiento local. Barcelona: Paidós. Krueguer, R. (1998 a) Moderating focus group. Thousand Oaks: Sage Publications. Krueguer, R. (1998b) Involving community members in focus group. Thousand Oaks: Sage Publications. Saldaña, J. (2016) The coding manual for qualitative researchers. London: Sage Publications. Silver, C. (2007) Using Software in Qualitative Research: A Step-by-Step Guide. London: Sage Publications. Spradley, J (1980) Participant observation. Long Grove, IL: Waveland Publications. Taylor, J. y Bogdan, R. (1998). Introducción a los métodos cualitativos de investigación. Barcelona: Paidós. Chun, Yongwan, and Daniel A. Griffith. Spatial statistics and geostatistics: theory and applications for geographic information science and technology. Sage, 2013. Mitchell, Andy, and Michael Minami. The ESRI Guide to GIS analysis: geographic patterns & relationships. Vol. 1. ESRI, Inc., 1999. USAID.GOV PMA ACTIVITY FINAL EVALUATION REPORT ANNEXES | 460 Mitchel, Andy. "The ESRI Guide to GIS analysis, Volume 2: Spatial Measurements and statistics." ESRI Guide to GIS analysis (2005). Parker, Robert Nash, and Emily K. Asencio. GIS and spatial analysis for the social sciences: Coding, mapping, and modeling. Routledge, 2009. Schabenberger, Oliver, and Carol A. Gotway. Statistical methods for spatial data analysis. Chapman and Hall/CRC, 2017. Stillwell, John, and Graham Clarke, eds. Applied GIS and spatial analysis. Chichester: Wiley, 2004. Luhmann, N. (1998). Sistema Sociales: Lineamientos para una teoría general. Madrid: Anthropos. Capra, Fritjof y Luisi, Pier Luigi (2014). The Systems View of Life: A Unifying Vision. Cambridge University Press