Check word document and follow those steps
CODING ASSESSMENT - ML FOR PEACE PROJECT We are interested in enhancing our prediction models to correctly determine civic space changes for a country for a time-series data. Below is an example of our work and related tasks which you would need to finish. PROBLEM STATEMENT - You are given a dataset which consists of data scraped from public domain news sources. This crawled data is scraped from three sources - leconomiste.com, elheraldo.hn and reuters.com. Your objective is to write a machine learning model that is able to classify the events into categories. You have been provided with a sample train and test set. You would have to run your analysis on the test data(test.xlsx) and curate the results. REQUIREMENTS - In order to get the results, you might need to fulfill some tasks. The coding assessment needs to be fulfilled in Python. The tasks are divided in the following way: Task 1. You’ll notice that there are a series of problems with the articles given to you in the test data: either they lack the title, the text of the article, or the date of publication. Your first task consists of fixing these issues by scraping the urls when necessary and populating the empty fields. You can use any scraping library (Soup etc). Hint: For the text, you can take the only first paragraph of articles, wherever it is available. Task 2. In order to classify events, they need to be in English language. So, as a second step in the preparation of the data, you need to translate the title and the text of the articles from the language they are in to English(for both train and test). You can use any API to complete this task. We recommend using Facebook’s huggingface models. The models are designed on ISO-2 codes, find the appropriate model for your task provided here. Follow the hugging face installation instructions to install the libraries. Task 3. You would need to determine the civic-space event category for this data. Feel free to model what you think would be appropriate for this task. The categories are labeled into one of the three categories: ‘arrest’, ‘disaster’ and ‘violencelethal’. Hint: More importance would be given to the approach towards modeling with text data, compared to the accuracy of your model. Follow - up (Bonus): As you might have noticed already, stories include different actors. We are also interested in the 'who did xxx to whom' type of questions. For instance, we would like to know who is arrested and by whom for the' arrest' category. In addition to extracting named entities (e.g., person in this case), this requires classifying the actors using specific actor classification schemes such as Cameo. For instance, a working model should identify Angela Merkel as the person in the next sentence, but it should also classify her as a government actor: “German Chancellor Angela Merkel said on Wednesday that social distancing rules to contain the spread of the coronavirus would remain in place until at least May 3 but some shops could reopen next week.” Obviously, there is no actor in certain events (such as disasters). Please summarize how you would approach this actor extraction problem. Be specific about the steps you will follow, as well as any models you will use. You can demonstrate your logic by using the actual events provided to you. Task 4. Imagine you are using database storage for this exercise. How would you plan to store this data in unstructured format? Write code/pseudocode that would allow you to transform the output csv dataframe that you have already processed into a mongodb collection. RESULTS - You will need to submit a csv file with the predictions and your script(s). Please give a small write up which explains your methodology, including how the data was preprocessed, which algorithms you used to generate your model, and the rationale behind your choice to do so. If you have questions, please make an assumption and explain any assumptions that you have made in the write up. Sheet1 _iddate_publishlanguagetitlesource_domainmaintexturl 60458202f4df5bfeefeb9cce2021-03-02 14:12:44esSiguatepeque: Condenan a 77 años de cárcel a hombre que abusó de siete niñaselheraldo.hnCOMAYAGUA, HONDURAS.- A 77 años de cárcel fue condenado este martes un hombre que fue hallado culpable de cuatro delitos de violación especial, tres de otras agresiones sexuales y tenencia ilegal de arma de fuego. Jesús Vásquez Medina (57) fue detenido luego de una denuncia anónima donde se informó que el sujeto abusó sexualmente a siete menores de edad en una aldea de Siguatepeque, Comayagua, zona central de Honduras. VEA: Familia de Keyla Martínez: 'Todavía no hay ningún detenido, los tiene escondiditos' De inmediato elementos de la Policía Nacional se trasladaron al lugar y capturaron al sospechoso. En el lugar de la detención además recopilaron evidencias que derivaron en su condena. El expediente en poder del Ministerio Público (MP) detalla que las víctimas, que tenían entre cuatro y 11 años de edad, sufrían abusos desde hace unos tres años. La Fiscalía estableció que el hombre amenazaba a las niñas para que no lo denunciaran. ADEMÁS: Capturan a cabecilla de la pandilla 18 y a su pareja en Comayagüelahttps://www.elheraldo.hn/sucesos/1446659-466/violador-menores-honduras-condena-siguatepeque 6068182bfa2429648e92c7322021-03-13 17:21:43esFoto 2: Cae 'El Gordo' con más de 160 paquetes de droga en Villa Viejaelheraldo.hnJuan Adolfo Lopez Zavala (42), conocido criminalmente con el alias de 'El Inquieto' y miembro activo de la MS-13. (13/03/2021 - 05:34 PM) 2/3 2/3https://www.elheraldo.hn/sucesos/1449412-468/cae-el-gordo-160-paquetes-droga-capital-sucesos?mainImg=2 60690c5c18d9b6e2de98a7df2021-03-24 18:31:12esMéxico: Escapan hondureños que viajaban en avión con vacunas contra el covid-19elheraldo.hnCIUDAD DE MEXICO, MÉXICO.- El piloto y los seis pasajeros hondureños, de una aeronave privada en la que fueron incautados miles de envases con supuestas vacunas falsas contra el coronavirus, lograron escapar de un hotel al sur de México, tras ser identificados por las autoridades. La Fiscalía General anunció este miércoles que el piloto y los seis pasajeros que abordarían el avión privado, en el aeropuerto mexicano de Campeche, con destino a la ciudad hondureña de San Pedro Sula, lograron evadirse de la vigilancia luego de ser instalados en un hotel. LEA TAMBIÉN: Inauguran Laboratorio de Biología Molecular en Copán Las autoridades no informaron la identidad de los solicitados y sólo indicaron que se pidió al Instituto Nacional de Migración una alerta migratoria para los siete ocupantes. En medio de la polémica desatada tras el decomiso de las miles de supuestas dosis falsas de la vacuna rusa Sputnik V contra el coronavirus, la Fiscalía General dijo en un comunicado que aún no ha recibido la opinión pericial de la Comisión Federal para la Protección contra Riesgos Sanitarios (COFEPRIS) sobre cuál es el contenido de los 1,062 envases que fueron incautados el 17 de marzo, condición que es indispensable para judicializar el caso. El Ministerio Público descartó en el escrito haber recibido presión alguna de parte del gobierno federal o local por el proceso. La Administración General de Aduanas y el Ejército mexicano localizaron el 17 de marzo los frascos de la supuesta vacuna rusa en el fondo de una hielera que estaba en un avión privado que se disponía a trasladarse a San Pedro Sula. Las autoridades mexicanas consideraron las vacunas como reales y las resguardaron e iniciaron una investigación sobre el decomiso. Sin embargo, el Fondo Ruso de Inversión Directa, que es la instancia pública que se encarga del manejo de la Sputnik V en el extranjero, informó poco después que se trata de “un lote de falsas vacunas”. Las versiones de prensa señalan que la aeronave implicada en el caso fue rentada por una empresa hondureña Grupo Karim’s. Sin ofrecer mayores detalles sobre la adquisición de las supuestas vacunas rusas, el Grupo Karim’s reconoció la víspera por primera vez que estaba detrás del embarque y negó que buscara introducir de manera ilegal los medicamentos en Honduras. Al defender la importación de las vacunas, el Grupo Karim’s, que se dedica a la fabricación de ropa, descartó en un comunicado que las dosis estuviesen destinadas a la venta, tal como señalaron algunas versiones de prensa, e indicó que las vacunas serían aplicadas de manera gratuita a sus colaboradores y familiares. La organización no ofreció detalles sobre la cantidad de vacunas que compró, cómo las adquirió, ni la veracidad del medicamento. México empezó a utilizar la Sputnik V en febrero y ha recibido 400,000 dosis de la vacuna y espera la llegada de 500,000 más en los próximos días. Honduras aprobó el uso de emergencia de la vacuna rusa en febrero y este mes anunció la compra de más de 4 millones de dosis, pero ninguna ha llegado todavía al país centroamericano. VEA: Previo a Semana Santa: Colapsan Unidades de Cuidados Intensivos de hospitaleshttps://www.elheraldo.hn/inicio/1452217-465/hondurenos-trafico-vacuna-sputnik-covid-mexico?utm_source=feedburner&utm_medium=feed&utm_campaign=Feed%3A+elheraldo_titulares+%28El+Heraldo+-+Titulares%29 6068182efa2429648e92c73c2021-03-11 13:52:50esCapturan a hombre prófugo de la justica desde hace 26 añoselheraldo.hnhttps://www.elheraldo.hn/sucesos/1448937-466/capturan-profugo-justicia-cedros-honduras 6068dea418d9b6e2de97ba8a2021-03-18 10:58:27es¿Qué se sabe sobre las 5,775 dosis falsas de Sputnik V decomisadas en México?elheraldo.hnhttps://www.elheraldo.hn/inicio/1450729-468/vacunas-sputnik-v-decomiso-mexico 60693fa302cb24d00198e8792021-03-10 17:48:23esCapturan a hombre que intentó matar a su padre en Cedroselheraldo.hnhttps://www.elheraldo.hn/inicio/1448745-465/hombre-intento-matar-papa-honduras-cedros?utm_source=feedburner&utm_medium=feed&utm_campaign=Feed%3A+elheraldo_titulares+%28El+Heraldo+-+Titulares%29 6046617cf041a1a909df66272021-03-07 14:17:15esDecomisan 60 kilos de presunta cocaína en San Pedro Sulaelheraldo.hnhttps://www.elheraldo.hn/inicio/1447829-465/decomiso-droga-honduras-narcotrafico?utm_source=feedburner&utm_medium=feed&utm_campaign=Feed%3A+elheraldo_titulares+%28El+Heraldo+-+Titulares%29 602d1ab32c54ed0668b7d1e22019-08-28 13:59:55enChina police detain instigator of RRR cut rumor: newspaperreuters.comBEIJING (Reuters) - Police in China have ordered that a person said to have spread a rumor that the central bank had announced a cut in a key bank reserve ratio be detained for five days, the Shanghai Securities News said on Wednesday. The newspaper reported the move on its website, citing an unnamed source. On March 29, private chat groups on China’s social media platform WeChat shared what appeared to be a paragraph pasted from a story by the official Xinhua news agency saying the People’s Bank of China had announced a cut in the reserve requirement ratio (RRR) to take effect two days later on April 1. The central bank denied the reports a few hours later. On April 2, PBOC said it had asked the police to investigate the incident. China has been stepping up efforts to police potentially destabilizing content on its already stringently censored internet.https://www.reuters.com/article/us-china-economy-rrr-rumour/china-police-detain-instigator-of-rrr-cut-rumor-newspaper-idUSKCN1VI1NP 606817e8fa2429648e92c67f2021-03-19 09:25:22esArrestan a hombre que intentó violar a niña de 13 años en Colónelheraldo.hnCOLÓN, HONDURAS.- Por intentar abusar sexualmente de una menor de 13 años, la Policía Nacional arrestó -en las últimas horas- a un hombre en el sector de San Martín, Trujillo, Colón. A través de una denuncia al Sistema de Emergencia 911, las autoridades dieron con el individuo de 26 años de edad de quien se desconoce su identidad. LEA: Accidente entre bus rapidito y turismo deja dos personas heridas en la Cerro Grande De acuerdo al informe policial, el sospechoso fue retenido el pasado jueves 18 de marzo por ciudadanos que, acudieron al auxilio de la niña cuando era objeto de la supuesta agresión sexual. Agentes de la Policía llegaron hasta el lugar para realizar el arresto del sujeto, quien mostraba signos de estar bajo los efectos del alcohol. Luego de ser detenido, se trasladó al imputado a una estación policial para documentar el expendiente investigativo, bajo el delito de agresión sexual en su grado de tentativa en contra de la menor. +Matan a una