Due 23:00 on 2nd December 2022, weighting of 70% toward the final mark.

The objective of this assessment task is for you to conduct and write-up a pilot study. The pilot study will include a small scale experiment to evaluate the feasibility and predict the costs of a full-scale study. This will give you experience of planning, running, debugging, analysing and interpreting the results of a small-scale evaluation.

Milestones

Milestones for the assessment are outlined below.

1.  Develop your Project Idea

The first step for your assignment will be for you to find an appropriate research question. You are encouraged to use the project proposal idea from homework task two, but can modify the idea or use a different idea if you want.  Either way, you should try to ensure that the  research question is grounded in your area of PG study currently undertaken (computer science, software engineering, engineering or information technology related projects are all acceptable) and has the potential to generate new knowledge in that area . The study should also involve at least one specific testable hypothesis and include an experiment to test that hypothesis. If you are unsure of whether your study meets these criteria or not you should consult with the module leader.

Please note that more marks will be awarded for the completion of technically challenging projects but it is more important for the study to be well presented and completed through all the relevant stages of the scientific method than for it to demonstrate ability in less relevant areas such as software development or mathematics. You can check the marking scheme at the end of this document for a more detailed description of how marks are to be awarded.

2.  Literature Review

An  initial  literature  review will  help to justify your  research  problem, and  inform your choice of methodology. You should take care to find the most relevant frontline literature for your research and if the research cannot be justified using the literature, for example if someone has done a very similar study or you find a study that makes the research redundant, you should consider an alternative problem. Remember to keep track of your references using endnote or similar reference management software.

3.  Pilot Study

Run your pilot study with a small number of people (e.g., classmates or friends). The goal here is to both debug your study, to see how amenable your data is to analysis, to see what kind of results you are getting, and ultimately to revise the design of your experiment to prepare for a full-scale study. You will probably have to:

    Book rooms if needed.

    Prepare any necessary paperwork, equipment and/or software (including consent forms) .

    Solicit and schedule subjects.

    Run subjects and collect data/observations.

    Analyse the data and interpret the results.

Depending on  results, you  might want to  repeat this stage one or  more times with a  modified procedure to ensure that you have sufficient information for the final report.

4.  Project Report

This will be a 4-8 page paper prepared in LaTeX using the stylesheet and template provided as a guide for structure and content. The report will detail all aspects of the project including an introduction, background, problem statement,  methodology, results, analysis, discussion, and future work. The discussion section should include an outline of any ethical and legal issues related to the methodology employed and an outline of the social and professional implications of the research. You will submit electronic and printed copies of the paper with additional electronic appendices including all the data generated by the experiments, as well as copies of the presentation material and any other documents generated throughout the project.

6.  Project interview

The final milestone of the project will be to attend a short interview with the module leader where you will be expected to answer questions about your project, show the data generated during the project and demonstrate any software or hardware developed for the project. The time of the interview will be arranged by the module leader. During the interview you will be required to have your project material available (including the project data plus any hardware or software developed for the project) and demonstrate how your experimental data was generated and analyzed. You will not receive a mark for this assignment if you do not attend the arranged interview, cannot provide the appropriate project material, or do not answer the questions to satisfactorily demonstrate that the project is your own work.

Submission

An electronic copy of the Project Report should be uploaded to Learning Mall in pdf format. This should include additional electronic appendices including all the data generated by the experiments as well as copies of the presentation material and any other documents generated throughout the project. The   proposal must be formatted using the LaTeX template and stylesheet provided. This is a compulsory   requirement.

Dates

The deadline for submission is 23:00 on 2nd December 2022.

Electronic copies of the Initial Write-up and Project Report should be uploaded to Learning Mall in pdf format. The electronic copy of the final report should include additional electronic appendices including all the data generated by the experiments and any other documents generated throughout the project. An additional hard-copy of the report (without appendices) should be left in the lecturer’s mailbox.

Learning Outcomes

On completion of this assessment task you should be able to:

A – Critically evaluate scholarly work including your own in terms of its contribution to the field of computer science.

B – Conduct and critically analyse experimental work in computer science.

C – Demonstrate critical awareness of legal, ethical, social and professional issues in computer science.

D – Demonstrate effectively the skills to structure, write and deliver formal presentations such as technical and research reports, adhering to relevant codes of practice .

Marking Scheme

A total of 100 points are available for this assessment. Your mark will be your score as a percentage of the total points available. This will be given a weighting of 70% towards the final mark for the module. So, for example, if your total mark for the assignment is 60 points this will contribute 42% (60/100*70%=42%) toward your final grade for the module. The list below describes the total points available for each assignment component.

A)  Literature Review - Knowledge and Understanding of Concepts and Literature. (10 points)

a.   Referenced

b.   Relevant

c.   Demonstrates understanding

d.   Comprehensive

e.   Coherent framework

f.   Includes critical discourse

g.   Demonstrates insight

h.   Understanding is also drawn from additional sources

B)  Problem Statement and Motivation (10 points)

The problem statement should include a hypothesis (or equivalent research question) that can be tested empirically to generate new knowledge. There should also be justification as to why the problem is worth solving such as an outline of how the knowledge generated could be       applied to some practical application.

a.   Provided

b.   Clearly Stated

c.   Focused

d.   Original

e.  Adequate justification for the research is given

f.   Thoughtful critical discussion of the motivation for the research

C)  Research Methodology (10 points)

a.   Provided

b.  Justified

c.   Alternative methodologies considered

d.   Critical reflection regarding the choice of methodology

D)  Analysis of empirical data (10 points)

The project should include an experiment that tests your hypothesis from assignments two or generates data to answer your research question.

a.   Empirical data is generated

b.  Analysis is attempted

c.   Analysis is adequate (i.e. the results can help with the research question)