BM 10 Each course includes a clear statement of learning outcomes in respect of both knowledge and skills. There is reasoned coherence between learning outcomes, the strategy for use of e-learning, the scope of the learning materials and the assessment methods used.

Learning outcomes express what students should have achieved when they have completed the course. These outcomes will be specified in terms of knowledge, skills, vocational/professional competencies, personal development, etc. and will usually be a combination of these.
Each course should have a specification which sets out the relationship between learning outcomes and their assessment. The course design team should ensure that the assessment strategy reinforces the teaching strategy.
Decisions about the use of e-learning and e-assessment should be made on the basis of providing the most effective means of achieving and assessing the learning outcomes. There should be a clear rationale for the use of e-learning and the level of support provided.

Descrição do curso

Cada curso inclui uma clara definição dos resultados de aprendizagem formuladas em competências (incluindo a conhecimento, capacidades e atitudes). Existe uma coerência fundamentada entre os resultados da aprendizagem, a estratégia de formação presencial e à distância, os materiais de aprendizagem e os métodos de avaliação utilizados [BM 10]

Os resultados de aprendizagem definem as competências que os formandos devem ter desenvolvido após completar o curso de Blended Learning. Estes resultados são especificados como competências vocacionais/profissionais (descrevendo os conhecimento, as capacidades, as atitudes, o desenvolvimento pessoal, etc).

Cada curso deve especificar a relação entre os resultados de aprendizagem e a sua avaliação. A equipa do design do curso deve garantir que a estratégia de avaliação reforça a estratégia de ensino.

As decisões sobre a exploração de e-assessment devem ser feitas tendo em vista fornecer os meios mais eficientes para atingir e avaliar os resultados de aprendizagem. A avaliação colaborativa pode também ser utilizada.

A descrição do curso deve ser comunicada aos stakeholders (principalmente aos formandos) atempadamente (de preferência antes de dar início ao curso).

BM 11 Learning outcomes determine the means used to deliver course content. In a blended-learning context there an explicit rationale for the use of each component in the blend.

Course designers should adopt a logical approach to their use of e-learning. Fitness for purpose should drive decisions on the selection of educational components. The blending should be such that methods and media are well chosen for the purposes they need to fulfil. Course designers must resolve the tension between:

• the flexibility of access to resources offered by the anywhere, anytime availability of e-learning
• the flexibility of educational interaction offered by face-to-face contact between students and teachers.

If it is not possible to deliver learning outcomes solely through e-learning then some face-to-face techniques may be essential.

Resultados de aprendizagem

Este parêmetro foi alterado atendendo ao contexto dos cursos baseados no modelo do projeto TIBL [BM 11]:

Os cursos de Blended Learning devem ser desenhado tendo em vista um balanço adequado entre a aprendizagem à distância (maioritariamente online) e as sessões presenciais.

BM 12 Course design, development and evaluation involve individuals or teams with expertise in both academic and technical aspects.

The course design process should be carried out by staff who are equipped to address both academic and technical aspects of e-learning. Those involved in the course design process require experience of e-learning and its capabilities. In a rapidly evolving field much of this experience is gained through project participation rather than formal qualifications.
The development of high quality e-learning content is dependent on close collaboration and good communication between academic course designers and those responsible for the production of the constituent media components. Engagement between academics and media professionals in the technical design contributes significantly to the effectiveness of course materials.
A key issue that affects working relationships is whether technical design inputs should be integrated with the academic and pedagogic design process or applied to the outputs from this process. Institutions should consider the most appropriate methodologies to use in their specific context.

Conhecimento técnico e sobre a formação

O design, desenvolvimento e a avaliação do curso envolve indivíduos ou equipas com conhecimento tanto nos aspetos da formação como técnicos [BM 12].

O processo do design do curso deve ser executado pelas equipas ou formadores que estão preparados para tomar decisões ao nível dos aspetos técnicos e  formativos do Blended Learning (que inclui formação presencial e à distância).

O acima referido, inclui:

• A experiência em e-learning e das suas potencialidades
• Numa área de evolução muito rápida, a maior parte desta experiência é adquirida através da participação em projeto e não tanto com qualificações formais.

O desenvolvimento do conteúdo de alta qualidade (tanto para a componente presencial como para a aprendizagem à distância) depende da colaboração próxima e boa comunicação entre designers de curso (com um conhecimento profissional avançado na área de formação do curso) e os responsáveis pela produção (uma tarefa sobretudo técnica). O compromisso entre ambos os grupos no design técnico contribui significativamente para a eficácia dos materiais do curso. Nas PME’s, pode ocorrer haver membros com as duas valências (técnica e de formação).

Uma questão fundamental que afeta as relações de trabalho prende-se com a questão da integração do design técnico: se deve integrado com o conteúdo e o processo do design técnico ou aplicado aos resultados deste processo. As instituições devem considerar as metodologias mais adequadas a utilizar no seu contexto específico..

BM 13 OER and other third-party material is selected with regard to learning outcome, tailored if necessary for fit to the learning context, and integrated with other learning materials. These materials are subject to the same review processes as other course materials.

Open Educational Resources (OER) are digital materials offered freely and openly for use and reuse by educators and students. OER can be found through the large institutional and collaborative repositories that now exist.
A course designer could develop a course by picking existing OER components, or other third-party resources (and perhaps customising them), rather than developing new material from scratch.
The resulting e-learning material should be judged under the same quality criteria as newly-authored material or bought-in material.
An important benefit of OER is that the licence to freely change material makes it possible to update and improve it, allowing high quality e-learning components to evolve as users improve content and offer it back to the OER community.
Rights must be carefully tracked to ensure that the appropriate level of access is preserved and that authors are credited where appropriate. The intellectual property rights associated with OER (often one of the Creative Commons licences) usually allow material to be used without cost for non-commercial purposes and allow material to be freely reversioned and updated.

Utilização de materiais disponíveis na Internet (REA)

OER and other third-party material are selected with regard to learning outcome. They are tailored if necessary, in order to fit to the learning context, and integrated with other learning materials. These materials are subject to the same review processes as other course materials [BM 13].

Os Recursos Educativos Abertos – REA (OER em Inglês) são materiais digitais disponíveis em formato aberto para uso e reutilização por educadores/formadores e estudantes/formandos. Os OER são disponibilizados em repositórios institucionais e colaborativos acessíveis na Internet. Um benefício importante dos REA é que a licença para alterar livremente o material torna possível atualizá-lo e melhorá-lo, permitindo que os componentes e-learning da formação evoluam à medida que os utilizadores melhoram os conteúdos e os devolvem à comunidade.

Um designer de cursos pode desenvolver um curso selecionando REA já existentes ou outros recursos de terceiros e se necessário adapta-los, em vez de desenvolver material novo de raiz.

A utilização de REA deve ter em conta vários critérios:

• O material e-learning resultante deve ser avaliado segundo critérios de qualidade de um novo produto ou de um material adquirido ou deve ser atualizado tendo em conta os padrões de qualidade mais recentes.
• O material disponível numa língua estrangeira deve ser traduzido (com algumas exceções menores)
• Os direitos devem ser cuidadosamente designados para garantir um acesso adequado e que os autores são creditados quando necessário.

Os direitos da propriedade intelectual associados com os REA (muitas vezes uma das licenças é Creative Common) normalmente permitem que o material seja utilizado sem custos para fins não comerciais e que seja atualizado e revertido.

BM 14 E-learning materials have sufficient interactivity (student-to-content or student-to-student) to encourage active engagement and enable students to test their knowledge, understanding and skills.

E-learning opens up many possibilities for interactivity in learning materials and activities. Interactivity can relate to an individual student using online resources such as simulations, animations and quizzes. It can also relate to students interacting with each other via online communication tools such as forums, wikis or web conferencing.
Individual students will benefit from the active approach to learning and the feedback provided by simulations and interactive formative assessments. These techniques can encourage deeper learning.
Online communications and collaboration tools have great potential in providing support and academic community building for distributed student populations. Their use can be a make or break factor for some students, and can make the learning experience far more engaging and lively for everyone.

Interatividade

Os materiais e-learning e da formação presencial têm interatividade adequada (formando-conteúdo, entre pares, formando-formando e com formador, formando-formador) de modo a incentivar um envolvimento ativo e fomentar uma aprendizagem sustentada. Tal permite também que os formandos testem o seu conhecimento, compreensão e capacidades (competências) [BM 14].

O Blended Learning envolve várias possibilidades de interatividade integrada nos materiais e nas atividades de aprendizagem, tanto na componente de formação online como na presencial.

• A interatividade ser introduzida através da exploração de recursos online, tal como simulações, animações e testes.
• Também pode envolver interação entre os formandos (atividades envolvendo os pares) através de ferramentas de comunicação online, tal com fóruns, wikis ou webconferência.

Os formandos irão beneficiar da abordagem ativa da aprendizagem, de opções de formação individualizada e do feedback fornecido pelas simulações ou avaliações formativas interativas. Estas técnicas podem incentivar a aprendizagem aprofundada e promover aprendizagem sustentada.

BM 15 Independent learning materials provide learners with regular feedback through self-assessment activities or tests.

Independent learning materials may be designed to serve the needs of several courses or programmes; such packages should therefore be self-contained, have clear learning objectives and measurable outcomes.
When delivered by e-learning the materials should be designed to maximise the use of interactive techniques to provide opportunity for student self-assessment of progress towards learning outcomes.
E-learning offers opportunities for embedded interactive formative assessment with automated feedback. Development of these assessments requires significant academic input and collaboration with experts in the facilities available through the institution’s VLE systems. The benefits to students through rapid feedback are considerable.

Materiais de aprendizagem

Os materiais de aprendizagem fornecem aos alunos feedback regular através de atividades de autoavaliação ou testes [BM 15].

Podem ser concebidos materiais de aprendizagem específicos para atender às necessidades de vários cursos ou programas; estes materiais devem ser autónomos, possuir objetivos de aprendizagem claros e resultados de aprendizagem mensuráveis (Micro Aprendizagem).

Quando geridos via e-learning (tanto na componente de formação presencial como na componente à distância), os materiais devem ser concebidos para maximizar a interação e de modo a proporcionar aos formandos oportunidades de autoavaliação dos progressos alcançados em relação aos resultados de aprendizagem esperados.

O e-learning oferece oportunidades de avaliação formativa interativa e de feedback automatizado. O desenvolvimento dessas componentes de avaliações requer contributos de peritos do conteúdo e de peritos com competências técnicas no desenvolvimento de recursos usando as potencialidades das plataformas de aprendizagem das instituições. Os benefícios do feedback para os formandos são consideráveis porque lhe permitem autorregular a sua aprendizagem. Acresce que a exploração de materiais de formação interativo e multimédia oferece feedback motivador aos formandos.

BM 16 Courses conform to explicit guidelines concerning layout and presentation and are as consistent as possible across a programme.

This benchmark tests aspects of good practice in materials design. A poor score in this area may indicate that the institution should make a greater investment in the contribution of media professionals to course design teams.
It is recommended that institutions implement a framework of technical, accessibility and presentational standards that apply to e-learning materials. This framework should include the following factors:

• Interfaces should conform to usability and accessibility standards.
• materials should be accessible to users with special requirements, for example students with a visual impairment or limited manual dexterity.
• Learning materials should have good graphic design standards.
• Materials should be neutral as to sex, ethnicity, age and so on.
• Software should be up-to-date and platform neutral.
• course developers should take into account download times.
• Learning materials should be accessible and usable via a variety of devices including mobile devices.
• Style sheets and schemas should be used to provide consistency of presentation.
• Course developers should be provided with suitable authoring tools.
• Learning material should use responsible design (to fit best to multiple devices).
  (This item is an enhancement in the frame of the TIBL project.)

Conformidade

Este parâmetro de referência pode ser utilizado sem fazer grandes alterações.

BM 17 Courses provide both formative and summative assessment. Assessment is explicit, fair, valid and reliable. Appropriate measures are in place to prevent impersonation and/or plagiarism, especially where assessments are conducted online.

Course design should provide opportunities for formative and summative assessment.
Continuous assessment may fulfill both formative and summative functions. Feedback from tutors/mentors on assessment tasks provides the learner with reinforcement or direction for remedial learning. Teachers should be required to provide timely feedback aimed at improvement. Marking criteria need to be uniformly understood and consistently applied.
Peer and self-review can also be used for formative assessment. Clear marking criteria are needed for this to be a valuable exercise.
The development team should aim to exploit the interactivity inherent in e-learning, particularly through formative assessment activity, to confirm and reinforce student learning. Formative assessment may be built into the design of structured teaching materials.
The use of e-learning raises issues of verification of student identity, and measures should be taken to prevent impersonation and plagiarism. These measures may include: checking identities at approved examination centres; using software to detect plagiarism and collusion; cross-referencing and correlation between performance on written examinations and on continuous assessment.

Avaliação

Este parâmetro de referência adequa-se sem qualquer alteração a cursos profissionais (VET).

BM 18 Course materials, including the intended learning outcomes, are regularly reviewed, up-dated and improved using feedback from stakeholders as appropriate.

The institution should have procedures to ensure effective review and updating processes. Independent evaluation of course design and course materials should be carried out to ensure comparability with national or professional standards
In the case of e-learning courses, the evaluation process should address subject content, modes of delivery and levels of interactivity. For example:

• external assessors should be engaged to review course design and provide developmental feedback
• the monitoring and evaluation process should provide documented feedback for improvement and redevelopment
• whilst in presentation, data on patterns of student use may be gathered and analysed
• evaluation information should be sought via student surveys.

In an e-learning situation there is the potential for generation of very extensive data on student performance, etc. for quality improvement. The course design team should devise a strategy for exploiting this.

Actualidade

Este parâmetro de referência pode ser utilizado sem grandes alterações no contexto de cursos baseados no modelo TIBL.